官方文档目录请求响应居然是 404,这样做有什么特别作用么?

如题,在想把官网文档下载本地当离线用,居然发现用 github 最人气的 curl 类请求抓取出错,抓起其它网站正常,查看了下响应,居然是 404 Not Found,站长这么做有什么特别用意吗,感觉这样响应会直接屏蔽搜索引擎抓取,不方便收录吧。:astonished:

《L01 基础入门》
我们将带你从零开发一个项目并部署到线上,本课程教授 Web 开发中专业、实用的技能,如 Git 工作流、Laravel Mix 前端工作流等。
《G01 Go 实战入门》
从零开始带你一步步开发一个 Go 博客项目,让你在最短的时间内学会使用 Go 进行编码。项目结构很大程度上参考了 Laravel。