官方文档目录请求响应居然是 404,这样做有什么特别作用么?
如题,在想把官网文档下载本地当离线用,居然发现用 github 最人气的 curl 类请求抓取出错,抓起其它网站正常,查看了下响应,居然是 404 Not Found,站长这么做有什么特别用意吗,感觉这样响应会直接屏蔽搜索引擎抓取,不方便收录吧。
推荐文章: