大家下午好！今天给你们说说：“为什么百度一直在抓取你首页，却不抓取内页”当然由于小波站点无法打开，只能用小编的网站给大家演示首先你网站可能没有robots协议文件，可以去百度搜索robots生成即可之前开始小编没有装蜘蛛插件，所以叫他大家不要设置robots是错误的这个就等于去公园你没有门票并且没写...

今天小编用手机搜索：“小刀娱乐网”这个词，看到搜索结果大家可以知道当然在资源网这个词是行业大佬之一，还有包括小刀资源网、小刀网一律被百度屏蔽搜索了，我估计今年年底之前有很多站长也纷纷闭站和不做了吧然而之前网站发的：博客行业第一卢松松博客，那么小刀娱乐网大家知道吗?可惜在百度方面：当然是卢松松比较正规...