Rock 提问于 12月 之前

像淘宝，天猫都是用robots.txt协议禁止搜索引擎抓取收录。这样的话我把淘宝天猫的产品及产品介绍详情复制出来，放到自己网站上。测试过是收录的，就是收录量太少，我用的Wordpress程序做网站，而且基本的seo也会去做，sitemap也向搜索引擎提交过地址。相比不是淘宝天猫复制的网站内容就收录快。现在的问题淘宝天猫复制出来的内容收录量太少，收录也非常缓慢。请问下zac，有木有什么好的建议和方法。

3 个回答

Zac 管理员 回答于 12月 之前

淘宝天猫的内容别的地方不一定就没有，如果别的地方早就有了，你再复制过来，一样是复制内容。

搜索引擎并没有办法知道你是复制淘宝天猫的，还是自己写的，只能判断是否重复。

冯耀宗 回答于 12月 之前

1、首先我认为robots只是一个协议，并不能禁止搜索引擎爬取，所以搜索引擎数据库很有可能有淘宝天猫的网页数据，只是没办法，要遵守协议，不敢放出来而已。

2、搜索引擎其实很想收录淘宝、天猫的内容，毕竟他们的页面是高质量比较高，品牌也比较强，只是淘宝天猫不想依赖百度，所以当初选择断臂求生。把百度禁了。

3、如果你的站点品牌比较大，百度其实和希望你去把淘宝天猫的内容转载过来，毕竟他想收录淘宝天猫，但淘宝天猫不允许，但你帮百度转过来，这对百度是个好事情，但如果说你不是大品牌的网址，那可能有点麻烦，比较淘宝天猫都是电商页面，涉及到产品搜索引擎管控相对而言都比较严格，毕竟担心你小网站抄真详情页卖假货。

来源：SEO每天一贴 Zac 昝辉