我记得之前显示不允许抓取
淘宝热卖也做了百度竞价
热议
推荐楼 antbt 10小时前
不知道 百度可以可以更换ua爬 但是结果应该不会放出来，不然就违反robots.txt 了
具体咋回事不知道我用 ...
感觉有点淘宝做不过拼夕夕
2楼 小号专用马甲 10小时前
https://www.taobao.com/robots.txt
3楼 uov 10小时前
https://www.taobao.com/robots.txt
site出来好几万 是咋回事
爬虫强爬吗
4楼 小号专用马甲 10小时前
uov 发表于 2022-6-25 00:01
site出来好几万 是咋回事
爬虫强爬吗
不知道 百度可以可以更换ua爬 但是结果应该不会放出来，不然就违反robots.txt 了
具体咋回事不知道我用bing 也可以搜到淘宝商品
可能是淘宝流量不好 放开了一点吧
6楼 DogeLee2 10小时前
现在电脑看个东西都要登录
隔壁强子就不需要
还有某多多根本没pc端
7楼 sky170 10小时前
抓了也没用，看个商品还要登录
8楼 东风破 10小时前
淘宝越来越不行了
9楼 mjjok 9小时前
淘宝其他二级域名有些页面允许抓取的。
申明：本文内容由网友收集分享，仅供学习参考使用。如文中内容侵犯到您的利益，请在文章下方留言，本站会第一时间进行处理。