新闻动态
新闻动态
- 日本AV对中国人的毒害有多大？
- 为什么要学go语言，golang的优势有哪些？
- 脸与身材不符是种怎样的体验？
- 周杰伦为什么不告粥饼伦黑伦侵犯他的名誉权?
- 想往鱼缸里种点水草，但是家里鱼缸大了买水草泥或者底砂太贵了，有没有生活中可以替代的物品或其他建议？
- 医生不同科室之间有没有隔行如隔山的现象？
- vmware 虚拟机如何安装？
- 如果苹果真的下架了微信的话，会发生什么？
- 为什么Mac连个正儿八经的CAD都装不了还敢打着生产力的旗号？
- J***a现在好找工作吗？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 13:50:12 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-27 04:40:10obsidian用一两年后会有多大？全文搜索还快吗？
-
2025-06-27 03:20:10postgresql也很强大，为何在中国大陆，mysql成为主流，postgresql屈居二线呢？
-
2025-06-27 03:10:11媒体曝光有学生吸食打火机气体成瘾，打火机气体中有哪些成分？吸食会对身体有怎样的伤害？
-
2025-06-27 03:45:10有邻居的追求者出价三万，让我连续半个月每天找个女朋友晚上弄点动静，我该答应吗？
-
2025-06-27 04:35:10如何评价《机动战士高达》中的塞拉·玛斯?
-
2025-06-27 04:05:10雷军为什么不愿意用性价比打法进军NAS？
相关产品
