新闻动态
新闻动态
- 如何评价鸿蒙电脑无法编写其自身运行的程序？
- 你们认为一个40多岁的女人老吗？
- 生活中怎样的美女才能被称为「大」美女？
- 媒体称以色列防空成本一晚近 3 亿美元，最多再撑 12 天，美方会支援吗？若无美补给结果会如何？
- 有什么食物是你一直想吃，真吃到却很失望的？
- 感觉鱼缸久了底下火山石里脏脏的，能彻底换水清理一遍不？
- Golang 的 Web 框架该怎么选择？Web 开发又该怎样学？
- 伊朗这次让以色列打惨了，这个国家还能挺过来吗？
- antv x6 node 点击***不触发怎么办？
- 开战斗机从上海到北京要多久，那是一种什么样的体验？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 15:25:11 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-21 06:50:092025 年 6 月，Rust 在 GUI 方面有何大的进展? 你最看好哪个框架?
-
2025-06-21 07:30:09性在婚姻生活中真的重要吗?
-
2025-06-21 07:35:10网络小白如何建立一个网站，供别人下载文件（主要是PDF和MP3）?
-
2025-06-21 06:45:10Linux 内核的系统有没有类似macOS 那样漂亮流畅的桌面环境的发行版本?
-
2025-06-21 06:35:09印度急着与上合组织撇清关系意欲何为？
-
2025-06-21 07:30:09为什么《歌手》不请周杰伦、陈奕迅、王菲、张学友、孙燕姿、梁静茹、王力宏、林俊杰当节目嘉宾？
相关产品
