新闻动态
新闻动态
- 各位都在用Docker跑些什么呢?
- 30年过去了,美国没有比B2更强的轰炸机了么?
- 养乌龟是什么体会?
- 鸿蒙电脑正式发布,今年的大一新生会不会扎堆购买鸿蒙电脑?
- 为什么现在的年轻人宁愿自己工资低点,也要过得舒服、不那么累?
- HTTP/3 解决了什么问题,又引入了什么新问题?
- Rust 的设计缺陷是什么?
- php这个岗位在未来几年会消失吗,因为刚从事php有点焦虑?
- 如何看待M4单核性能吊打9950x?
- 为什么都认为无GC语言一定会比有GC语言要快?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 12:40:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-25 06:50:15如何看待湖北的省域副中心城市襄阳和宜昌?
-
2025-06-25 06:35:15「绝世美女」都有什么特点?
-
2025-06-25 06:55:15怎么学习前端开发?求推荐学习路线?
-
2025-06-25 06:05:14PHP现在真的已经过时了吗?
-
2025-06-25 07:15:14四岁的女孩儿跳舞怕压腿,家长该坚持吗?
-
2025-06-25 07:35:16肉做的鲸能轻松下潜2000米,为何钢铁之躯的潜艇却不行?
相关产品