新闻动态
新闻动态
- 女生真正的完美身材是什么样子？
- 马斯克宣布星舰将配备 42 台发动机，如何评价这一设计？
- 能够自己一个人创业的全栈web码农fullstack developer要会哪些技术？
- 公司规定所有接口都用 post 请求，这是为什么？
- 你身边身材最好的女生是什么样？
- 中国大陆的苹果手机被阉割了哪些部分?
- 如果苹果真的下架了微信的话，会发生什么？
- golang为什么要内置map？
- 你从什么时候开始感觉孩子不属于你了？
- 如何评价基努•里维斯的演技？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 05:05:14 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
- 上一篇： 上一篇 : 美国真会下场对伊朗开战吗？
- 下一篇： 下一篇 : 怎么可以让胸变大？
新闻资讯
-
2025-06-20 02:45:15为什么面对 Adobe 的版权要求下，vposy 大神还能从容不迫？
-
2025-06-20 04:10:14蜂鸟音乐指控邓紫棋侵权，要求 48 小时内下架重录歌曲，邓紫棋回应「不会下架」，这一指控合理吗？
-
2025-06-20 02:35:15请问有人能估计一下 go 相比 php 在不同用户量下能省多少钱吗？
-
2025-06-20 03:20:14如何看待伊朗国家电视台发文称“今晚将会发生一件大事，让世界铭记几个世纪”？
-
2025-06-20 03:00:16鱼缸里突然在水面角落出现很多想泡沫一样的气泡是怎么回事？
-
2025-06-20 03:00:16Office 中为何还要保留 Access 数据库?
相关产品
