新闻动态
新闻动态
- 大家在做登录功能时，一般怎么做暴力破解防护？
- 中国军队有多强，在世界能排第几？
- 利用爬虫技术能做到哪些很酷很有趣很有用的事情？
- 如何看待天津的排水系统？
- 男朋友说我穿衣服太开放，难道好身材不应该显示出来吗？
- 华为Pura 80首销遇冷，是否说明消费者已经开始对麒麟芯片性能有所觉醒？
- 女朋友去露营，3女2男的，要在野外搭帐篷过一夜，她的闺蜜不想让我去，我该怎么办？
- Rust开发Web后端效率如何？
- 商业史上有哪些降维打击的经典案例？
- DF-41已经可以打击美国本土，这是否相当于古巴导弹危机常态化？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 14:50:16 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-20 15:55:18为什么bilibili后端要用go来写？
-
2025-06-20 16:45:18《酱园弄》电影你期待哪位演员的表演？
-
2025-06-20 15:40:17在武汉，你们的找对象标准是怎样的？
-
2025-06-20 16:50:17为什么市场不制作***黄油？
-
2025-06-20 16:35:18如何评价女明星梅根福克斯的身材？
-
2025-06-20 16:10:19为什么开发一个 AI Agent 看似容易，但真正让它「好用」却如此困难？技术瓶颈主要在哪里？
相关产品
