新闻动态
新闻动态
- 买到烂尾楼到底该有多绝望?
- ***如古代长城用的是C140混凝土,那千百年下来会完整的留存至今还是损坏的更加严重?
- 大街上看到大白腿,忍不住瞄了两眼,算不算不尊重女性?
- 为什么《歌手》不请周杰伦、陈奕迅、王菲、张学友、孙燕姿、梁静茹、王力宏、林俊杰当节目嘉宾?
- 妃子笑是荔枝中最难吃的品种吗?
- “哨兵模式”涉嫌泄密,你支持封杀特斯拉吗?
- 现在是2025年6月,现在的房价是阴跌还是暴跌?还会继续跌多久?是否已经开始分化?
- 哪个牌子的护肤品好呀?想给妈妈买一套抗衰老的护肤品?
- ***如古代长城用的是C140混凝土,那千百年下来会完整的留存至今还是损坏的更加严重?
- 谷歌云服务宕机导致 OpenAI、Shopify 等服务中断,此次宕机的具体技术原因是什么?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 00:10:12 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-18 15:40:13有什么是你去了西藏才知道的事情?
-
2025-06-18 16:20:13你见过身边身材最好的女生是什么样子的?
-
2025-06-18 15:15:13为什么女性基本都不学习自由泳?
-
2025-06-18 16:00:14使用 Go 语言开发大型 MMORPG 游戏服务器怎么样?
-
2025-06-18 15:45:13维护一个大型开源项目是怎样的体验?
-
2025-06-18 15:55:13如何看LOL官方,把AL的冠军改成优胜者?
相关产品
