新闻动态
新闻动态
- 全国各地现理发店倒闭潮,没有电商冲击,理发店为什么自己能干黄?
- 有哪些故意缩短产品寿命的设计?
- 我男朋友年薪远高于我,我说因为女生生理结构需要生娃,生娃这件事情女性需要比男生牺牲更多,我说的对吗?
- 想往鱼缸里种点水草,但是家里鱼缸大了买水草泥或者底砂太贵了,有没有生活中可以替代的物品或其他建议?
- 脸与身材不符是种怎样的体验?
- 为什么师父不愿把真本事传给弟子?
- 为什么五笔没人用了?
- 6 月 20 日陈楚生首次夺得《歌手》排名第一名,这个结果背后的标准和机制是什么?
- Rust连续多年成为最受欢迎的语言,为啥国内使用的人还是很少?
- Rust使用?多次传播错误后,怎么定位最开始发生error的地方?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-21 23:35:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-25 23:00:21Golang 的 Web 框架该怎么选择?Web 开发又该怎样学?
-
2025-06-25 23:55:16为什么年轻人不要养龟?
-
2025-06-25 23:10:16存QQ号码,究竟该用int类型还是string类型?
-
2025-06-25 23:50:16为什么突破性的技术总是最先发生在西方?
-
2025-06-26 00:00:17为什么女儿的反应这么强烈?
-
2025-06-26 00:00:17养龟玩龟的人可怕吗?
相关产品