新闻动态
新闻动态
- 佛山的发展越来越差了,应该怎么扭转局面?
- 大一下计科,又想学做web项目,又想学算法搞acm应该如何取舍?
- 国产手机APP为什么越来越臃肿?
- 男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?
- 一个程序员的水平能差到什么程度?
- 养殖户用铁锹拍鳄鱼不怕鳄鱼冲过去死亡翻滚吗?
- 能发一张在暧昧期的聊天记录吗?
- 每次去国外,别人一眼就看出我是中国人,是中国人身上有什么特质吗?
- Unity收费***后,为何大家选择了Godot而不是Cocos?
- Rust 使用 Result 的错误处理方式与 Golang 使用 error 的方式有什么本质区别?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 17:35:17 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-27 20:25:15女人到中年越来越看不上自己的老公怎么办?
-
2025-06-27 19:55:16养乌龟是什么体会?
-
2025-06-27 19:00:16有邻居的追求者出价三万,让我连续半个月每天找个女朋友晚上弄点动静,我该答应吗?
-
2025-06-27 20:25:15现实中的父女关系是怎样的?
-
2025-06-27 20:30:19Anthropic 推出的 Claude Code Agent 有哪些亮点值得关注?
-
2025-06-27 19:25:16什么样的人算是中了基因***?
相关产品