12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?

2025-06-22 16:30:12

你当然可以爬12306。

要不携程飞猪去哪网这些的数据是哪来的。

这种爬虫反而给12306省流量。

因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。

而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。

不过你要是一天爬它几亿次,就别怪晶哥抓你了。

12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
广告位810*200
相关阅读
为什么华为价值2.3W的鸿蒙电脑用的是美国西数的SN740固态硬盘?

为什么华为价值2.3W的鸿蒙电脑用的是美国西数的SN740固态硬盘?

你问出这种问题除了表现得你完全不懂,或者说有意带节奏外,不能...

2025-06-26
苹果 6 月 10 日召开的 2025 年全球开发者大会「WWDC25」,有哪些值得关注的信息?

苹果 6 月 10 日召开的 2025 年全球开发者大会「WWDC25」,有哪些值得关注的信息?

长图文预警!!! 0.前置省流本次 WWDC 最值得一看的是...

2025-06-26
27 寸显示器和 24 寸显示器在使用体验上有多大差别?

27 寸显示器和 24 寸显示器在使用体验上有多大差别?

这种问题,光用文字阐述是没办法回答的,直接上图就是了。 作...

2025-06-26
为什么QQ上的网络状态没有了?

为什么QQ上的网络状态没有了?

现在是2025年,Mac 版新QQ仍然有这个网络在线状态,只...

2025-06-26
为什么程序员独爱用Mac进行编程?

为什么程序员独爱用Mac进行编程?

鉴于现在iPad os越来越像mac os。 众多程序员们爱...

2025-06-26