12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?

2025-06-21 23:35:16

你当然可以爬12306。

要不携程飞猪去哪网这些的数据是哪来的。

这种爬虫反而给12306省流量。

因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。

而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。

不过你要是一天爬它几亿次,就别怪晶哥抓你了。

12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
广告位810*200
相关阅读
systemd吞并了什么?

systemd吞并了什么?

只吞了init的。 剩下的那些玩意儿,只是套个壳。 比如...

2025-06-22
三只羊是不是被人做局了?

三只羊是不是被人做局了?

有这样一个直播间,里面的主播们,个个不是明星却胜似明星,曾志...

2025-06-22
程序员空闲时间应该继续卷技术,还是找其他副业?

程序员空闲时间应该继续卷技术,还是找其他副业?

J***a/Web/Android程序员可考虑下面的副业,技...

2025-06-22
JetBrains 放弃 AppCode 是否是一个错误决定?

JetBrains 放弃 AppCode 是否是一个错误决定?

不算错误。 没人会用AppCode写objc和swift的...

2025-06-22
PHP初学者,我能不能使用PHP来开发桌面应用?

PHP初学者,我能不能使用PHP来开发桌面应用?

盘点一下这些年PHP在桌面应用方面的解决方案今天作者给大家盘...

2025-06-22