新闻动态
新闻动态
- 什么是 5G 固定无线接入（FWA）？
- 如何评价前端组件库shadcn/ui?
- 有哪些是你用上了mac才知道的事？
- 你因为什么事情报过警?
- LCD党真的只是少部分人吗？
- 如何看待媒体称山姆超市在国内一年营业额超1000亿？
- 家庭网络，是否有必要做多个网段并隔离？
- 为什么j***a被部分开发者认为是低端技术？
- 2025 国内公司前端团队都在搞些什么?
- 你身边身材最好的女生是什么样？
联系我们
邮箱：youweb@qq.com
手机：13988888888
电话：020-88888888
地址：广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件（反爬虫协议）都没有？
作者：admin 发布时间：2025-06-22 00:40:11 点击：
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站，所有查火车信息的流量（哪怕不买票）就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量（卡放票时间反复刷票），但是如果有人只查票不买票，则对12306的流量消耗为0。
不过你要是一天爬它几亿次，就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-24 01:10:10导师给了1.4W要我给工作室买个主机，是整机还是自己配？
-
2025-06-24 00:05:11为什么伊朗的防空系统失效了？
-
2025-06-24 00:45:11有哪些适合编程用的显示器？
-
2025-06-23 23:55:11有没有一款音乐播放器，能连接nas音乐，创建音乐库，自动匹配歌词封面等等？类似infuse的概念呢？
-
2025-06-24 01:15:11真的没有人觉得2k是一个很尴尬的分辨率吗？
-
2025-06-24 00:20:11go的channel在实际项目中会怎么使用？
相关产品
