新闻动态
新闻动态
- 为什么大家觉得中医一无是处?
- 为什么bilibili后端要用go来写?
- 刚学前端的小白,想问问全站框架nextjs+shadcn+prisma为什么在国内不火呢?
- 该怎么反驳有的人说;“东德和西德,朝鲜和韩国就是上帝摆出来最大的例子”?
- 为什么CCTV-6总是能播一些连院线都上不了的电影?
- 有没有什么办法可以让双系统同时运行?
- 你会让自己的孩子长期参与一项体育运动吗?坚持的目的是什么?
- 做好的flask项目怎么部署到服务器,使用公网ip可访问?
- 有一个***约你出去,你会去吗?
- 用K8s的公司有多少人会部署K8s?
联系我们
邮箱:youweb@qq.com
手机:13988888888
电话:020-88888888
地址:广东省广州市番禺经济开发区
公司动态
12306 网站的根目录下为什么连 robots.txt 文件(反爬虫协议)都没有?
作者:admin 发布时间:2025-06-22 13:15:16 点击:
你当然可以爬12306。
要不携程飞猪去哪网这些的数据是哪来的。
这种爬虫反而给12306省流量。
因为如果没有第三方网站,所有查火车信息的流量(哪怕不买票)就都得是12306接收。
而这些网站虽然在抢票的时候会浪费一些流量(卡放票时间反复刷票),但是如果有人只查票不买票,则对12306的流量消耗为0。
不过你要是一天爬它几亿次,就别怪晶哥抓你了。
。
新闻资讯
-
2025-06-26 09:45:17电脑有64G的物理内存(DDR5 5200),完全够用了,可以关闭系统的虚拟内存吗?
-
2025-06-26 11:30:20拒绝情绪输出,大家觉得有什么办法可以让国足堂堂正正进入世界杯?
-
2025-06-26 10:15:19女朋友是跳拉丁舞的,跳双人舞时会有身体接触,作为男友我感觉有点吃醋怎么办?
-
2025-06-26 11:15:19python与nodejs哪个性能高?
-
2025-06-26 11:35:18Golang 的 Web 框架该怎么选择?Web 开发又该怎样学?
-
2025-06-26 11:25:19这种裙子是不是对直男爆杀?
相关产品