admin 管理员组

文章数量: 887021

爬虫-网站地址及反爬机制

1.安居客:https://cd.zu.anjuke/fangyuan/wuhou/x1/ - requests

2.贝壳找房:https://cd.zu.ke/zufang/#contentList - requests

3.腾讯视频:https://v.qq/ - 字体反爬

4.酷狗音乐:https://www.kugou/ - requests

5.起点小说:https://www.qidian/ - 待定(看不懂)

6.抖音视频:https://www.douyin/ - 看不懂

7.小红书:https://www.xiaohongshu/ - 好像是requests

8.汽车之家:https://www.autohome/beijing/ - requests

9.哈罗摩托:https://www.jddmoto/ - requests

10.驾考宝典:https://www.jiakaobaodian/ - requests

11.高夫:https://www.jahwa/gf - 报错,不知原因

12.碧桂园官网:https://www.bgy/ - requests

13.中国移动:http://www.10086/index/sc/index_280_280.html - 字体反爬

14.一加手机官网:https://www.oneplus/cn - 字体反爬

15.中国农业银行:https://www.abchina/cn/ - 字体反爬

  1. 天涯社区:http://focus.tianya/ - 字体反爬
  2. 华为官网:https://www.vmall/index_new.html - 字体反爬
  3. 4399游戏:http://www.4399/ - 字体反爬
  4. 前程无忧:https://www.51job/ - 字体反爬
  5. BOSS直聘:https://www.zhipin/chengdu/ - user-agent

本文标签: 爬虫 机制 地址 网站