Python模拟登陆一些大型网站的项目

Website login model模拟登陆

收集了一些大网站模拟登陆方式,和一些网站的爬虫程序,使用python,有的是通过selenium登录,有的是通过抓包直接模拟登录,有的是利用scrapy,希望对小白有所帮助,本项目用于研究和分享各大网站的模拟登陆方式,和爬虫程序,会持续更新。

模拟登陆基本采用的是直接登录或者使用selenium+webdriver的方式,有的网站直接登录难度很大,比如qq空间,bilibili等如果采用selenium就相对轻松一些。

虽然在登录的时候采用的是selenium,为了效率,我们可以在登录过后得到的cookie维护起来,然后调用requests或者scrapy等进行数据采集,这样数据采集的速度可以得到保证。

网络爬虫
Python模拟登录和爬虫

模拟登录列表

  •  Facebook模拟登录
  •  微博网页版模拟登录
  •  知乎模拟登录
  •  QQZone模拟登录
  •  CSDN模拟登录--已恢复
  •  淘宝爬虫--重构中
  •  Baidu模拟登录一
  •  果壳爬虫程序
  •  JingDong 模拟登录和自动申请京东试用
  •  163mail--已恢复
  •  拉钩模拟登录--已失效
  •  Bilibili模拟登录
  •  豆瓣
  •  Baidu2模拟登录
  •  猎聘网模拟登录
  •  微信网页版登录并获取好友列表
  •  Github模拟登录两种解决方案都可行
  •  爬取图虫想要的图片
  •  网易云音乐downloader
  •  糗事百科爬虫
  •  淘宝登陆-访问

项目地址:https://github.com/CriseLYJ/awesome-python-login-model