Python爬虫模拟登录的github项目

DecryptLogin

项目地址：

https://github.com/CharlesPikachu/DecryptLogin

项目中文文档：

https://httpsgithubcomcharlespikachudecryptlogin.readthedocs.io/zh/latest/

Support List：

Websites	support PC API?	support mobile API?	in Chinese
weibo	✓	✓	新浪微博
douban	✓	✗	豆瓣
github	✓	✗	Github
music163	✓	✗	网易云音乐
zt12306	✓	✗	中国铁路12306
QQZone	✗	✓	QQ空间
QQQun	✗	✓	QQ群
QQId	✗	✓	我的QQ中心
zhihu	✓	✗	知乎
bilibili	✓	✓	B站
toutiao	✗	✓	今日头条
taobao	✓	✗	淘宝
jingdong	✓	✗	京东
ifeng	✓	✗	凤凰网
sohu	✓	✓	搜狐
zgconline	✓	✗	中关村在线
lagou	✓	✗	拉勾网
twitter	✓	✗	推特
Vultr	✓	✗	Vultr
eSurfing	✓	✗	天翼
renren	✓	✗	人人网
w3cschool	✓	✗	W3Cschool(编程狮)
fishc	✓	✗	鱼C论坛
youdao	✓	✗	有道
baidupan	✓	✗	百度网盘
stackoverflow	✓	✗	stackoverflow

Some Cases by Using DecryptLogin：

Name	Introduction	code	in Chinese
weiboMonitor	click	click	微博监控
QQReport	click	click	生成QQ个人专属报告
bilibiliDownloadUserVideos	click	click	下载B站指定UP主的所有视频
NeteaseSongListDownloader	click	click	网易云个人歌单下载器
NeteaseListenLeaderboard	click	click	网易云个人听歌排行榜
userWeiboSpider	click	click	下载指定微博用户的所有微博数据
NeteaseSignin	click	click	网易云音乐自动签到
weiboEmoji	click	click	微博表情包爬取
weiboSender	click	click	大吼一声发微博

Install

Pip install

run "pip install DecryptLogin"

Source code install

(1) Offline
Step1: git clone https://github.com/CharlesPikachu/DecryptLogin.git
Step2: cd DecryptLogin -> run "python setup.py install"
(2) Online
run "pip install git+https://github.com/CharlesPikachu/DecryptLogin.git@master"

Quick Start

from DecryptLogin import login
lg = login.Login()
infos_return, session = lg.douban(username[telephone], password, 'pc')
infos_return, session = lg.github(username[email], password, 'pc')
infos_return, session = lg.weibo(username[telephone], password, 'mobile')
infos_return, session = lg.music163(username[telephone/email], password, 'pc')
infos_return, session = lg.zt12306(username[telephone], password, 'pc')
infos_return, session = lg.QQZone('mobile')
infos_return, session = lg.QQQun('mobile')
infos_return, session = lg.QQId('mobile')
infos_return, session = lg.zhihu(username, password, 'pc')
infos_return, session = lg.bilibili(username, password, 'pc')
infos_return, session = lg.toutiao(username, password, 'mobile')
infos_return, session = lg.taobao('pc')
infos_return, session = lg.jingdong('pc')
infos_return, session = lg.ifeng(username, password, 'pc')
infos_return, session = lg.sohu(username, password, 'mobile')
infos_return, session = lg.zgconline(username, password, 'pc')
infos_return, session = lg.lagou(username, password, 'pc')
infos_return, session = lg.twitter(username, password, 'pc')
infos_return, session = lg.vultr(username, password, 'pc')
infos_return, session = lg.eSurfing(username, password, 'pc')
infos_return, session = lg.renren(username, password, 'pc')
infos_return, session = lg.w3cschool(username, password, 'pc')
infos_return, session = lg.fishc(username, password, 'pc')
infos_return, session = lg.youdao(username, password, 'pc')
infos_return, session = lg.baidupan(username, password, 'pc')
infos_return, session = lg.stackoverflow(username, password, 'pc')

Website login model

收集了一些各大网站登陆方式， 和一些网站的爬虫程序，有的是通过selenium登录，有的是通过抓包直接模拟登录，有的是利用scrapy,希望对小白有所帮助,本项目用于研究和分享各大网站的模拟登陆方式，和爬虫程序，会持续更新。。。

About

模拟登陆基本采用的是直接登录或者使用selenium+webdriver的方式，有的网站直接登录难度很大，比如qq空间，bilibili等如果采用selenium就相对轻松一些。

虽然在登录的时候采用的是selenium,为了效率，我们可以在登录过后得到的cookie维护起来，然后调用requests或者scrapy等进行数据采集，这样数据采集的速度可以得到保证。

Completed

•  Facebook
•  微博网页版
•  知乎
•  QQZone
•  CSDN
•  淘宝-接口修复完成-可用
•  CSDN--已重构
•  Baidu
•  果壳
•  JingDong 模拟登录和自动申请京东试用
•  163mail
•  拉钩
•  Bilibili
•  豆瓣
•  豆瓣spider
•  Baidu
•  猎聘网
•  微信网页版登录并获取好友列表
•  Github
•  爬取图虫相应的图片
•  网易云音乐
•  糗事百科--改为协程版
•  百度贴吧spider
•  百度翻译

catalogue

•  Facebook模拟登录
•  微博网页版模拟登录
•  知乎模拟登录
•  QQZone模拟登录
•  CSDN模拟登录--已恢复
•  淘宝爬虫--重构中
•  Baidu模拟登录一
•  果壳爬虫程序
•  JingDong 模拟登录和自动申请京东试用
•  163mail--已恢复
•  拉钩模拟登录--已失效
•  Bilibili模拟登录
•  豆瓣
•  Baidu2模拟登录
•  猎聘网模拟登录
•  微信网页版登录并获取好友列表
•  Github模拟登录两种解决方案都可行
•  爬取图虫想要的图片
•  网易云音乐downloader
•  糗事百科爬虫
•  淘宝登陆-访问

Test

Please touch here to view test images

Informations

• 为感谢你们的支持，准备写一套免费爬虫的教程，保证你学会以后可以爬取市面上大部分的网站，教程地址