Python模拟登陆的几种方法
目录
方法二：模拟登陆后再携带获得的cookie访问windows
正文
方法一：直接使用已知的cookie访问
特色：
简单，但须要先在浏览器登陆cookie
原理：
简单地说，cookie保存在发起请求的客户端中，服务器利用cookie来区分不一样的客户端。由于http是一种无状态的链接，当服务器一会儿收到好几个请求时，是没法判断出哪些请求是同一个客户端发起的。而“访问登陆后才能看到的页面”这一行为，偏偏须要客户端向服务器证实：“我是刚才登陆过的那个客户端”。因而就须要cookie来标识客户端的身份，以存储它的信息（如登陆状态）。session
固然，这也意味着，只要获得了别的客户端的cookie，咱们就能够假冒成它来和服务器对话。这给咱们的程序带来了可乘之机。app
咱们先用浏览器登陆，而后使用开发者工具查看cookie。接着在程序中携带该cookie向网站发送请求，就能让你的程序假扮成刚才登陆的那个浏览器，获得只有登陆后才能看到的页面。工具
具体步骤：
1.用浏览器登陆，获取浏览器里的cookie字符串post
先使用浏览器登陆。再打开开发者工具，转到network选项卡。在左边的Name一栏找到当前的网址，选择右边的Headers选项卡，查看Request Headers，这里包含了该网站颁发给浏览器的cookie。对，就是后面的字符串。把它复制下来，一下子代码里要用到。网站
注意，最好是在运行你的程序前再登陆。若是太早登陆，或是把浏览器关了，极可能复制的那个cookie就过时无效了。
2.写代码
urllib库的版本：
import sys import io from urllib import request sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') #改变标准输出的默认编码
#登陆后才能访问的网站
url = 'http://ssfw.xmu.edu.cn/cmstar/index.portal'
#浏览器登陆后获得的cookie，也就是刚才复制的字符串
cookie_str = r'JSESSIONID=xxxxxxxxxxxxxxxxxxxxxx; iPlanetDirectoryPro=xxxxxxxxxxxxxxxxxx'
#登陆后才能访问的网页
url = 'http://ssfw.xmu.edu.cn/cmstar/index.portal' req = request.Request(url) #设置cookie
req.add_header('cookie', raw_cookies) #设置请求头
req.add_header('User-Agent', 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.113 Safari/537.36') resp = request.urlopen(req) print(resp.read().decode('utf-8'))
requests库的版本：
import requests import sys import io sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') #改变标准输出的默认编码
#登陆后才能访问的网页
url = 'http://ssfw.xmu.edu.cn/cmstar/index.portal'
#浏览器登陆后获得的cookie，也就是刚才复制的字符串
cookie_str = r'JSESSIONID=xxxxxxxxxxxxxxxxxxxxxx; iPlanetDirectoryPro=xxxxxxxxxxxxxxxxxx'
#把cookie字符串处理成字典，以便接下来使用
cookies = {} for line in cookie_str.split(';'): key, value = line.split('=', 1) cookies[key] = value
方法二：模拟登陆后再携带获得的cookie访问
原理：
咱们先在程序中向网站发出登陆请求，也就是提交包含登陆信息的表单（用户名、密码等）。从响应中获得cookie，从此在访问其余页面时也带上这个cookie，就能获得只有登陆后才能看到的页面。
具体步骤：
1.找出表单提交到的页面
仍是要利用浏览器的开发者工具。转到network选项卡，并勾选Preserve Log（重要！）。在浏览器里登陆网站。而后在左边的Name一栏找到表单提交到的页面。怎么找呢？看看右侧，转到Headers选项卡。首先，在General那段，Request Method应当是POST。其次最下方应该要有一段叫作Form Data的，里面能够看到你刚才输入的用户名和密码等。也能够看看左边的Name，若是含有login这个词，有可能就是提交表单的页面（不必定！）。
这里要强调一点，“表单提交到的页面”一般并非你填写用户名和密码的页面！因此要利用工具来找到它。
2.找出要提交的数据
虽然你在浏览器里登录时只填了用户名和密码，但表单里包含的数据可不仅这些。从Form Data里就能够看到须要提交的全部数据。
3.写代码
urllib库的版本：
import sys import io import urllib.request import http.cookiejar sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') #改变标准输出的默认编码
#登陆时须要POST的数据
data = {'Login.Token1':'学号', 'Login.Token2':'密码', 'goto:http':'//ssfw.xmu.edu.cn/cmstar/loginSuccess.portal', 'gotoOnFail:http':'//ssfw.xmu.edu.cn/cmstar/loginFailure.portal'} post_data = urllib.parse.urlencode(data).encode('utf-8') #设置请求头
headers = {'User-agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.113 Safari/537.36'} #登陆时表单提交到的地址（用开发者工具能够看到）
login_url = ' http://ssfw.xmu.edu.cn/cmstar/userPasswordValidate.portal
#构造登陆请求
req = urllib.request.Request(login_url, headers = headers, data = post_data) #构造cookie
cookie = http.cookiejar.CookieJar() #由cookie构造opener
opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor(cookie)) #发送登陆请求，此后这个opener就携带了cookie，以证实本身登陆过
resp = opener.open(req) #登陆后才能访问的网页
url = 'http://ssfw.xmu.edu.cn/cmstar/index.portal'
#构造访问请求
req = urllib.request.Request(url, headers = headers) resp = opener.open(req) print(resp.read().decode('utf-8'))
requests库的版本：
import requests import sys import io sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') #改变标准输出的默认编码
#登陆后才能访问的网页
url = 'http://ssfw.xmu.edu.cn/cmstar/index.portal'
#浏览器登陆后获得的cookie，也就是刚才复制的字符串
cookie_str = r'JSESSIONID=xxxxxxxxxxxxxxxxxxxxxx; iPlanetDirectoryPro=xxxxxxxxxxxxxxxxxx'
#把cookie字符串处理成字典，以便接下来使用
cookies = {} for line in cookie_str.split(';'): key, value = line.split('=', 1) cookies[key] = value #设置请求头
headers = {'User-agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.113 Safari/537.36'} #在发送get请求时带上请求头和cookies
resp = requests.get(url, headers = headers, cookies = cookies) print(resp.content.decode('utf-8'))
明显感受requests库用着更方便啊~~~
方法三：模拟登陆后用session保持登陆状态
原理：
session是会话的意思。和cookie的类似之处在于，它也可让服务器“认得”客户端。简单理解就是，把每个客户端和服务器的互动看成一个“会话”。既然在同一个“会话”里，服务器天然就能知道这个客户端是否登陆过。
具体步骤：
1.找出表单提交到的页面
2.找出要提交的数据
这两步和方法二的前两步是同样的
3.写代码
requests库的版本
import requests import sys import io sys.stdout = io.TextIOWrapper(sys.stdout.buffer,encoding='utf8') #改变标准输出的默认编码
#登陆时须要POST的数据
data = {'Login.Token1':'学号', 'Login.Token2':'密码', 'goto:http':'//ssfw.xmu.edu.cn/cmstar/loginSuccess.portal', 'gotoOnFail:http':'//ssfw.xmu.edu.cn/cmstar/loginFailure.portal'} #设置请求头
headers = {'User-agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.113 Safari/537.36'} #登陆时表单提交到的地址（用开发者工具能够看到）
login_url = 'http://ssfw.xmu.edu.cn/cmstar/userPasswordValidate.portal'
#构造Session
session = requests.Session() #在session中发送登陆请求，此后这个session里就存储了cookie #能够用print(session.cookies.get_dict())查看
resp = session.post(login_url, data) #登陆后才能访问的网页
url = 'http://ssfw.xmu.edu.cn/cmstar/index.portal'
#发送访问请求
resp = session.get(url) print(resp.content.decode('utf-8'))
方法四：使用无头浏览器访问
特色：
功能强大，几乎能够对付任何网页，但会致使代码效率低
原理：
若是能在程序里调用一个浏览器来访问网站，那么像登陆这样的操做就垂手可得了。在Python中可使用Selenium库来调用浏览器，写在代码里的操做（打开网页、点击……）会变成浏览器忠实地执行。这个被控制的浏览器能够是Firefox，Chrome等，但最经常使用的仍是PhantomJS这个无头（没有界面）浏览器。也就是说，只要把填写用户名密码、点击“登陆”按钮、打开另外一个网页等操做写到程序中，PhamtomJS就能确确实实地让你登陆上去，并把响应返回给你。
具体步骤：
1.安装selenium库、PhantomJS浏览器
2.在源代码中找到登陆时的输入文本框、按钮这些元素
由于要在无头浏览器中进行操做，因此就要先找到输入框，才能输入信息。找到登陆按钮，才能点击它。
在浏览器中打开填写用户名密码的页面，将光标移动到输入用户名的文本框，右键，选择“审查元素”，就能够在右边的网页源代码中看到文本框是哪一个元素。同理，能够在源代码中找到输入密码的文本框、登陆按钮。
3.考虑如何在程序中找到上述元素
Selenium库提供了find_element(s)_by_xxx的方法来找到网页中的输入框、按钮等元素。其中xxx能够是id、name、tag_name（标签名）、class_name（class），也能够是xpath（xpath表达式）等等。固然仍是要具体分析网页源代码。
4.写代码
import requests import sys import io from selenium import webdriver sys.stdout = io.TextIOWrapper(sys.stdout.buffer, encoding='utf8') #改变标准输出的默认编码
#创建Phantomjs浏览器对象，括号里是phantomjs.exe在你的电脑上的路径
browser = webdriver.PhantomJS('d:/tool/07-net/phantomjs-windows/phantomjs-2.1.1-windows/bin/phantomjs.exe') #登陆页面
url = r'http://ssfw.xmu.edu.cn/cmstar/index.portal'
# 访问登陆页面
browser.get(url) # 等待必定时间，让js脚本加载完毕
browser.implicitly_wait(3) #输入用户名
username = browser.find_element_by_name('user') username.send_keys('学号') #输入密码
password = browser.find_element_by_name('pwd') password.send_keys('密码') #选择“学生”单选按钮
student = browser.find_element_by_xpath('//input[@value="student"]') student.click() #点击“登陆”按钮
login_button = browser.find_element_by_name('btn') login_button.submit() #网页截图
browser.save_screenshot('picture1.png') #打印网页源代码
print(browser.page_source.encode('utf-8').decode()) browser.quit()