python模拟登录获取cookie_python爬虫运用cookie模拟登录知乎

前面已经介绍过&＃xff0c;运用表单填写帐号&＃xff0c;用户名的方式模拟登录知乎。若登录成功&＃xff0c;则之后就可以利用COOKIE登入&＃xff0c;无需重复之前步骤。

importrequestsimporthttp.COOKIEjarfrom bs4 importBeautifulSoup

session&＃61;requests.Session()

session.COOKIEs&＃61; http.COOKIEjar.LWPCOOKIEJar("COOKIE")

agent&＃61; ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Maxthon/5.1.2.3000 Chrome/55.0.2883.75 Safari/537.36‘headers&＃61;{"Host": "www.zhihu.com","Origin":"https://www.zhihu.com/","Referer":"http://www.zhihu.com/",‘User-Agent‘:agent

}

postdata&＃61;{‘password‘: ‘*******‘, #填写密码

‘account‘: ‘********‘, #填写帐号

}

response&＃61; session.get("https://www.zhihu.com", headers&＃61;headers)

soup&＃61; BeautifulSoup(response.content, "html.parser")

xsrf&＃61; soup.find(‘input‘, attrs&＃61;{"name": "_xsrf"}).get("value")

postdata[‘_xsrf‘] &＃61;xsrf

result&＃61; session.post(‘http://www.zhihu.com/login/email‘, data&＃61;postdata, headers&＃61;headers)

session.COOKIEs.save(ignore_discard&＃61;True, ignore_expires&＃61;True)

运行后&＃xff0c;在代码所在文件夹中出现COOKIE文件。

现在加载COOKIE登录&＃xff1a;

importrequestsimporthttp.COOKIEjar as COOKIElib

session&＃61;requests.session()

session.COOKIEs&＃61; COOKIElib.LWPCOOKIEJar(filename&＃61;‘COOKIE‘)try:

session.COOKIEs.load(ignore_discard&＃61;True)except:print("COOKIE 未能加载")defisLogin():

url&＃61; "https://www.zhihu.com/"login_code&＃61; session.get(url, headers&＃61;headers, allow_redirects&＃61;False).status_codeif login_code &＃61;&＃61; 200:returnTrueelse:returnFalseif __name__ &＃61;&＃61; ‘__main__‘:

agent&＃61; ‘Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Maxthon/5.1.2.3000 Chrome/55.0.2883.75 Safari/537.36‘headers&＃61;{"Host": "www.zhihu.com","Origin": "https://www.zhihu.com/","Referer": "http://www.zhihu.com/",‘User-Agent‘: agent

}ifisLogin():print(‘您已经登录‘)

运行后显示&＃xff1a;您已经登录。

COOKIElib模块的主要作用是提供可存储COOKIE的对象&＃xff0c;以便于requests模块配合使用来访问Internet资源。COOKIElib模块非常强大&＃xff0c;我们可以利用本模块的COOKIEJar类的对象来捕获COOKIE并在后续连接请求时重新发送&＃xff0c;比如可以实现模拟登录功能。该模块主要的对象有COOKIEJar、FileCOOKIEJar、MozillaCOOKIEJar、LWPCOOKIEJar。

它们的关系&＃xff1a;COOKIEJar —-派生—->FileCOOKIEJar  —-派生—–>MozillaCOOKIEJar和LWPCOOKIEJar

默认的是FileCOOKIEJar没有实现save函数。

而MozillaCOOKIEJar或LWPCOOKIEJar都已经实现了。

所以可以用MozillaCOOKIEJar或LWPCOOKIEJar&＃xff0c;去自动实现COOKIE的save。

COOKIEJar

/

FileCOOKIEJar

/                   \

MozillaCOOKIEJar      LWPCOOKIEJar