request.session() не может автоматически обновлять файлы cookie

Question

Я использую python 3.5.2. Я хочу отказаться от веб-страницы, где необходимы файлы cookie. Но когда я использую request.session(), файлы cookie, хранящиеся в сеансе, не обновляются, поэтому мой скребок не удался постоянно. Ниже приведен фрагмент кода.

import requests 
from bs4 import BeautifulSoup 
import time 
import requests.utils 

session = requests.session() 
session.headers.update({"User-Agent": "Mozilla/5.0 (Windows NT 6.2; WOW64; rv:50.0) Gecko/20100101 Firefox/50.0"}) 
print(session.cookies.get_dict()) 
url = "http://www.beianbaba.com/" 
session.get(url) 
print(session.cookies.get_dict()) 

У вас есть идеи по этому поводу? Большое вам спасибо заранее.

Answer 1

Похоже, что этот запрос веб-сайта не предоставляет куки. Я использовал тот же самый код, но просил для https://google.com:

import requests 
from bs4 import BeautifulSoup 
import time 
import requests.utils 

session = requests.Session() 
session.headers.update({"User-Agent": "Mozilla/5.0 (Windows NT 6.2; WOW64; rv:50.0) Gecko/20100101 Firefox/50.0"}) 
print(session.cookies.get_dict()) 
url = "http://google.com/" 
session.get(url) 
print(session.cookies.get_dict()) 

И получил этот результат:

{} 
{'NID': 'a cookie that i removed'}