Вход в FT.com с запросами Python

Question

Я пытаюсь написать скрипт, который войдет в мою учетную запись FT.com и вытащит некоторые данные для меня.

Первый барьер, очевидно, входит в систему. Я использую для этого библиотеку запросов Pythons.

Вот мой код:

#!/usr/bin/env python 
import requests 


# log into FT website 
log_in_url = 'https://accounts.ft.com/login' 
my_email = 'my@emaill.com' 
my_pass = 'mypassword' 
data = {'email': my_email, 
     'password': my_pass, 
} 

with requests.Session() as session: 
    log_in_request = session.post(log_in_url, data=data) 
    # prints log-in page with error about contacting cus. service 
    print log_in_request.content 

Он просто перенаправляет меня обратно на страницу входа в систему. Он не говорит «неправильные данные» или что-то еще (они определенно правильны). Это просто не позволит мне войти. Я подозреваю, что что-то не так с моим POST-запросом - вроде я пропускаю заголовки или файлы cookie или что-то в этом роде.

Кто-нибудь знает, что может быть?

Cheers,

Дин

Answer 1

При копировании оригинального контента или царапать, не ничтожна объемы данных с сайта футов, вы будете правильно быть заблокирован, как вы будете нарушать их Т & Cs (не упоминать закон об авторском праве).

FT частично финансируется за счет рекламы. Если вы обойдете их, используя Python, вы разрушите легитимный источник дохода.

Я использую этот скрипт, чтобы вытащить свои наблюдатели в Excel, который я использовал, используя copy/paste. Я не использую его для аналитики или для чтения статей. Я читал FT через браузер, который ежедневно показывал достоверную рекламу рекламы.

Пожалуйста, не злоупотребляйте этим. Если вы это сделаете, это, скорее всего, приведет к тому, что каждый платящий абонент будет заблокирован от выполнения даже незначительных объемов навигации на Python.

from robobrowser import RoboBrowser 

browser = RoboBrowser(history=True) 

url='https://accounts.ft.com/login?location=https%3A%2F%2Fwww.ft.com%2F' 

browser.open(url) 
form=browser.get_form() 
form['email']="" 
form['password']="" 
browser.session.headers['Referer'] = url 
browser.submit_form(form) 

Существует программа разработчика FT, если вы хотите выполнить Datamining и так далее: https://developer.ft.com/