Самый быстрый способ очистить подписчиков от учетной записи Twitter с помощью Node.js

Question

Из-за предельной скорости API-интерфейса twitter я хотел бы знать, как я мог scrape Количество подписчиков из учетной записи Twitter с Node.js в очень очень быстрый способ? Как вы думаете, Node.js - лучшее решение для этого?

Я понятия не имею, как это работает, но я подумал, что, возможно, соскабливание к мобильной версии Twitter (пример https://mobile.twitter.com/android) будет быстрее, чем версия компьютера.

Как вы думаете? Как я могу это сделать?

Спасибо!

Answer 1

Теперь, когда API-интерфейс Twitter v1.0 устарел, вы должны использовать подписанные запросы oauth. Что означает, что Twitter знает, когда вы злоупотребляете системой.

Документы на клятвенные подписал запросов: https://dev.twitter.com/docs/auth/oauth

Docs на ограничение скорости: https://dev.twitter.com/docs/rate-limiting/1.1

ограничение скорости относится к API, не прошедшие проверку подлинности запросов HTTP, которые просто скрести содержание.

Если вы просто хотите, чтобы число следящих, а не отдельные идентификаторы/детали, вы можете просто очистить страницу с помощью request и использовать jQuery для фильтрации результатов с помощью селекторов.

например. https://twitter.com/foofighters

Вы можете запустить клиентскую сторону, чтобы просмотреть результаты:

$('.js-mini-profile-stats a.js-nav[data-nav=followers] strong').attr('title')