Я разработал сервер Nodejs express, и я обеспокоен трафиком искателя .... я имею в виду, если кто-то начнет отправлять запрос на мой сервер, чтобы он его отключил, то как обнаружить или избегайте этого.Как обнаружить трафик искателя на моем сервере Nodejs
благодарит заранее.
Трудно сказать, что вы действительно спрашиваете здесь.
Если вы действительно спрашиваете, как вы можете идентифицировать искателя, когда они делают запрос вашего сайта, тогда все хорошо выполненные сканеры (например, из Google) идентифицируют себя в запросе. Вы можете увидеть, как Google сканеры делают это here.
Если вы действительно задаетесь вопросом, как вы можете защитить свой сервер от ситуации, когда вы получаете слишком много трафика сразу, а часть этого трафика связана с сканерами, то это очень широкий вопрос и потребует много информацию о вашем конкретном экземпляре сервера, какой масштаб он поддерживает в настоящий момент и т. д. Вот одна статья по общей теме: Web Crawlers: Love the Good, but Kill the Bad and the Ugly.
Для Google вы можете сказать, какова максимальная скорость сканирования на вашем сайте. См. Эту страницу Google под названием "Change Googlebot crawl rate", хотя этот параметр остается в силе в течение 90 дней, поэтому он наиболее полезен, когда вы сначала добавляете тонну нового контента на свой сайт, который захочет увидеть искатель.
Примечание: Вы вызываете также реализуете файл robots.txt, чтобы проинструктировать сканера, какие части вашего сайта следует избегать.