Журнал «Современная Наука»

Исследование защиты от веб-ботов: влияние защиты на торговые веб-сайты и её взаимосвязь с посещаемостью и релевантностью в поисковой выдаче

Бабарицкий Павел Александрович (Аспирант, ФГАОУ ВО «Национальный исследовательский университет ИТМО»)

Государев Илья Борисович (К.п.н., доцент, ФГАОУ ВО «Национальный исследовательский университет ИТМО»)

Данная статья описывает исследование взаимодействия автоматизированных систем сборщиков информации и противопоставленных им методов и средств защит от них. Охватывает работу как с автоматическими сборщиками, на базе языка программирования Python, а также рассматривает примеры различных средств защит, с которыми могут столкнутся веб-боты. Включает в себя результаты сбора информации и статистические данные о выборки сегмента интернет-магазинов, такие как посещаемость, релевантность и наличие защиты. На основе вышеупомянутых данных, был сформирован прогноз о вероятности наличия защиты в зависимости от популярности сайта или положения его в поисковой системе.

Ключевые слова:web-scrapping; web-crawler; security; web-bots, web-parsing.

Читать полный текст статьи …

Ссылка для цитирования:
Бабарицкий П. А., Государев И. Б. Исследование защиты от веб-ботов: влияние защиты на торговые веб-сайты и её взаимосвязь с посещаемостью и релевантностью в поисковой выдаче // Современная наука: актуальные проблемы теории и практики. Серия: Естественные и Технические Науки. -2021. -№12. -С. 58-65 DOI 10.37882/2223-2966.2021.12.04

ПРАВОВАЯ ИНФОРМАЦИЯ:
Перепечатка материалов допускается только в некоммерческих целях со ссылкой на оригинал публикации. Охраняется законами РФ. Любые нарушения закона преследуются в судебном порядке.
© ООО "Научные технологии"