Анализ современных поисковых роботов

Автор: Аладин Д.В., Афанасьев Г.И.

Журнал: Теория и практика современной науки @modern-j

Рубрика: Математика, информатика и инженерия

Статья в выпуске: 3 (21), 2017 года.

Бесплатный доступ

Данная статья посвящена аналитическому обзору современных поисковых роботов. Приведены общие правила и принципы построения поисковых агентов. Рассмотрены варианты применения поисковых роботов. Помимо этого, представлены примеры передовых Open Source проектов поисковых агентов.

Поисковая система, поисковый агент, поисковый робот, поисковый паук, поисковый скребок

Короткий адрес: https://sciup.org/140271116

IDR: 140271116

Список литературы Анализ современных поисковых роботов

Сегалович И. Как работают поисковые системы. [Электронный ресурс]. URL: http://download.yandex.ru/company/iworld-3.pdf (дата обращения 25.03.2017).
Курс продвижения сайтов: работа поисковых систем. [Электронный ресурс]. URL: http://denweb.ru/seo/osnovy-prodvizheniya-sajtov-rabota-poiskovyx-sistem.html (дата обращения 25.03.2017).
Процессы поисковых систем. [Электронный ресурс]. URL: http://www.sembook.ru/book/poiskovye_sistemy/protsessy-poiskovykh-sistem/ (дата обращения 25.03.2017).
M. Тим Джонс. Создание "Web-пауков" в Linux. [Электронный ресурс]. URL: https://www.ibm.com/developerworks/ru/library/l-spider/?S_TACT=105AGX99&S_CMP=CP (дата обращения 25.03.2017).
Дэвид Мерц. Очаровательный Python: Собираем данные в Web с помощью mechanize и Beautiful Soup. [Электронный ресурс]. URL: https://www.ibm.com/developerworks/ru/library/l-python-mechanize-beautiful-soup/index.html (дата обращения 25.03.2017).
Scrapy. Architecture overview. [Электронный ресурс]. URL: https://doc.scrapy.org/en/master/topics/architecture.html (дата обращения 25.03.2017).
Grab - фреймворк для парсинга сайтов. [Электронный ресурс]. URL: http://docs.grablib.org/ru/latest/ (дата обращения 25.03.2017).
Pyspider. Architecture. [Электронный ресурс]. URL: http://docs.pyspider.org/en/latest/Architecture/ (дата обращения 25.03.2017).

Еще

Статья научная