15 января в MegaIndex.ru была запущена новая версия индексатора, который собирает внешние ссылки по сайтам рунета и всего мира.
Новая версия реализована на низкоуровневых языках, что позволило увеличить производительность в несколько раз.
За 5 дней индексатор уже обработал более 60% сайтов в СНГ и более 7% сайтов в мире. Для справки, мы оцениваем количество уникальных документов в СНГ в 8 млрд и в 150 млрд в мире. Обновленные или новые ссылки помечаются актуальной датой индексации в отчете по входящим ссылк...
-
Обновление индексатора в MegaIndex.ru
megaindex.org