@BruFor

Как собирают аналитику сервисы типа 2ip.ru, ipinf.ru, www.similarweb.com и др.?

Добрый день!

Интересен вопрос, каким образом, например, ipinf.ru собирает информацию о доменах расположенных на одном IP?
Есть идея, для реализации которой надо получать данную инфу в автоматическом режиме. Но мало какие сервисы предоставляют информацию посредством API, у некоторых есть API но непонятное или дорогое ценообразование. Пытаюсь понять каким образом лучше организовать этот процесс, и вообще понять первоисточники данной информации.

Спасибо!

С уважением, BruFor
  • Вопрос задан
  • 166 просмотров
Пригласить эксперта
Ответы на вопрос 3
@ynblpb_spb
дятел php
Предполагаю, что скачиваются списки доменов от регистраторов (они в открытом доступе)
Берутся только делегированные домены
Дальше по списку проходятся домены и резолвятся ip адреса
Всё складывается в базу и получаем необходимые привязки
Ответ написан
sim3x
@sim3x
Дешевле заплатить

Гуглите
В открытых источниках много всего лежит
Ответ написан
latteo
@latteo
Кое что можно напарсить в самих сервисах, кое что в ПС:
https://www.bing.com/search?q=ip%3A178.248.232.5

В интернетах при должном гугление можно найти гигабайтные архивы (и это в архиве) с доменами.
Пишешь dns резолвер на своём любимом языке программирования, запускаешь в 100 потоков и через несколько недель или месяцев ;) у тебя будет такая база. Которую хорошо бы еще и обновлять...
Ответ написан
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через TM ID
Похожие вопросы