1276 подписчиков
Парсеры, которые бегают по Интернету и собирают контактные данные для создания баз компаний на xmldatafeed.com, работают вот на таких бросовых VDS. См. картинку. Каждая по ~250 р. в месяц - чуть меньше, чем чашка вкусного кофе :) И каждая такая виртуальная машина позволяет в сутки собрать информацию с ~15к сайтов.
Хотите в сутки собирать данные с 1 млн. сайтов? Вам это будет стоить около 15 000 р. в месяц- ничего по сути в рамках бизнеса.
В мире, по моим прикидкам, где-то ~100 млн. работающих сайтов (не доменов, а сайтов), нам потребуется 100 дней, чтобы собрать данные со всех них. Всего лишь 100 дней... И это будет стоить копейки блин. Это я вам изнанку бизнеса показываю.
Но мы в начале пути. Сделать надо еще тааак много, аж пугаюсь :) Правда признаюсь - сам то я не работаю, ребята все делают, а я лишь создаю атмосферу :) Покупаю сижу ПК новый для специалистов на DNS, потом руковожу ремонтом в офисе и т.п. :) короче делаю ничего.
Около минуты
6 декабря 2023