➤ 2. Как вы создаете базу транспортных компаний?
Наш парсер автоматически заходит на каждый российский сайт в зонах .ru, .su, .рф, сканирует страницы, выбирает контактную информацию и сохраняет ее в нашей базе данных. Затем, другой скрипт производит поиск по собранным данным и отбирает только те, которые подходят по смыслу. Для фильтрации используются ключевые слова и фразы. С использованием параметра «стоп-слов» мы отфильтровываем все то, что не соответствует критериям отбора данных.
В процессе поиска используется морфологическое преобразование с вхождением всех возможных вариантов написания слов, например: «наша транспортная компания», «нашей транспортной компании».
В конечном счете получается точная и наиболее объемная база.