Цены конкурентов, каталоги товаров, отзывы, вакансии — забираем регулярно и отдаём в вашем формате: таблица, база данных или отчёт об изменениях в Telegram. Это то, что называют парсингом сайтов или скрапингом.
Если сотрудник раз в неделю открывает десяток сайтов и переносит цифры в таблицу — эту работу забирает сбор данных.
Разовый скрипт от фрилансера отработал один раз, через месяц сайт-источник поменял вёрстку — и таблица молча заполняется пустотой или старыми цифрами.
Сбор идёт по расписанию, каждая выгрузка проверяется на полноту, а если источник изменился — мы узнаём об этом раньше вас и чиним.
Стоимость зависит от числа источников, объёма данных и того, как часто их нужно обновлять. Точную смету называем после короткого брифа.
Какие сайты, какие поля и как часто нужны данные — и что вы будете с ними делать
Снимаем небольшой тестовый срез и показываем вам, чтобы сверить поля до запуска
Ставим сбор на расписание, подключаем проверки и выгрузку в ваш формат
Следим за сбоями, чиним после изменений на источниках, добавляем поля по запросу
На практике эти слова используют как синонимы. Строго говоря, скрапинг — это получить страницу с сайта, а парсинг — разобрать её в структуру: поля, числа, единицы измерения. В услугу входит и то, и другое, поэтому мы просто говорим «сбор данных».
Мы собираем только открытые данные — те, что сайт показывает любому посетителю без авторизации: цены, описания товаров, публичные отзывы, вакансии. Не обходим авторизацию, не собираем персональные данные и не берёмся за задачи, где нужно и то, и другое.
Как удобно вам: таблица Excel или Google Sheets, CSV, база данных, доступ по API или готовый отчёт с изменениями в Telegram.
Сбор встанет — так бывает с любым парсером, это вопрос времени, а не качества работы. Разница в том, что на поддержке мы видим сбой по мониторингу и чиним разбор, обычно в тот же или следующий рабочий день, а не узнаём об этом от вас через месяц.
Разовая выгрузка с одного источника — 2–4 рабочих дня. Регулярный сбор с расписанием и отчётами — около недели.
Опишите, какие данные собираете сейчас вручную и как часто они нужны. Если задача не решается — скажем сразу.