Парсинг сайтов и выгрузка в Excel
Коротко
Я собираю на Python общедоступные данные с сайтов, очищаю их и превращаю в аккуратные таблицы Excel или CSV. Для компаний, исследователей и онлайн-продавцов, которым нужен мониторинг товаров и цен, анализ рынка или списки объявлений и компаний, я передаю готовый к работе файл с данными и, при желании, скрипт для повторного запуска.
- От
- 40 $
- Срок
- 2 дня
- Правки
- 2 правки
- Python
- Excel
Что вы получаете
Что входит в эту услугу?
Сбор данных
Полностью собирает данные о товарах, ценах, объявлениях, отзывах и компаниях со всех страниц.
Аккуратный Excel
Таблицы Excel, CSV или Google Sheets с понятными заголовками, фильтрами и без дублей.
Очистка и проверка
Цены, даты и телефоны приводятся к единому формату, неполные записи помечаются.
Динамические сайты
Работает и с сайтами, где контент подгружается через JavaScript, бесконечную прокрутку или пагинацию.
Регулярное обновление
Для мониторинга цен и наличия данные автоматически обновляются ежедневно или еженедельно.
С соблюдением правил
Работает в щадящем темпе, только с публичными данными и с учётом условий использования сайта.
Процесс
Как мы работаем шаг за шагом
Вы всегда знаете, что происходит: без сюрпризов, с еженедельным прогрессом.
- 01
Источники и поля
Вместе определяем сайты, нужные поля и структуру столбцов.
- 02
Проверка возможности
Изучаю структуру сайта, условия использования и наличие официального API.
- 03
Пример данных
Сначала присылаю образец на несколько сотен строк, а после согласования формата собираем всё.
- 04
Сбор и очистка
Собираются все данные, удаляются дубли, поля приводятся в порядок.
- 05
Сдача
Вы получаете файл Excel/CSV и, в зависимости от пакета, скрипт для повторного запуска с инструкцией.
Технологии
Инструменты, которые я использую
- Python
- Excel
Пакеты
Выберите подходящий пакет
Это стартовые цены; когда проект станет ясен, я подготовлю индивидуальное предложение.
Базовый
40 $
2 дня · 1 правка
- 1 сайт
- До 1 000 записей
- До 10 полей
- Файл Excel или CSV
- Самый популярный
Стандарт
100 $
4 дня · 2 правки
- До 3 сайтов
- До 10 000 записей
- Очистка и объединение данных
- Скрипт для повторного запуска
Про
200 $
7 дней · 3 правки
- До 5 сайтов
- До 100 000 записей
- Автообновление ежедневно / еженедельно
- Выгрузка в Google Sheets в реальном времени
- 30 дней бесплатной поддержки
Цены устанавливаются в турецких лирах; показанная сумма приблизительна и рассчитана по дневному курсу.
Вопросы
Частые вопросы об этой услуге
Не нашли ответ? Просто напишите мне в Telegram.
Сбор общедоступных данных в разумных объёмах обычно возможен, но нужно соблюдать условия использования сайта, авторское право и законы о персональных данных. Я не собираю данные за авторизацией, персональные данные и то, что сайт прямо запрещает; в спорных случаях советую проконсультироваться с юристом.
С большинства публичных страниц: интернет-магазинов, досок объявлений, каталогов и сайтов компаний. Если на сайте сильная защита от ботов или парсинг прямо запрещён, я сначала предложу официальный API или другой источник.
Несколько тысяч записей с одного сайта обычно готовы за 1–2 дня. Для крупных или защищённых сайтов срок становится понятен на этапе образца.
В пакеты «Стандарт» и «Про» входит скрипт, который можно перезапустить одной командой. В пакете «Про» данные обновляются автоматически с заданной вами периодичностью.
Давайте
начнём.
Расскажите о проекте — в тот же день я пришлю план работ и стоимость.