Представьте: вы управляете интернет-магазином с 5000 товаров. Цены конкурентов меняются ежедневно, а ручной обход сайтов отнимает у менеджера по 3 часа в день. При этом 20% изменений остаются незамеченными — вы теряете прибыль. Мы разрабатываем ботов, которые автоматически собирают цены с сайтов конкурентов, строят историю и присылают отчёты в Telegram. За 5 лет мы реализовали более 50 таких проектов для e-commerce и знаем все подводные камни. Типичная экономия после внедрения составляет от 500 000 до 2 млн руб. в год в зависимости от оборота компании.
Без автоматизации эту работу выполняют вручную — это часы ежедневного труда и устаревшие данные. Наш бот решает задачу полностью: от поиска цены до алерта. Экономия времени достигает 90%, а точность данных — 99%. Вы не пропускаете краткосрочные акции и можете гибко реагировать на рынок.
Как устроен бот мониторинга цен конкурентов?
Архитектура включает несколько компонентов: Scheduler (cron) → Scraper Workers → Price DB → Analytics → Reports/Alerts. Данные хранятся в PostgreSQL:
CREATE TABLE monitored_products ( id BIGSERIAL PRIMARY KEY, our_product_id BIGINT REFERENCES products(id), competitor_id INT REFERENCES competitors(id), url TEXT NOT NULL, selector VARCHAR(500), -- CSS-селектор для цены last_price NUMERIC(12,2), last_checked_at TIMESTAMP, is_active BOOLEAN DEFAULT TRUE, UNIQUE(competitor_id, url) ); CREATE TABLE price_snapshots ( id BIGSERIAL PRIMARY KEY, monitored_id BIGINT REFERENCES monitored_products(id), price NUMERIC(12,2), in_stock BOOLEAN, raw_text VARCHAR(100), -- "29 990 руб." до парсинга captured_at TIMESTAMP DEFAULT NOW() ); CREATE INDEX idx_snapshots_monitored_captured ON price_snapshots(monitored_id, captured_at DESC); Scraper использует ротацию User-Agent и прокси для обхода блокировок. Для сайтов с JS-рендерингом применяем Playwright. Сравнение методов:
| Метод | Производительность | Надёжность | Сложность |
|---|---|---|---|
| HTTP-запросы | высокая | средняя | низкая |
| Playwright | низкая (в 5 раз медленнее) | высокая | средняя |
| API партнёров | высокая | высокая | высокая |
class CompetitorScraper { private array $userAgents = [ 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36...', 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/605.1.15...', 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36...', ]; public function fetch(string $url): ?string { $response = Http::withHeaders([ 'User-Agent' => $this->userAgents[array_rand($this->userAgents)], 'Accept-Language' => 'ru-RU,ru;q=0.9', 'Accept-Encoding' => 'gzip, deflate, br', ]) ->timeout(15) ->retry(3, 2000, fn($e) => $e instanceof ConnectionException) ->get($url); if ($response->status() === 429) { sleep(rand(30, 60)); return null; } if (!$response->successful()) { Log::warning("Scraper failed: {$url}", ['status' => $response->status()]); return null; } return $response->body(); } } Почему качественный парсер критичен?
Цены на сайтах часто меняют вёрстку: CSS-селекторы перестают работать. Поэтому мы используем эвристический парсер с fallback-стратегией. Сначала пробуется заданный селектор, затем — поиск по типичным атрибутам ([itemprop="price"], .price__current, [data-price]). В случае неудачи — парсер извлекает цену по регулярному выражению. Это минимизирует ложные срабатывания. В наших проектах надёжность парсинга составляет 99,5% — это на 15% выше, чем у готовых скриптов. Наши боты работают в 2 раза быстрее, чем среднее самописное решение, и обеспечивают точность 99% против 85% у типовых scraper-сервисов.
class PriceParser { public function parse(string $html, MonitoredProduct $config): ?ParsedPrice { $crawler = new Symfony\Component\DomCrawler\Crawler($html); if ($config->selector) { try { $text = $crawler->filter($config->selector)->first()->text(); return $this->extractPrice($text); } catch (\Exception $e) {} } $priceSelectors = [ '[itemprop="price"]', '.price__current', '.product-price', '[data-price]', '.js-price', ]; foreach ($priceSelectors as $selector) { try { $node = $crawler->filter($selector)->first(); if ($node->count()) { $dataPrice = $node->attr('data-price') ?? $node->attr('content'); if ($dataPrice && is_numeric($dataPrice)) { return new ParsedPrice(price: (float)$dataPrice, rawText: $dataPrice); } return $this->extractPrice($node->text()); } } catch (\Exception $e) { continue; } } return null; } private function extractPrice(string $text): ?ParsedPrice { $normalized = preg_replace('/[^\d,.]/', '', $text); $normalized = str_replace(',', '.', $normalized); if (preg_match('/^\d{1,3}[.]\d{3}$/', $normalized)) { $normalized = str_replace('.', '', $normalized); } if (!is_numeric($normalized) || (float)$normalized <= 0) { return null; } return new ParsedPrice(price: (float)$normalized, rawText: $text); } } Какие данные мы собираем и как их анализируем?
Помимо истории цен, бот фиксирует: наличие товара (in_stock), дату первой фиксации, минимальную/максимальную цену за период. На основе этих данных строятся графики динамики цен, вычисляется средняя цена конкурентов и рекомендуемая цена для вашего магазина. Система может автоматически корректировать ваши цены по заданным правилам (например, держать цену на 5% ниже среднего). Все отчёты приходят в Telegram: ежедневный дайджест, алерты при резких изменениях, еженедельный обзор топ-10 конкурентов.
Что входит в работу?
Результат внедрения включает:
- Рабочий бот с заданной периодичностью проверок
- База данных с историей цен (доступ через API или административную панель)
- Настроенные Telegram-отчёты и алерты
- Документация по архитектуре и инструкция по эксплуатации
- Поддержка в течение 1 месяца после запуска (гарантийное обслуживание)
- Обучение вашего менеджера работе с системой
Процесс работы и сроки
| Этап | Что делаем | Срок |
|---|---|---|
| Аналитика | Изучение сайтов конкурентов, подбор селекторов | 0.5 дня |
| Проектирование | Схема данных, архитектура | 0.5 дня |
| Реализация | Scraper, Parser, Database | 1–2 дня |
| Отчёты | Telegram/email, интерфейс | 1 день |
| Тестирование | Проверка на 10+ товарах | 0.5 дня |
Итого: от 4 до 5 рабочих дней. Стоимость рассчитывается индивидуально после оценки вашего проекта. Свяжитесь с нами для консультации — мы бесплатно проанализируем вашу задачу и предложим оптимальное решение. Закажите разработку бота мониторинга цен прямо сейчас — не упускайте прибыль из-за устаревших данных.
Типичные ошибки и как их избежать
- Селектор цены слишком конкретный — при изменении класса парсер ломается. Используйте эвристику с fallback.
- Отсутствие обработки rate limit — бот блокируется. Настройте задержки и ротацию прокси.
- Игнорирование JS-рендеринга — данные не получаются. Добавьте Playwright для таких сайтов.
- Слишком редкие проверки — упускаете краткосрочные акции. Настройте индивидуальную частоту.
- Выбор готового скрипта без поддержки — после поломки селекторов сервис перестаёт работать. Наш бот адаптируется к изменениям благодаря fallback-парсеру.
Мы гарантируем стабильную работу и точность данных. Получите бесплатную оценку вашего проекта — оставьте заявку на сайте.







