Парсинг цен конкурентов с помощью ИИ: пример кода и способы

Да, цены конкурентов можно собирать автоматически: ИИ-ассистент пишет для этого скрипт по вашему описанию и чинит его, когда сайт меняет вёрстку. Представьте, что у вас небольшой интернет-магазин и каждое утро вы вручную обходите сайты конкурентов, чтобы понять, не снизил ли кто-то цену. Парсинг цен конкурентов – это и есть автоматический сбор названий, цен и наличия товаров с чужих сайтов в таблицу. Ниже живой пример: скрипт на 26 строк собрал 60 товаров с трёх страниц каталога, и мы сравнили их цены со «своими». Дальше разберём три способа, правила аккуратного сбора и расписание запуска.

Коротко. Если конкурентов от 1 до 5, а товаров до нескольких тысяч, вам хватит скрипта на Python: его пишет ИИ-ассистент, а вы проверяете результат на нескольких товарах руками. Когда сайтов десятки, есть маркетплейсы или нужно сопоставлять товары, удобнее готовый сервис мониторинга. Простые страницы разбирает формула Google Таблиц. Собирайте только открытые данные (цены, названия, наличие), делайте паузы между запросами и читайте правила сайта. Сайты с капчей и защитой от ботов ИИ не открывает.

Если вам нужен общий разбор инструментов вроде Crawl4AI и Browser Use, он есть в статье про AI-парсинг данных. Здесь одна прикладная задача: от пустого экрана до таблицы с ценами.

Какой скрипт напишет вам ИИ-ассистент?

Для опыта мы взяли учебный сайт books.toscrape.com. Его создали специально для тренировки парсинга, и на странице написано, что цены и рейтинги там назначены случайно. Файла robots.txt у сайта нет (адрес отдаёт ошибку 404), поэтому собирать с него данные можно. Реальный магазин для такого теста брать не стоит.

Мы поставили ассистенту такую задачу:

Напиши скрипт на Python (requests + BeautifulSoup).
Он берёт первые 3 страницы каталога books.toscrape.com,
собирает название, цену и наличие каждой книги
и сохраняет всё в CSV. Между запросами пауза 1 секунда.

Вот скрипт, который получился после одного запуска и без правок (26 строк):

import csv
import time
import requests
from bs4 import BeautifulSoup

BASE = "https://books.toscrape.com/catalogue/page-{}.html"
rows = []
start = time.time()
for page in range(1, 4):
    resp = requests.get(BASE.format(page), timeout=15)
    resp.encoding = "utf-8"
    soup = BeautifulSoup(resp.text, "html.parser")
    for card in soup.select("article.product_pod"):
        rows.append({
            "title": card.h3.a["title"],
            "price": card.select_one("p.price_color").text.strip(),
            "stock": card.select_one("p.availability").text.strip(),
        })
    time.sleep(1)  # пауза между запросами

with open("books.csv", "w", newline="", encoding="utf-8") as f:
    writer = csv.DictWriter(f, fieldnames=["title", "price", "stock"])
    writer.writeheader()
    writer.writerows(rows)

print(f"Собрано {len(rows)} товаров за {time.time() - start:.1f} с")

Результат запуска: собрано 60 товаров за 5,8 секунды. Три секунды из них ушли на паузы между страницами. Вот первые строки файла:

title,price,stock
A Light in the Attic,£51.77,In stock
Tipping the Velvet,£53.74,In stock
Soumission,£50.10,In stock
Sharp Objects,£47.82,In stock
Sapiens: A Brief History of Humankind,£54.23,In stock

Цены на сайте в фунтах, поэтому в файле знак «£». В вашем магазине цены в рублях, и вы получите «1 290 ₽» с неразрывным пробелом. Этот хвост нужно очистить перед расчётами, как это сделать, показано в следующем разделе.

Чтобы повторить опыт, создайте виртуальное окружение, поставьте requests и beautifulsoup4 командой pip install и запустите python scrape.py. Если ассистента нет под рукой, код выше можно взять как есть.

Как сравнить собранное с вашими ценами?

Вернёмся к вашему утреннему обходу: теперь вместо трёх вкладок у вас один CSV-файл. Он открывается в Excel и Google Таблицах. Добавьте столбец со своей ценой и столбец разницы. В примере ниже «наши» цены придуманы для демонстрации, потому что у учебного сайта нет реального конкурента.

Товар	Наша цена (пример)	Цена конкурента	Разница
A Light in the Attic	£49.90	£51.77	–£1.87 (–3,6 %)
Tipping the Velvet	£55.00	£53.74	+£1.26 (+2,3 %)
Soumission	£50.10	£50.10	0
Sharp Objects	£44.99	£47.82	–£2.83 (–5,9 %)

Эта таблица отвечает на один вопрос: по каким товарам вы дороже или дешевле конкурента. Разницу в процентах считает формула =(B2-C2)/C2 с форматом «процент». Отрицательное число значит, что вы дешевле конкурента.

Строки, где вы дороже на 2–3 % и больше, подсветите условным форматированием. Это список товаров на проверку, а не приказ снижать цену, потому что решение принимаете вы, с учётом закупки и маржи.

С очисткой цены ассистент тоже справляется: попросите «преврати строку вида “1 290 ₽” в число 1290». Подробнее о работе с таблицами в статьях про нейросеть для Excel и про ИИ-агента для Google Таблиц.

Где ИИ вам поможет, а где нет?

Ассистент не волшебник, и ждать от него стоит не всего. Сначала о том, что он делает хорошо:

Пишет и чинит скрипт по описанию. Вы показываете ассистенту кусок HTML карточки товара и просите достать цену. Если сайт поменял вёрстку и скрипт вернул пустые значения, вы отдаёте ему новый HTML и ошибку, а он правит селекторы.
Разбирает страницы с разной вёрсткой. У трёх конкурентов три разных шаблона. Ассистент пишет по функции на каждый и сводит результат в одну таблицу.
Сопоставляет одинаковые товары с разными названиями. «Смартфон Samsung Galaxy A55 8/256 чёрный» и «Samsung A55 256GB Black» у вас и у конкурента – один товар. Модель сравнивает пары названий и характеристики и выдаёт совпадения. Спорные пары проверяйте глазами, потому что ошибка здесь стоит неверного вывода о цене.

Теперь о том, чего ждать не стоит:

Сайты с защитой от ботов и капчей. Если сайт показывает проверку «вы не робот» или блокирует запросы, ассистент напишет код, но страницу этот код не получит. Обходить защиту мы не советуем: это нарушает правила сайта.
Цены, которые видны только после входа или выбора города. Такие данные закрыты, и вопрос о том, можно ли их собирать, решает сайт.
Проверка результата. Скрипт может молча собрать цену доставки вместо цены товара. Сверяйте 3–5 строк с сайтом вручную после каждого изменения.

Если сайт строит страницу JavaScript-ом и в HTML цен нет, нужен браузерный парсер вроде Playwright или агент Browser Use. Ассистент поможет перейти на него.

Какой способ сбора цен выбрать вам?

Платить сервису, написать скрипт или обойтись таблицей, зависит от размера вашего магазина и от того, сколько времени вы готовы тратить на поддержку. Все три способа рядом:

Способ	Для кого	Цена	Плюсы	Минусы
Сервис мониторинга цен	Магазины с сотнями и тысячами товаров, маркетплейсы, нужно сопоставление товаров	Платная подписка. Пример: тариф «Старт» сервиса «Ценозавр» на 20 000 проверок цен стоит 23 700 ₽ в месяц, при оплате за год 20 145 ₽ в месяц	Не нужен программист, сопоставление товаров и отчёты готовы, сервис сам справляется с блокировками	Дорого для малого бизнеса, данные лежат у сервиса, набор источников ограничен тарифом
Скрипт с ИИ-ассистентом	Небольшой магазин или предприниматель, который готов раз в неделю заглянуть в код	Скрипт бесплатный, платите за ассистента и сервер, если запускаете не на своём компьютере	Гибко, данные у вас, можно собрать любые поля	Нужно чинить при смене вёрстки, нет защиты от блокировок, проверка на вас
No-code: Google Таблицы (`IMPORTXML`), n8n	Те, кто не пишет код, и простые страницы	`IMPORTXML` бесплатна; n8n бесплатен на своём сервере	Быстрый старт за вечер, всё в таблице, удобно подключить уведомления	`IMPORTXML` не видит цены, которые подгружает JavaScript; формулы ломаются при смене вёрстки

В сервисах мониторинга цена зависит от числа проверок цен в месяц, поэтому перед выбором посчитайте: сколько у конкурентов товаров, умножить на число проверок в месяц. Так вы поймёте, хватит ли вам скрипта или пора смотреть на сервис.

Можно ли обойтись без кода?

Можно, если страницы простые. Функция IMPORTXML(ссылка; запрос_xpath) забирает со страницы данные по адресу элемента (XPath). Её описание есть в справке Google. Пример для учебного сайта:

=IMPORTXML("https://books.toscrape.com/"; "//article//p[@class='price_color']")

Формула вернёт столбец цен первой страницы. Нужный XPath подсказывает ИИ-ассистент: покажите ему фрагмент HTML и попросите написать запрос. Работает это там, где цена есть в исходном коде страницы.

Для регулярного сбора без кода подходит n8n. Расписание запускает HTTP-запрос, узел разбора HTML достаёт цены, результат попадает в таблицу, а при падении цены у конкурента вам приходит сообщение в мессенджер.

Что вам можно собирать, а что нельзя?

Прежде чем направить скрипт на чужой сайт, запомните правила осторожного сбора:

Берите открытые данные: цены, названия, наличие, характеристики. Персональные данные людей (телефоны, почты, профили) не собирайте. Запросы вроде «парсинг номеров и контактов с сайтов» мы не разбираем: это персональные данные, и такой сбор может нарушать закон.
Читайте robots.txt (адрес сайт/robots.txt) и пользовательское соглашение: там часто написано, что запрещено автоматическому сбору.
Не нагружайте сайт. Пауза в 1–3 секунды между запросами, не больше одного потока, запуск раз в сутки вместо раза в минуту. Скрипт выше делает паузу в одну секунду.
Представляйтесь. Укажите в заголовке User-Agent название проекта и контакт, чтобы владелец сайта мог написать вам, а не блокировать вслепую.
Для крупных проектов (десятки сайтов, перепродажа данных, использование чужих фото и текстов) проконсультируйтесь с юристом. Мы не ссылаемся на статьи законов, чтобы не давать неточных выводов: проверяйте текст закона на официальных ресурсах.

Для вашего магазина из примера это значит просто: цены и наличие собирать можно, пауза между запросами нужна, а правила сайта читайте до первого запуска.

Как вам обновлять цены регулярно?

Один запуск даёт снимок на сегодня, а ценность появляется, когда вы видите динамику. Поэтому сначала запускайте скрипт раз в сутки и дописывайте строки в историю с датой.

Cron на сервере или домашнем компьютере. Строка в crontab -e запускает скрипт каждый день в 8 утра:

0 8 * * * /usr/bin/python3 /home/user/scrape.py

Пять полей слева направо: минута, час, день месяца, месяц, день недели. Звёздочка значит «любой». Если сервера нет, подойдёт недорогой VPS, но для одного скрипта хватает и вашего ноутбука, пока он включён.

n8n. Узел «Schedule Trigger» запускает цепочку по расписанию без cron. Как поставить n8n и собрать первую цепочку, описано в статье «n8n: что это и как начать». Если вы только осваиваете ассистента для кода, начните с руководства по Claude Code.

Накопленную историю цен удобно анализировать вместе с ИИ. Как проверять такие выводы, описано в статье про нейросеть для анализа данных.

И последнее: скрипт не должен молчать, когда сломался. Добавьте проверку: если собрано 0 товаров или меньше половины от прошлого запуска, скрипт присылает вам сообщение. Эту проверку ассистент напишет за минуту.

Что ещё вы хотите узнать?

Можно ли парсить цены конкурентов?

Цены на открытых страницах видит любой посетитель, поэтому сбор цен и названий обычно считают допустимым. При этом у сайта могут быть свои правила, так что читайте robots.txt и пользовательское соглашение. Для крупных проектов обратитесь к юристу.

Нужно ли вам знать Python?

Писать код самому не нужно: ассистент делает его по описанию. Запускать скрипт и проверять, что цены совпали с сайтом, придётся вам. Если код совсем не хочется, берите IMPORTXML или сервис мониторинга.

Что делать, если сайт блокирует запросы?

Увеличьте паузы и уменьшите частоту. Если защита остаётся (капча, проверка браузера), это сигнал, что владелец не хочет автоматического сбора. Обходить такую защиту мы не советуем, лучше выбрать другой источник или сервис с договором.

Как собрать цены с маркетплейса?

Маркетплейсы сильно защищены от ботов и меняют вёрстку. Для них обычно берут готовые сервисы или официальные API, которые предлагают сами площадки. Проверьте документацию нужной площадки.

Сколько товаров соберёт скрипт?

Ограничивают вас правила сайта и паузы. Наши 60 товаров заняли 5,8 секунды вместе с паузами. На странице каталога было 20 товаров, поэтому 1000 товаров это 50 страниц и около 50 секунд только на паузы по одной секунде, плюс время загрузки.

Чем ИИ-парсинг отличается от обычного?

Обычный парсер привязан к селекторам. ИИ-ассистент помогает быстрее их писать и чинить, а ИИ-агенты вроде Browser Use читают страницу «глазами» модели. Разбор инструментов есть в отдельной статье.

Как сопоставить товары с разными названиями?

Сравнивайте артикул или штрихкод, если они есть на странице. Если нет, попросите модель сравнить пары названий и характеристик и вернуть «совпадает / не совпадает / не уверена». Не уверенные пары проверьте вручную.

Что останется от утреннего обхода?

Вернёмся к вашему магазину. Скрипт или формула собирают цены за вас, таблица показывает, где вы дороже, а вам остаётся сверить несколько строк с сайтом и решить, менять ли цену.

Оговорки в одном месте. Это не юридическая консультация, а практические правила осторожного сбора. Тариф «Ценозавра» взят с официальной страницы тарифов на октябрь 2026, актуальные цены сервисов смотрите на их официальных страницах. «Наши» цены в таблице сравнения придуманы для демонстрации.

Парсинг цен конкурентов с помощью ИИ