ИИ для сбора данных: цены, вакансии и отзывы в таблице

ИИ для сбора данных превращает повторяющуюся проверку сайтов в расписание: агент открывает разрешённые источники, извлекает цены, вакансии или отзывы, записывает результат в Google Таблицу и сообщает об изменениях в Telegram. Для мониторинга 50-100 позиций это может заменить несколько часов ручной работы в неделю, но не превращает любой сайт в открытую базу: капчи, закрытые кабинеты, персональные данные и правила площадок остаются ограничениями.

Сбор данных для ИИ часто понимают неправильно. Речь не о кнопке «скачать весь интернет», а о небольшом рабочем процессе с понятным источником, списком полей, расписанием и проверкой результата. Ниже разберём, какие задачи действительно полезны владельцу малого бизнеса и как не превратить автоматизацию в нарушение правил.

Какие данные имеет смысл собирать автоматически

Начинай не с вопроса «что умеет нейросеть», а с повторяющейся операции, где человек каждый день копирует одно и то же. Хороший кандидат имеет четыре признака: источник обновляется, нужные поля понятны, результат помещается в таблицу, а ошибка обнаруживается до того, как повредит бизнесу.

Цены и наличие у конкурентов

Владелец магазина может раз в день проверять 30-100 публичных карточек: название, цену, скидку, наличие, ссылку и дату проверки. Агент записывает каждую позицию в отдельную строку. На следующем запуске он сравнивает значения и выделяет только изменения: цена снизилась на 8%, товар исчез, появилась новая акция.

Это полезнее, чем просто таблица со свежими ценами. Руководителю не нужно просматривать сотни строк: в Telegram приходит короткое сообщение с отклонениями и ссылками на первоисточники. Решение о смене цены всё равно принимает человек.

Вакансии и предложения рынка

Кадровое агентство или руководитель могут собирать из открытых источников название вакансии, компанию, город, зарплатную вилку, формат работы, дату публикации и ссылку. Дальше таблица помогает увидеть, какие компетенции стали чаще встречаться и какие вилки предлагают конкуренты.

Здесь особенно важно не копировать резюме и контакты соискателей без основания. Для первого сценария достаточно агрегированных признаков: роль, требования, зарплата и ссылка на исходную вакансию.

Отзывы и упоминания

Агент может собирать новые публичные отзывы о компании или товаре, определять тему жалобы и отмечать срочные случаи. Например, в таблице появляются колонки «дата», «оценка», «тема», «тональность», «ссылка» и «нужен ответ».

Это не значит, что агент должен самостоятельно спорить с клиентами. Надёжный режим на старте другой: собрать отзывы, сгруппировать проблемы, предложить черновик ответа и передать негатив менеджеру. Подход к ответам на отзывы подробно разобран в отдельной статье про работу с отзывами.

Как выглядит процесс: источник, таблица, уведомление

Рабочий сценарий состоит из пяти частей.

1. Источник. Список конкретных публичных страниц или официальный канал данных. Чем уже список, тем проще проверить качество.
2. Поля. Что извлекать: цену, ссылку, дату, статус, заголовок, категорию. Поля должны быть измеримыми, а не вроде «понять, хороший ли товар».
3. Таблица. Google Sheets становится журналом результатов. В ней хранятся текущие значения, дата проверки и, при необходимости, история изменений.
4. Расписание. Например, каждый будний день в 9:00 или раз в неделю. Частота должна соответствовать скорости изменения данных, а не желанию проверять всё каждую минуту.
5. Уведомление. В Telegram отправляются только изменения, ошибки источника и короткая сводка. Полная таблица остаётся в Google Sheets.

Такой формат удобен тем, что результат не спрятан внутри чата. Его можно фильтровать, передавать коллегам и сравнивать по датам. Если нужна следующая ступень, ИИ для аналитики данных помогает задавать вопросы уже собранной таблице: что подешевело, какие категории растут и где появились аномалии.

Как настроить сбор без программирования

В Моём агенте сценарий можно описать обычным языком. Например: «Каждый будний день проверяй эти 40 публичных страниц. Записывай название, цену, наличие, ссылку и дату проверки в Google Таблицу. Если цена изменилась больше чем на 5% или товар пропал, пришли сообщение в Telegram с прежним и новым значением».

Но одного красивого описания недостаточно. Перед запуском зафиксируй правила.

Сначала укажи границы источников. Не пиши «найди все цены в интернете». Дай список доменов, категорий или URL. Это сокращает число случайных совпадений и стоимость обработки.

Потом опиши формат результата. Для каждой строки нужны одинаковые поля. Если цена не найдена, агент должен записать «нет данных», а не подставлять догадку. Если страница изменилась, полезно сохранять ссылку и время проверки.

Добавь контроль качества. Попроси не считать скидку ценой товара, отличать наличие от предзаказа и отмечать сомнительные значения. Первые запуски проверяй вручную по 5-10 строкам.

Настрой режим черновика. Для отзывов, контактов и любых действий с внешним миром агент сначала складывает данные в таблицу. Автоматическую отправку писем или изменение цен не включай, пока не увидишь несколько корректных циклов.

Мой агент подходит для такого интерфейса: агент получает данные из подключённых источников, работает с таблицей и может присылать результат в Telegram. Под капотом доступны разные модели через единый gateway, поэтому для простого извлечения можно использовать базовый вариант, а сложную классификацию включать только там, где она нужна.

Что ломает сбор данных и как это заметить

Автоматизация ошибается не только из-за самой модели. Чаще проблема в источнике или неясном задании.

Изменилась верстка страницы. Вчера цена была в одном блоке, сегодня её перенесли. Если агент не нашёл поле, он должен поставить отметку об ошибке, а не считать пустоту нулём. Настрой уведомление «источник не разобран».

На странице несколько цен. Розничная, цена по карте, оптовая и цена со скидкой могут стоять рядом. В задании заранее укажи, какую именно брать, и сохраняй подпись выбранного варианта.

Есть пагинация или бесконечная лента. Агент может обработать только первую страницу и создать иллюзию полного мониторинга. Ограничь объём и отдельно проверь, что в таблицу попадают все нужные страницы.

Появилась капча или авторизация. Это стоп-сигнал, а не приглашение искать обход. Ищи официальный API, экспорт CSV или другой разрешённый способ получить данные. Если источник запрещает автоматический доступ, откажись от него.

Текст распознан неверно. Названия и цены нужно сверять с оригинальной ссылкой. Для финансовых решений оставляй выборочную ручную проверку и не запускай автоматическое изменение прайса на основании одной выгрузки.

Если данные уже лежат в Excel или Google Sheets и задача не в сборе, а в поиске закономерностей, смотри статью про анализ Excel. Смешивать извлечение и выводы в одном непрозрачном шаге хуже: сначала сохрани исходные строки, затем анализируй их.

Юридические и этические границы

Сбор данных с сайтов не является автоматически законным только потому, что страница открывается в браузере. Перед настройкой проверь условия использования площадки, robots.txt, наличие запрета на автоматизированный доступ и возможность использовать официальный API. Не обходи капчу, лимиты, авторизацию и технические блокировки.

Отдельно относятся персональные данные. Публичный телефон ещё не означает, что его можно собирать в любую базу и использовать для рассылки. Нужны цель, правовое основание, минимальный объём и понятный срок хранения. Для мониторинга рынка обычно достаточно названия компании, ссылки, цены или описания предложения без имени конкретного человека.

Не копируй целиком статьи, фотографии и каталоги, если у тебя нет права на такое использование. Для аналитики чаще достаточно коротких фактов и ссылки на источник. Это снижает и юридический риск, и объём данных, который нужно обрабатывать.

Claude Code может помочь программисту построить специализированный сборщик с API и тестами. Но это другой сценарий: командная строка, код и обслуживание проекта. Если задача сводится к разрешённому мониторингу нескольких источников и таблице, сначала оцени вариант без программирования.

В моей практике: мониторинг вместо ручного обхода

В моей практике самым полезным оказался не массовый парсинг, а маленький мониторинг с чётким сигналом. Когда нужно следить за несколькими источниками, ценность создаёт не количество собранных строк, а ответ на вопрос «что изменилось с прошлого запуска».

Я собирал сервисы для работы с таблицами, почтой и Telegram без знания кода и видел один повторяющийся провал: люди пытаются сразу автоматизировать весь рынок. В результате получают большую таблицу, которую никто не читает. Рабочая версия обычно начинается с 20-30 страниц, 5-7 полей и одного уведомления о существенном изменении.

После двух-трёх дней тестов становится понятно, какие поля действительно нужны. Лишние колонки удаляются, сомнительные значения отправляются на проверку, а уведомления остаются только для действий. В таком виде сбор данных экономит время и помогает принимать решения, а не создаёт ещё одну необозримую папку.

Сколько стоит такой сценарий

Цены зависят от числа страниц, частоты запуска и объёма текста. По каноническому прайсу Моего агента подписка составляет 1990 ₽ за первый месяц по акции до 1 августа 2026 года; после окончания акции первый месяц будет стоить 2490 ₽. Со второго месяца подписка — 990 ₽/мес, а расход моделей считается отдельно.

Прайс на отдельную задачу сбора данных не фиксирован: обработка 20 страниц с несколькими полями может быть дешевле, чем разбор сотен длинных отзывов. Ставь лимиты, запускай пилот на небольшой выборке и измеряй стоимость одного цикла. На более тяжёлых моделях вроде Claude Opus или GPT-5 расчёты могут быть в 3-5 раз дороже базовых, поэтому их разумно включать для сложной классификации, а не для каждого простого поля.

Чтобы начать, выбери один мониторинг, подготовь список источников и таблицу из 5-7 колонок. Курс по работе с ИИ-агентами поможет разобраться в постановке задач, ограничениях и проверке результата. Не пытайся заменить проверку бизнеса кнопкой: хороший агент собирает факты, показывает источник и оставляет решение человеку.