Команда инженеров · свой ЦОД в РФ · своё железо · своя панель · CloudStack + Linstor · MCP · база знаний по self-hosted

AI-парсер сайтов с Google Gemini

Собирает данные с веб-сайтов используя компьютерное зрение, обрабатывает их Google Gemini и записывает в Google Sheets.

Показать оригинал (англ.)
Vision-Based AI Agent Scraper - with Google Sheets, ScrapingBee, and Gemini

Automated workflow: Vision-Based AI Agent Scraper - with Google Sheets, ScrapingBee, and Gemini. This workflow integrates 13 different services: stickyNote, httpRequest, markdown, lmChatGoogleGemini, agent. It contains 36 nodes and follows best practices for error handling and security.

Комбинированный (Complex)Продвинутый · 29 нодHttprequestExecuteworkflowMarkdownGoogle Sheets
Как это работает

Схема сценария, как в редакторе n8n: ноды и связи между ними. Кликните, чтобы рассмотреть.

клик - увеличить ⤢◆When clicking‘Test workflow’manualTrigger🌐ScrapingBee- Getpage HTMLhttpRequest◆Structured OutputParsernoOp◆Google Gemini ChatModelnoOp◆Split OutsplitOut▤Google Sheets -Get list of URLsgoogleSheets≡Set fieldsset🌐ScrapingBee - Getpage screenshothttpRequest◆HTML-basedScraping ToolnoOp▤Google Sheets -Create RowsgoogleSheets◆Vision-basedScraping AgentnoOp◆HTML-Scraping ToolexecuteWorkflowTrigger≡Set fields - fromAI agent queryset◆HTML to Markdownmarkdown
  1. ТриггерWhen clicking ‘Test workflow’Manual
  2. ДействиеGoogle Sheets - Get list of URLsGoogle Sheets
  3. ДействиеSet fieldsSet
  4. ДействиеScrapingBee - Get page screenshotHttp Request
  5. ТриггерHTML-Scraping ToolExecute Workflow
  6. ДействиеGoogle Gemini Chat ModelNo Op
  7. ДействиеSet fields - from AI agent querySet
  8. ДействиеVision-based Scraping AgentNo Op
  9. ДействиеHTML-based Scraping ToolNo Op
  10. ДействиеScrapingBee- Get page HTMLHttp Request
  11. ДействиеStructured Output ParserNo Op
  12. ДействиеHTML to MarkdownMarkdown
  13. ДействиеSplit OutSplit Out
  14. ДействиеGoogle Sheets - Create RowsGoogle Sheets

Сценарий «AI-парсер сайтов с Google Gemini» состоит из 14 нод: When clicking ‘Test workflow’, Google Sheets - Get list of URLs, Set fields, ScrapingBee - Get page screenshot, HTML-Scraping Tool, Google Gemini Chat Model, Set fields - from AI agent query, Vision-based Scraping Agent и других. Интеграции: Httprequest, Executeworkflow, Markdown, Google Sheets, Splitout.

Что понадобится
ПараметрЗначениеОписание
Учётные данныеHttprequest · Executeworkflow · Markdown · Google Sheets · SplitoutДля каждого сервиса нужен свой ключ/токен - впишете их в n8n после установки.
Объём сценария29 нод · продвинутыйЧисло нод и уровень сложности логики. Больше нод - тоньше настройка.
Форматn8n workflow JSONГотовый воркфлоу. При развороте через кнопку импортируется автоматически.
Установка в один клик

Развернуть n8n с этим сценарием

Готовый сервер с n8n из маркетплейса Fatmetal - воркфлоу уже загружен. Рекомендованная конфигурация уже подставлена в заказ: 2 CPU · 4 ГБ · 50 ГБ. Останется вписать свои ключи, и автоматизация заработает. Нужна помощь с настройкой под нагрузку или сетью? Напишите инженеру.

Защищённый инстанс

n8n отдаём закрытым, а не голым

n8n часто атакуют - поэтому инстанс приезжает уже защищённым, без ручной настройки.

Владелец создан заранее

Аккаунт администратора настроен автоматически при развёртывании. Окно самостоятельной регистрации закрыто - никто не перехватит ваш инстанс в первые минуты после запуска (частый вектор атаки на self-hosted n8n).

Единый пароль с сервером

Логин в n8n - тот же пароль, что у вашей машины. Не нужно искать отдельные креды в файлах, меньше шансов оставить дефолт.

fail2ban против перебора

Автоматически банит IP после серии неудачных попыток входа по SSH. Защита от брутфорса из коробки.

HTTPS и security-заголовки

Трафик шифруется (Let's Encrypt, авто-обновление), выставлены HSTS, X-Frame-Options, X-Content-Type-Options, Referrer-Policy - защита от кликджекинга, MIME-снифинга и downgrade-атак.

Что дальше

После оплаты - сервер с готовым сценарием

Сервер создаётся автоматически за несколько минут. Ничего настраивать вручную не нужно - n8n поднимется сам, а этот сценарий уже будет внутри.

1

Сервер создаётся

После оплаты сервер разворачивается автоматически за несколько минут: ставится n8n, база данных и HTTPS. Дождитесь готовности в личном кабинете.

2

Открываете адрес

Адрес формируется из IP сервера: замените точки на дефисы и добавьте .fatmetal.net. Например IP 45.15.159.10 → https://45-15-159-10.fatmetal.net/. HTTPS уже настроен. Готовый адрес также есть в личном кабинете - можно просто скопировать его оттуда.

3

Входите готовыми данными

Аккаунт владельца уже создан - регистрировать ничего не нужно. Логин: admin@<адрес вашего сервера> (тот же адрес, что открыли на шаге 2 - например admin@45-15-159-10.fatmetal.net). Пароль - тот же, что у вашего сервера: он в личном кабинете и в /root/n8n-credentials.txt на сервере. Войдите и при желании сразу смените пароль в настройках. Интерфейс английский - у n8n нет русской локализации.

4

Сценарий уже внутри

Этот сценарий уже импортирован - найдёте его в разделе Workflows. Останется вписать свои ключи для интеграций (Httprequest, Executeworkflow, Markdown) в Credentials и включить сценарий.

Важно: сохраните ключ шифрования. Ключ (N8N_ENCRYPTION_KEY) и пароль базы лежат на сервере в /root/n8n-credentials.txt. Этим ключом зашифрованы учётные данные интеграций - берегите его и сделайте резервную копию: без ключа их не восстановить даже из бэкапа базы.
Оригинал сценария (англ.): «Vision-Based AI Agent Scraper - with Google Sheets, ScrapingBee, and Gemini». Источник: коллекция Zie619/n8n-workflows (лицензия MIT).
Спросить инженера в TelegramМы на связи