Команда инженеров · свой ЦОД в РФ · своё железо · своя панель · CloudStack + Linstor · MCP · база знаний по self-hosted

Извлечение данных с Bright Data и Google Gemini

Извлекает структурированные данные с помощью Bright Data и обрабатывает их с использованием Google Gemini. Автоматизирует анализ и классификацию больших объемов информации.

Показать оригинал (англ.)
Structured Data Extract, Data Mining with Bright Data & Google Gemini

Automated workflow: Structured Data Extract, Data Mining with Bright Data & Google Gemini. This workflow integrates 10 different services: stickyNote, httpRequest, lmChatGoogleGemini, readWriteFile, chainLlm. It contains 31 nodes and follows best practices for error handling and security.

Вебхук (Webhook)Продвинутый · 18 нодWebhookReadwritefileForm Trigger
Как это работает

Схема сценария, как в редакторе n8n: ноды и связи между ними. Кликните, чтобы рассмотреть.

клик - увеличить ⤢◆When clicking‘Test workflow’manualTrigger◆Markdown toTextual Data…noOp≡Set URL and BrightData Zoneset🌐Initiate a WebhookNotification for…httpRequest🌐Initiate a WebhookNotification for…httpRequest◆Google Gemini ChatModel for Data…noOp◆Google Gemini ChatModel for…noOp🌐Perform BrightData Web RequesthttpRequest◆Topic Extractorwith the…noOp◆Trends by locationand category with…noOp◆Google Gemini ChatModelnoOp🌐Initiate a WebhookNotification for…httpRequest{}Create a binaryfile for topicsfunction◆Write the topicsfile to diskreadWriteFile◆Write the trendsfile to diskreadWriteFile{}Create a binarydata for tendsfunction
  1. ТриггерWhen clicking ‘Test workflow’Manual
  2. ДействиеSet URL and Bright Data ZoneSet
  3. ДействиеPerform Bright Data Web RequestHttp Request
  4. ДействиеMarkdown to Textual Data ExtractorNo Op
  5. ДействиеGoogle Gemini Chat Model for Data ExtractNo Op
  6. ДействиеTrends by location and category with the structured responseNo Op
  7. ДействиеTopic Extractor with the structured responseNo Op
  8. ДействиеInitiate a Webhook Notification for Markdown to Textual Data ExtractionHttp Request
  9. ДействиеGoogle Gemini Chat ModelNo Op
  10. ДействиеGoogle Gemini Chat Model for Sentiment AnalyzerNo Op
  11. ДействиеCreate a binary data for tendsFunction
  12. ДействиеInitiate a Webhook Notification for trends by location and categoryHttp Request
  13. ДействиеCreate a binary file for topicsFunction
  14. ДействиеInitiate a Webhook Notification for AI Sentiment AnalyzerHttp Request
  15. ДействиеWrite the topics file to diskRead Write File
  16. ДействиеWrite the trends file to diskRead Write File

Сценарий «Извлечение данных с Bright Data и Google Gemini» состоит из 16 нод: When clicking ‘Test workflow’, Set URL and Bright Data Zone, Perform Bright Data Web Request, Markdown to Textual Data Extractor, Google Gemini Chat Model for Data Extract, Trends by location and category with the structured response, Topic Extractor with the structured response, Initiate a Webhook Notification for Markdown to Textual Data Extraction и других. Интеграции: Webhook, Readwritefile, Form Trigger.

Что понадобится
ПараметрЗначениеОписание
Учётные данныеWebhook · Readwritefile · Form TriggerДля каждого сервиса нужен свой ключ/токен - впишете их в n8n после установки.
Объём сценария18 нод · продвинутыйЧисло нод и уровень сложности логики. Больше нод - тоньше настройка.
Форматn8n workflow JSONГотовый воркфлоу. При развороте через кнопку импортируется автоматически.
Установка в один клик

Развернуть n8n с этим сценарием

Готовый сервер с n8n из маркетплейса Fatmetal - воркфлоу уже загружен. Рекомендованная конфигурация уже подставлена в заказ: 2 CPU · 4 ГБ · 50 ГБ. Останется вписать свои ключи, и автоматизация заработает. Нужна помощь с настройкой под нагрузку или сетью? Напишите инженеру.

Защищённый инстанс

n8n отдаём закрытым, а не голым

n8n часто атакуют - поэтому инстанс приезжает уже защищённым, без ручной настройки.

Владелец создан заранее

Аккаунт администратора настроен автоматически при развёртывании. Окно самостоятельной регистрации закрыто - никто не перехватит ваш инстанс в первые минуты после запуска (частый вектор атаки на self-hosted n8n).

Единый пароль с сервером

Логин в n8n - тот же пароль, что у вашей машины. Не нужно искать отдельные креды в файлах, меньше шансов оставить дефолт.

fail2ban против перебора

Автоматически банит IP после серии неудачных попыток входа по SSH. Защита от брутфорса из коробки.

HTTPS и security-заголовки

Трафик шифруется (Let's Encrypt, авто-обновление), выставлены HSTS, X-Frame-Options, X-Content-Type-Options, Referrer-Policy - защита от кликджекинга, MIME-снифинга и downgrade-атак.

Что дальше

После оплаты - сервер с готовым сценарием

Сервер создаётся автоматически за несколько минут. Ничего настраивать вручную не нужно - n8n поднимется сам, а этот сценарий уже будет внутри.

1

Сервер создаётся

После оплаты сервер разворачивается автоматически за несколько минут: ставится n8n, база данных и HTTPS. Дождитесь готовности в личном кабинете.

2

Открываете адрес

Адрес формируется из IP сервера: замените точки на дефисы и добавьте .fatmetal.net. Например IP 45.15.159.10 → https://45-15-159-10.fatmetal.net/. HTTPS уже настроен. Готовый адрес также есть в личном кабинете - можно просто скопировать его оттуда.

3

Входите готовыми данными

Аккаунт владельца уже создан - регистрировать ничего не нужно. Логин: admin@<адрес вашего сервера> (тот же адрес, что открыли на шаге 2 - например admin@45-15-159-10.fatmetal.net). Пароль - тот же, что у вашего сервера: он в личном кабинете и в /root/n8n-credentials.txt на сервере. Войдите и при желании сразу смените пароль в настройках. Интерфейс английский - у n8n нет русской локализации.

4

Сценарий уже внутри

Этот сценарий уже импортирован - найдёте его в разделе Workflows. Останется вписать свои ключи для интеграций (Webhook, Readwritefile, Form Trigger) в Credentials и включить сценарий.

Важно: сохраните ключ шифрования. Ключ (N8N_ENCRYPTION_KEY) и пароль базы лежат на сервере в /root/n8n-credentials.txt. Этим ключом зашифрованы учётные данные интеграций - берегите его и сделайте резервную копию: без ключа их не восстановить даже из бэкапа базы.
Оригинал сценария (англ.): «Structured Data Extract, Data Mining with Bright Data & Google Gemini». Источник: коллекция Zie619/n8n-workflows (лицензия MIT).
Спросить инженера в TelegramМы на связи