Команда инженеров · свой ЦОД в РФ · своё железо · своя панель · CloudStack + Linstor · MCP · база знаний по self-hosted

Парсинг Etsy с Bright Data и Google Gemini

Собирает информацию о товарах из Etsy используя Bright Data, затем анализирует данные с помощью Google Gemini.

Показать оригинал (англ.)
Automate Etsy Data Mining with Bright Data Scrape & Google Gemini

Automated workflow: Automate Etsy Data Mining with Bright Data Scrape & Google Gemini. This workflow integrates 12 different services: stickyNote, httpRequest, lmChatGoogleGemini, readWriteFile, function. It contains 29 nodes and follows best practices for error handling and security.

Комбинированный (Complex)Продвинутый · 19 нодReadwritefileOpenAISplitinbatchesWebhook
Как это работает

Схема сценария, как в редакторе n8n: ноды и связи между ними. Кликните, чтобы рассмотреть.

клик - увеличить ⤢◆When clicking‘Test workflow’manualTrigger≡Set Esty SearchQueryset🌐Perform Esty WebRequesthttpRequest◆Google Gemini ChatModelnoOp◆Loop Over ItemssplitInBatches🌐Perform Esty webrequest over the…httpRequest🌐Initiate a WebhookNotification for…httpRequest◆Extract Item Listwith the Product…noOp◆Google Gemini ChatModel for product…noOp◆Extract PaginatedResultsetnoOp◆Write the scrapedcontent to diskreadWriteFile{}Create a binarydatafunction◆Split OutsplitOut◆Extract PaginatedResultset With…noOp◆OpenAI Chat ModelnoOp
  1. ТриггерWhen clicking ‘Test workflow’Manual
  2. ДействиеSet Esty Search QuerySet
  3. ДействиеPerform Esty Web RequestHttp Request
  4. ДействиеExtract Paginated ResultsetNo Op
  5. ДействиеExtract Paginated Resultset With OpenAINo Op
  6. ДействиеOpenAI Chat ModelNo Op
  7. ДействиеGoogle Gemini Chat ModelNo Op
  8. ДействиеSplit OutSplit Out
  9. ДействиеLoop Over ItemsSplit In Batches
  10. ДействиеPerform Esty web request over the loopHttp Request
  11. ДействиеExtract Item List with the Product InfoNo Op
  12. ДействиеGoogle Gemini Chat Model for product infoNo Op
  13. ДействиеInitiate a Webhook Notification for the extracted dataHttp Request
  14. ДействиеCreate a binary dataFunction
  15. ДействиеWrite the scraped content to diskRead Write File

Сценарий «Парсинг Etsy с Bright Data и Google Gemini» состоит из 15 нод: When clicking ‘Test workflow’, Set Esty Search Query, Perform Esty Web Request, Extract Paginated Resultset, Extract Paginated Resultset With OpenAI, OpenAI Chat Model, Google Gemini Chat Model, Split Out и других. Интеграции: Readwritefile, OpenAI, Splitinbatches, Webhook, Splitout, Form Trigger.

Что понадобится
ПараметрЗначениеОписание
Учётные данныеReadwritefile · OpenAI · Splitinbatches · Webhook · Splitout · Form TriggerДля каждого сервиса нужен свой ключ/токен - впишете их в n8n после установки.
Объём сценария19 нод · продвинутыйЧисло нод и уровень сложности логики. Больше нод - тоньше настройка.
Форматn8n workflow JSONГотовый воркфлоу. При развороте через кнопку импортируется автоматически.
Установка в один клик

Развернуть n8n с этим сценарием

Готовый сервер с n8n из маркетплейса Fatmetal - воркфлоу уже загружен. Рекомендованная конфигурация уже подставлена в заказ: 2 CPU · 4 ГБ · 50 ГБ. Останется вписать свои ключи, и автоматизация заработает. Нужна помощь с настройкой под нагрузку или сетью? Напишите инженеру.

Защищённый инстанс

n8n отдаём закрытым, а не голым

n8n часто атакуют - поэтому инстанс приезжает уже защищённым, без ручной настройки.

Владелец создан заранее

Аккаунт администратора настроен автоматически при развёртывании. Окно самостоятельной регистрации закрыто - никто не перехватит ваш инстанс в первые минуты после запуска (частый вектор атаки на self-hosted n8n).

Единый пароль с сервером

Логин в n8n - тот же пароль, что у вашей машины. Не нужно искать отдельные креды в файлах, меньше шансов оставить дефолт.

fail2ban против перебора

Автоматически банит IP после серии неудачных попыток входа по SSH. Защита от брутфорса из коробки.

HTTPS и security-заголовки

Трафик шифруется (Let's Encrypt, авто-обновление), выставлены HSTS, X-Frame-Options, X-Content-Type-Options, Referrer-Policy - защита от кликджекинга, MIME-снифинга и downgrade-атак.

Что дальше

После оплаты - сервер с готовым сценарием

Сервер создаётся автоматически за несколько минут. Ничего настраивать вручную не нужно - n8n поднимется сам, а этот сценарий уже будет внутри.

1

Сервер создаётся

После оплаты сервер разворачивается автоматически за несколько минут: ставится n8n, база данных и HTTPS. Дождитесь готовности в личном кабинете.

2

Открываете адрес

Адрес формируется из IP сервера: замените точки на дефисы и добавьте .fatmetal.net. Например IP 45.15.159.10 → https://45-15-159-10.fatmetal.net/. HTTPS уже настроен. Готовый адрес также есть в личном кабинете - можно просто скопировать его оттуда.

3

Входите готовыми данными

Аккаунт владельца уже создан - регистрировать ничего не нужно. Логин: admin@<адрес вашего сервера> (тот же адрес, что открыли на шаге 2 - например admin@45-15-159-10.fatmetal.net). Пароль - тот же, что у вашего сервера: он в личном кабинете и в /root/n8n-credentials.txt на сервере. Войдите и при желании сразу смените пароль в настройках. Интерфейс английский - у n8n нет русской локализации.

4

Сценарий уже внутри

Этот сценарий уже импортирован - найдёте его в разделе Workflows. Останется вписать свои ключи для интеграций (Readwritefile, OpenAI, Splitinbatches) в Credentials и включить сценарий.

Важно: сохраните ключ шифрования. Ключ (N8N_ENCRYPTION_KEY) и пароль базы лежат на сервере в /root/n8n-credentials.txt. Этим ключом зашифрованы учётные данные интеграций - берегите его и сделайте резервную копию: без ключа их не восстановить даже из бэкапа базы.
Оригинал сценария (англ.): «Automate Etsy Data Mining with Bright Data Scrape & Google Gemini». Источник: коллекция Zie619/n8n-workflows (лицензия MIT).
Спросить инженера в TelegramМы на связи