Команда инженеров · свой ЦОД в РФ · своё железо · своя панель · CloudStack + Linstor · MCP · база знаний по self-hosted

Извлечение и сохранение данных в MongoDB

Извлекает данные из источников, обрабатывает их пакетами и сохраняет в MongoDB. Подходит для массовой обработки документов.

Показать оригинал (англ.)
extract_swifts

Production-ready workflow: extract_swifts. This workflow has been optimized for production use with comprehensive error handling, security, and documentation.

Комбинированный (Complex)Продвинутый · 24 нодыWritebinaryfileHttprequestSplitinbatchesReadbinaryfile
Как это работает

Схема сценария, как в редакторе n8n: ноды и связи между ними. Кликните, чтобы рассмотреть.

клик - увеличить ⤢◆On clicking'execute'manualTrigger🌐HTTP RequesthttpRequest◆HTML ExtracthtmlExtract◆SplitInBatchessplitInBatches🌐HTTP Request1httpRequest◆HTML Extract1htmlExtract◆MongoDB1mongoDb◆uProcuproc{}Prepare Documentsfunction⑂More Countriesif{}Set Page to ScrapefunctionItem⑂More Pagesif{}Set More Pagesfunction≡Setset{}Generate filenamefunctionItem◆Read Binary FilereadBinaryFile⑂File exists?if◆Write Binary FilewriteBinaryFile◆Read Binary File1readBinaryFile{}Waitfunction{}Prepare countriesfunction◆Create DirectoryexecuteCommand◆MongoDBmongoDb⚠Error HandlerstopAndError
  1. ТриггерOn clicking 'execute'Manual
  2. ДействиеCreate DirectoryExecute Command
  3. ДействиеHTTP RequestHttp Request
  4. ДействиеHTML ExtractHtml Extract
  5. ДействиеPrepare countriesFunction
  6. ДействиеSplitInBatchesSplit In Batches
  7. Обработка ошибокError HandlerStop And Error
  8. ДействиеuProcUproc
  9. ДействиеSet Page to ScrapeFunction Item
  10. ДействиеSetSet
  11. ДействиеGenerate filenameFunction Item
  12. ДействиеRead Binary FileRead Binary File
  13. ДействиеFile exists?If
  14. ДействиеWaitFunction
  15. ДействиеHTTP Request1Http Request
  16. ДействиеWrite Binary FileWrite Binary File
  17. ДействиеRead Binary File1Read Binary File
  18. ДействиеHTML Extract1Html Extract
  19. ДействиеMore CountriesIf
  20. ДействиеPrepare DocumentsFunction
  21. ДействиеMore PagesIf
  22. ДействиеMongoDBMongo Db
  23. ДействиеMongoDB1Mongo Db
  24. ДействиеSet More PagesFunction

Сценарий «Извлечение и сохранение данных в MongoDB» состоит из 24 ноды: On clicking 'execute', Create Directory, HTTP Request, HTML Extract, Prepare countries, SplitInBatches, Error Handler, uProc и других. Интеграции: Writebinaryfile, Httprequest, Splitinbatches, Readbinaryfile, Uproc, Htmlextract, Executecommand, MongoDB, Functionitem.

Что понадобится
ПараметрЗначениеОписание
Учётные данныеWritebinaryfile · Httprequest · Splitinbatches · Readbinaryfile · Uproc · Htmlextract · Executecommand · MongoDB · FunctionitemДля каждого сервиса нужен свой ключ/токен - впишете их в n8n после установки.
Объём сценария24 ноды · продвинутыйЧисло нод и уровень сложности логики. Больше нод - тоньше настройка.
Форматn8n workflow JSONГотовый воркфлоу. При развороте через кнопку импортируется автоматически.
Установка в один клик

Развернуть n8n с этим сценарием

Готовый сервер с n8n из маркетплейса Fatmetal - воркфлоу уже загружен. Рекомендованная конфигурация уже подставлена в заказ: 2 CPU · 4 ГБ · 50 ГБ. Останется вписать свои ключи, и автоматизация заработает. Нужна помощь с настройкой под нагрузку или сетью? Напишите инженеру.

Защищённый инстанс

n8n отдаём закрытым, а не голым

n8n часто атакуют - поэтому инстанс приезжает уже защищённым, без ручной настройки.

Владелец создан заранее

Аккаунт администратора настроен автоматически при развёртывании. Окно самостоятельной регистрации закрыто - никто не перехватит ваш инстанс в первые минуты после запуска (частый вектор атаки на self-hosted n8n).

Единый пароль с сервером

Логин в n8n - тот же пароль, что у вашей машины. Не нужно искать отдельные креды в файлах, меньше шансов оставить дефолт.

fail2ban против перебора

Автоматически банит IP после серии неудачных попыток входа по SSH. Защита от брутфорса из коробки.

HTTPS и security-заголовки

Трафик шифруется (Let's Encrypt, авто-обновление), выставлены HSTS, X-Frame-Options, X-Content-Type-Options, Referrer-Policy - защита от кликджекинга, MIME-снифинга и downgrade-атак.

Что дальше

После оплаты - сервер с готовым сценарием

Сервер создаётся автоматически за несколько минут. Ничего настраивать вручную не нужно - n8n поднимется сам, а этот сценарий уже будет внутри.

1

Сервер создаётся

После оплаты сервер разворачивается автоматически за несколько минут: ставится n8n, база данных и HTTPS. Дождитесь готовности в личном кабинете.

2

Открываете адрес

Адрес формируется из IP сервера: замените точки на дефисы и добавьте .fatmetal.net. Например IP 45.15.159.10 → https://45-15-159-10.fatmetal.net/. HTTPS уже настроен. Готовый адрес также есть в личном кабинете - можно просто скопировать его оттуда.

3

Входите готовыми данными

Аккаунт владельца уже создан - регистрировать ничего не нужно. Логин: admin@<адрес вашего сервера> (тот же адрес, что открыли на шаге 2 - например admin@45-15-159-10.fatmetal.net). Пароль - тот же, что у вашего сервера: он в личном кабинете и в /root/n8n-credentials.txt на сервере. Войдите и при желании сразу смените пароль в настройках. Интерфейс английский - у n8n нет русской локализации.

4

Сценарий уже внутри

Этот сценарий уже импортирован - найдёте его в разделе Workflows. Останется вписать свои ключи для интеграций (Writebinaryfile, Httprequest, Splitinbatches) в Credentials и включить сценарий.

Важно: сохраните ключ шифрования. Ключ (N8N_ENCRYPTION_KEY) и пароль базы лежат на сервере в /root/n8n-credentials.txt. Этим ключом зашифрованы учётные данные интеграций - берегите его и сделайте резервную копию: без ключа их не восстановить даже из бэкапа базы.
Оригинал сценария (англ.): «extract_swifts». Источник: коллекция Zie619/n8n-workflows (лицензия MIT).
Спросить инженера в TelegramМы на связи