Apache NIFI — Краткий обзор возможностей на практике

[x893]

Спасибо за статью. Два вопроса:
1. Сколько человек команда?
2. Сколько времени ушло на интеграцию?

[Ksunka132]

Команда из 4 backend разработчиков. Занималась этим одна я. Примерно полторы недели с документацией, ревью и прочей бюрократией.

[Wayfarer15]

Вся эта операция сопровождается довольно продолжительными танцами с бубном, которыми мы не будем в рамках этой статьи заниматься.

Я хотел было написать книжку про эти танцы с бубнами (про программирование процессов для NiFi), но вот не знаю, насколько это вообще кому-то интересно.

[Ksunka132]

Лично мне было бы интересно почитать :) Если не секрет, много времени ушло на изучение и разбор? И какую литературу использовали? Мне понравилась nifi. Много тривиальных процессов позволяет автоматизировать. Притом довольно быстро.

[Wayfarer15]

У меня были несколько специфические задачи (HL7). То, что есть в NiFi by default совсем ни куда не годиться, поэтому я с самого начала делал своё. Это заняло примерно месяц работы с сорцами. Литературы, кроме собственной документации, практически нет или на уровне первых двух дней изучения.

[Ksunka132]

Мне нужно было недавно загнать данные в еластик. У нас версии новые, а в NiFi старые. Пришлось использовать несколько квадратов, делать ненужные конвертации. В итоге получилось. Если интересно в личку напишу как.

[velipre_xella]

Ссылка https://docs.arenadata.io/ads/UserNIFI/index.html пустая.