4 причины стать Data Engineer

[leshqow]

Хотел написать возможно ли джуниору попасть в эту область без опыта работы, но потом увидел это

СТОИМОСТЬ ОБУЧЕНИЯ:100 000 р

и сам ответил на свой вопрос

[elena_newprolab]

У нас есть рассрочка, если вам такой вариант подходит, да и кредит никто не отменял. Есть участники программ, кто берет кредит. Проблем с его закрытием после успешного прохождения программы не было.

[seidzi]

главное рвение к работе и готовность учиться, я имея за собой навыки на уровне junior java developer — устроился на позицию Junior Data Engineer. Хотя я почти совсем не использую java в своей работе, но мне пригодился эти знания при изучении scala(уже в процессе работы)

[TexxTyRe]

Вода. Муть. И реклама.

[elena_newprolab]

а у вас какая должность? чем занимаетесь?

[TexxTyRe]

Не вижу здесь связи между моими занятиями и этой статьей. Но пусть я буду для вас тот, кто интересуется Data Science и ML. В статье одна лишь абстракция и приукрашивание данной профессии, на деле это математика и куча ее разделов, которые я устану здесь перечислять.

[elena_newprolab]

Если задача собрать пайплайн из различных инструментов, правильно их отконфигурировать, то в деятельности Data Engineer доля математики всё-таки не такая большая в сравнении с data scientist.
Интересоваться и каждый день работать, как это делают авторы приведенных выше цитат, — немного разные вещи. Мы разделяем мнение Data Engineer'ов, с которыми работаем и у кого брали интервью, остаемся при нем. Ну, а вы, как и любой другой читатель, вправе иметь свое мнение, мы не настаиваем.

[mezastel]

Data Engineering не требует глубокого знания статистики и теории вероятностей

Я видел в свое время результат творчества исследователей без образования в области статистики и теорвера. И самое грустное что им очень легко затеряться в технологической компании, где и остальные-то не понимают как делать исследования. Результатом этого было одно — фееричная бушлитность и непригодность всех исследований.

[epee]

так судя из написанного DE исследовательской частью и не занимается, поэтому и не требуется глубоких знаний статистики и теорвера

[mezastel]

А, то есть это просто люди который пишут скрипт перегона данных из одной базы в другую? Ну тогда да, наверное им это и не надо. Другой вопрос, нужно ли выделать на это отдельную роль?

[roryorangepants]

А к чьим обязанностям относится feature engineering — data engineer'а или data scientist'а?

[elena_newprolab]

На самом деле, и те, и другие могут заниматься feature engineering, зависит от конкретной компании и распределения обязанностей, но чаще всё-таки этим занимается data scientist.