Еще одна интересная статья, которую хотелось бы обсудить с вами:

The future history of Data Engineering
https://groupby1.substack.com/p/data-engineering

Вот несколько интересных мыслей из статьи:

...Most businesses' data engineering needs have been solved or will shortly be solved by managed services that 10 years ago would require endless and extensive self-built ETL pipelines, databases and tools...

...The implications are that while Data Engineering is growing rapidly, so too are the forces that will undermine the need for Data Engineers, and the current under-supply of competent engineers will lead to an over-supply of junior engineers...

...Businesses should strive not to have people worrying about managing infrastructure, plumbing, ops etc over and above what is strictly necessary...

...Think about Sysadmins of the mid-2000s, arcane knowledge that is now redundant in almost every business, due to AWS, then Heroku, now Vercel, Supabase etc flying up the stack. (Or hadoop specialists. Big Data DBA anyone?)...

И еще целая кучка прекрасных цитат. Все это заставляет подумать, а куда движется Data Engineering? Или локальный рынок в России это еще не скоро затронет, ибо у нас еще до сих пор Хадуп популярен...
Впрочем, даже и на это в этой статье есть прекрасная цитата:

When the tide turns, there is a definite moment when the tide has indeed turned, but that change in direction becomes apparent to different boats at different times. This depends on context, location, keel depth and distance from both the equator and the moon (not to mention the sun). The gravitational pull has changed, but the water doesn’t start moving everywhere at the same time.


Прочитайте статью и приходите в комментарии обсудить про наше с вами будущее. Мое мнение будет в первом комментарии)

Удручающая статья

почему?

Как я понял, потребность в де будет снижаться и останутся подобия технический менеджеров (высокоуровневых de, раскладывающих все в облаках). Либо analytics engineer, но последних надо будет несоизмеримо меньше, чем когда-то де Да и на собственном опыте - поставил в резюме должность де вместе python developer. Просмотры пропали.

Ну это очевидный момент: Python developer это ведь очень широкий спектр задач, поэтому "поисковый спрос" на них выше

поставил тоже DE среди недели, открыл резюме для просмотра, что я делаю не так?)

Де не про питон, а про данные. Если у вас подход найти работу, где прогать - то вам явно не в де

После обновления все так, но через недели две, если не обновлять ситуация другая

Чат не тот для обсуждения, это в джобс надо)

Вымирает похоже хх