Инженеры данных: незаметные архитекторы трансформаций с помощью ИИ
Инженеры данных выходят на передний план
По мере того как организации внедряют ИИ в всё больше бизнес-процессов, старшие руководители всё чаще понимают: именно инженеры данных играют ключевую роль в реализации этих инициатив. ИИ работает только при наличии больших объёмов надёжных, хорошо организованных и качественных данных — это как раз область ответственности инженеров данных. Согласно отчету MIT Technology Review Insights, инженеры данных рассматриваются как ключевые участники внедрения ИИ и важная часть успеха бизнеса.
Результаты опроса: расширение влияния и изменение приоритетов
Выводы основаны на опросе 400 старших руководителей в области данных и технологий, проведённом MIT Technology Review Insights. Опрос показывает, что влияние инженеров данных выходит далеко за рамки управления конвейерами. Их ежедневная работа смещается от традиционных задач управления данными в сторону ИИ‑специфичных задач: средняя доля времени, проводимого на проектах ИИ, выросла с 19% в 2023 году до 37% в 2025 году, и респонденты ожидают, что в течение двух лет она достигнет в среднем 61%. Это отражает стратегическую важность ИИ для организаций.
Рост сложности и увеличивающаяся нагрузка
Одновременно с ростом влияния инженеры данных сталкиваются с возрастающими проблемами. Продвинутые модели ИИ повышают значимость работы с неструктурированными данными и поддержания каналов данных в реальном времени, что усложняет архитектуру и эксплуатацию. Нагрузка также увеличивается: 77% респондентов отмечают, что рабочая нагрузка инженеров данных становится тяжелее. Команды просят делать больше, быстрее и с большей надёжностью.
Отличия по размеру компании и отраслям
Опрос показывает, что восприятие важности инженеров данных зависит от размера организации и отрасли. В целом 72% технологических лидеров считают инженеров данных неотъемлемой частью бизнеса, однако в крупнейших организациях — где зрелость ИИ выше — этот показатель достигает 86%. Особенно сильное восприятие отмечено в финансовом секторе и производстве, где качество данных и надёжность конвейеров напрямую влияют на базовые процессы.
Что это значит для компаний
Поскольку инженеры данных берут на себя всё больше задач, связанных с ИИ, компаниям следует пересмотреть ресурсы, инструменты и процессы. Инвестиции в инфраструктуру для работы с неструктурированными данными, стриминг в реальном времени, наблюдаемость и автоматизацию помогут справляться со сложностью и масштабировать нагрузку. Организации, которые признают и поддерживают изменяющуюся роль инженеров данных, будут лучше подготовлены к получению реальной отдачи от ИИ.
О докладе
Данное изложение подытоживает результаты опроса 400 старших руководителей в области данных и технологий, проведённого MIT Technology Review Insights. Исходный материал подготовлен Insights, подразделением MIT Technology Review, и был исследован, разработан и написан людьми; при необходимости использованные инструменты ИИ применялись только в вспомогательных процессах и проходили проверку человеком.