Разработчик конвейера данных проектирует, конструирует, устанавливает, тестирует и обслуживает высокомасштабируемые системы управления данными. Они обеспечивают соответствие систем бизнес-требованиям и отраслевой практике. Они интегрируют новые технологии управления данными и средства программной инженерии в существующие структуры. Они также создают специализированные программные компоненты и аналитические приложения. Они отвечают за повышение надежности, эффективности и качества данных. Они внедряют сложные аналитические программы, методы машинного обучения и статистики, а также сотрудничают с учеными, изучающими данные, и архитекторами в рамках нескольких проектов. Они также выполняют обработку данных, потоковую передачу данных в режиме реального времени и разрабатывают инструменты аналитики.