Старший инженер по данным

Solvd Inc. — быстрорастущая компания, специализирующаяся на консультационных и технологических услугах с использованием искусственного интеллекта, осуществляющая трансформацию предприятий в областях облака, данных, разработки программного обеспечения и искусственного интеллекта. Мы сотрудничаем с ведущими организациями отрасли для проектирования, создания и внедрения технологических решений, которые обеспечивают измеримые бизнес-результаты.

После приобретения Tooploox, ведущей компании в области искусственного интеллекта и разработки продуктов, Solvd теперь предлагает полноценное сквозное выполнение проектов — от стратегического консультирования и проектирования решений до разработки индивидуальных AI-продуктов и внедрения на уровне предприятия. Наши центры компетенций объединяют глубокую техническую экспертизу, проверенные методологии реализации и отраслевые знания для быстрого и эффективного решения сложных бизнес-задач.

Мы ищем старшего инженера по данным (Senior Data Engineer) для работы в команде, которая занимается миграцией производственной SaaS-платформы данных с устаревшего ETL/стримингового конвейера на нативное приложение Snowflake, созданное для самостоятельного распределения и изоляции данных по арендаторам.

Это не разработка с нуля — это миграция с реальными ограничениями наследия. Вы будете работать с существующей производственной системой, которая уже была детально проверена, и преобразовывать эти результаты в работающую нативную платформу данных Snowflake. Вам должно быть комфортно читать архитектуру, созданную другими, выявлять её слабые места при масштабировании или при требованиях к изоляции между арендаторами и проектировать новую архитектуру вокруг этих ограничений.

Что вам предстоит делать

• Перепроектировать процесс загрузки данных — спроектировать и построить замену текущему пути от конечной точки до облачной функции, далее в стриминговую очередь, затем в ETL и хранилище, переместив загрузку данных непосредственно в аккаунт Snowflake каждого клиента, чтобы обеспечить полную историю соблюдения суверенитета данных платформы.

• Мигрировать логику устаревшего ETL — перевести существующую логику трансформаций, охватывающую данные активности, встреч/событий, сетевого контекста и системных метаданных, в нативные конвейеры Snowflake с использованием оптимального сочетания встроенных инструментов трансформации и оркестрации.

• Проектировать с учётом изоляции по арендаторам — создавать модели данных и логику конвейеров, которые выдерживают модель распределения с несколькими аккаунтами и арендаторами, с чётким разграничением границ арендаторов на уровне схем, конвейеров и управления секретами.

• Работать с известным техническим долгом — общие учётные данные, встроенные в клиентские сборки, конфигурация только на этапе сборки без возможности живого предоставления арендаторам, непоследовательное соответствие данных между платформами — принимать решения по каждому случаю, что переносить, перерабатывать или исключать.

• Перестроить основную модель данных платформы — активности, событий, сети и метаданных — сохраняя аналитику, на которую опирается бизнес, при переносе хранения и обработки в Snowflake.

• Проверять на основе реальных производственных паттернов данных — размеры пакетов, частоты синхронизации, отставания в офлайн-очередях — собранных в ходе анализа, чтобы убедиться, что новая архитектура конвейера выдерживает реалистичные нагрузки.

• Документировать решения по миграции достаточно подробно, чтобы их можно было защищать внутри компании, перед конечными клиентами и в рамках формального процесса проверки на маркетплейсе.

Требуемые навыки и опыт

• Более 5 лет опыта работы инженером по данным с практическим опытом работы с Snowflake — нативные функции трансформации и оркестрации, а не только SQL.

• Реальный опыт миграции существующего производственного ETL-конвейера на облачную нативную платформу — не разработка с нуля.

• Рабочие знания стриминговых и событийных конвейеров.

• Умение читать и анализировать модель безопасности системы — шифрование данных в покое и при передаче, управление ключами, обработка секретов в мультиарендной среде — достаточно хорошо, чтобы выявлять, когда предложенный дизайн повторно вводит ранее обнаруженные уязвимости.

• Знакомство с функциями/услугами PaaS основного облачного провайдера, так как части миграции должны будут взаимодействовать с текущей производственной системой в период перехода.

• Опыт проектирования изоляции данных для мультиарендных SaaS — схемы на арендатора, безопасность на уровне строк или эквивалентные паттерны.

Желательные квалификации

• Опыт создания и распространения приложений через собственный маркетплейс или модель листинга облачной платформы данных.

• Опыт работы в области аналитики персонала, мониторинга активности или аналогичных областях поведенческих/событийных данных — активность приложений/окон/URL, данные встреч, сетевой контекст.

• Опыт миграции BI-инструментов вместе с переходом на новую платформу данных.

Присоединившись к Solvd, вы…

• Будете участвовать в реальных проектах с использованием искусственного интеллекта в ключевых отраслях, работая с клиентами от стартапов до трансформации крупных предприятий.

• Станете частью глобальной команды с равными возможностями для сотрудничества между континентами и культурами.

• Будете развиваться в инклюзивной среде, которая ставит в приоритет непрерывное обучение, инновации и этические стандарты AI.

Готовы внести свой вклад?

Если вы хотите создавать значимые вещи, поддерживать ответственное использование искусственного интеллекта и развиваться вместе с одними из самых талантливых специалистов отрасли, подавайте заявку сегодня, и давайте творить инновации вместе.

Solvd является работодателем, предоставляющим равные возможности.