Мы в социальных сетях
Мы в социальных сетях
Александр Непочатых
Исполнительный директор @ Сбер
Москва

Архитектура платформы обработки и хранения данных для обучения GenAI моделей

  • Категории: MLDataConf
  • Секции: Хранилище данных

Описание:

- Какую задачу мы решаем с помощью платформы обработки и хранения данных

- Какие вехи в разработке архитектуры мы прошли и что поняли на каждом шаге

- Как функционирует многоуровневая архитектура платформы данных - как в одном продукте уживается cloud.ru, apache spark, apache airflow, apache iceberg и parquet, и почему мы все пишем на python

- Как мы используем имеющиеся инструменты

- Какие строим планы на будущее

О спикере

Александр Непочатых
Исполнительный директор @ Сбер
Москва

Тимлид команды разработки BigData решений с опытом более 10 лет в IT. Работаю в SberDevices, вместе с командой готовим данные для AI моделей Сбера и приближаем будущее.

Похожие доклады
Решаем задачу Action Recognition
Сложности и хитрости при разработки приложений с LLM / мысли почему перенесли Apple Intelligence на год.