В ML Space появилась универсальная модель для решения задач в текстово-визуальном домене
Датахаб ML Space пополнился генеративной моделью для работы с текстами и изображениями — RUDOLPH 2.7В. Она адаптирована под решение разнообразных задач в обеих модальностях.
Разработчики обучили RUDOLPH на 119 миллионах пар текст-изображение и 60 миллионах текстов на русском языке. Поэтому ML-модель умеет создавать описание к изображению, а также отвечать на вопросы по тексту и изображению. Еще RUDOLPH способен генерировать изображение по текстовому запросу на естественном языке. Например, «Распознай текст на изображении» или «Сгенерируй изображение по тексту».
RUDOLPH можно использовать как есть, либо дообучить модель на дополнительных задачах для достижения ваших целей.
Модель RUDOLPH 2.7В уже доступна в DataHub ML Space. Если у вас нет доступа в ML Space, оставляйте заявку на подключение как юрлицо.