VK представила обновленную версию собственной модели искусственного интеллекта Diona, которая предназначена для генерации и редактирования текстов. Её функциональные возможности стали шире, при этом потребление вычислительных ресурсов снизилось. В будущем компания планирует развить модель до мультимодальной — научить её также обрабатывать изображения, аудио и видео.
Новая версия Diona создана на базе существующей архитектуры, изначально обученной на материалах пользователей, в том числе на их комментариях из открытых сообществ. Теперь для обучения были задействованы также значительные объемы других текстовых данных. Количество параметров Diona увеличилось в 1,5 раза и теперь варьируется от 4 млрд до 32 млрд. Затраты на разработку проекта в VK не раскрываются, однако, по оценкам специалистов, создание аналогичных моделей обходится в сумму от 500 млн до 800 млн руб. «Она открывает новые перспективы для внутренних инструментов VK и генеративных функций в продуктах холдинга. Лучше справляется с решением инженерных задач, а также с задачами генерации и суммаризации текстов», — цитирует «Коммерсантъ» заявление компании.
Снизить расходы в VK, возможно, удалось за счет использования открытой модели ИИ в качестве основы и её последующего дообучения, предполагают эксперты, опрошенные изданием. Указанное разработчиком число параметров позволяет отнести Diona к категории универсальных, а не узкоспециализированных моделей, причем в нижнем сегменте. Такие модели можно запускать на обычных ПК с потребительскими видеокартами — в то время как у флагманских решений число параметров измеряется сотнями миллиардов и доходит до триллиона.
Контекстное окно VK Diona возросло в восемь раз и достигло 32 тыс. токенов. Этот показатель, как отмечают эксперты, отнюдь не прорывной, но его вполне достаточно для решения прикладных задач, таких как обработка документов и анализ переписки. В перспективе VK намерена преобразовать Diona в мультимодальную модель, то есть, помимо текста, обучить её работе с графикой, звуком и видео — на это, по мнению аналитиков, у компании может уйти от двух до трех лет. как стало известно из источников.
Если на странице вы заметили в посте отсутствие изображений, просьба сообщить , нажав на кнопку.
После прочтения материала " VK обновила ИИ-модель Diona для генерации текстов ", можно просмотреть форум и поискать темы по данной игре.