
VK представила обновленную языковую модель Diona для генерации и обработки текстов. Новая версия требует меньше ресурсов по сравнению с предыдущей, что позволило снизить нагрузку на инфраструктуру и ускорить ряд внутренних процессов.
При ее разработке использовались некоторые наработки предыдущей версии, которую тренировали на пользовательском контенте, в том числе на комментариях из открытых групп во «ВКонтакте». Однако также проводилось и новое базовое обучение модели на больших объемах текстов.
Диапазон параметров (число внутренних переменных, определяющих, как модель распознает и обрабатывает информацию) у новой версии модели вырос в 1,5 раза и теперь, по заверению компании, составляет от 4 млрд до 30 млрд.





