Сбер продолжает активно развивать свою нейросеть ruGPT-3. Напоминаем, что данная нейросеть способна генерировать очень сложные осмысленные тексты по одному запросу на "человеческом" языке. Презентация прошла в 2020 году.
С момента презентации количество параметров нейросети выросло почти вдвое - с 760 миллионов до 1,3 миллиарда. Сейчас ruGPT-3 является крупнейшей языковой моделью в мире. Она отлично подходит для решения любых задач на английском языке. Что касается формированию качественных ответов на запросы на русском языке, нейросеть сейчас активно обучается на суперкомпьютере Сбера "Кристофари".
RuGPT-3 может создавать тексты любого профиля - от новостей и романов до стихов и технической документации. Также она способна исправлять грамматические ошибки, вести диалоги и писать программный код. Функциональность нейросети растет каждый день. Можно сказать, что она является прообразом сильного искусственного интеллекта Artificial General Intelligence (AGI), который решает разноплановые задачи в самых разных сферах деятельности.
На сегодняшний день ruGPT-3 занимает первое место в рейтинге нейросетей Russian SuperGLUE. С помощью метода few-shot, нейросеть без какого-либо обучения смогла выполнить такие задачи, как:
- Ответы на вопросы по тексту (+3% точности по сравнению с прошлой версией, у которой было 760 миллионов параметров).
- Машинное чтение, что представляло собой тест на понимание общего смысла текста (+32% точности по сравнению с прошлой версией).
- Выбор лучшего решения в заданных условиях (+10% точности по сравнению с прошлой версией).
