Нейросеть Chai

CHAI AI — платформа для создания персональных собеседников с искусственным интеллектом, которая стремится максимально увеличить вовлеченность пользователей и длительность общения.

Эволюция проекта

Запущенная в ноябре 2022 года в App Store, CHAI стала одной из первых потребительских AI-платформ, где пользователи могли создавать собственных виртуальных собеседников. Компания опередила такие сервисы как Character AI и даже ChatGPT.

С февраля 2023 года команда перешла на использование собственной языковой модели (6B), что сразу повысило вовлеченность пользователей на 10%. В марте внедрили систему обучения с подкреплением на основе человеческой обратной связи (RLHF) и разработали модель вознаграждения, обучаемую на сигналах от пользователей, что значительно повысило удержание аудитории.

В последующие месяцы команда CHAI последовательно улучшала свои технологии:

• Масштабировали архитектуру до 13B, что улучшило глубину диалогов
• Внедрили метод Proximal Policy Optimization для снижения вероятности завершения чат-сессий
• Разработали расширенную модель вознаграждения на основе 100 миллионов пользовательских сигналов
• Оптимизировали инференс и создали собственное GPU-оркестрирование для поддержки 500 000 ежедневных активных пользователей

Техническая сторона

Разработчики CHAI обнаружили, что открытые языковые модели не справлялись с требованиями пользователей в социальном контексте, что привело к созданию собственных решений. Интересно, что хотя команда пыталась мотивировать разработчиков финансово, наиболее эффективными стимулами оказались качественная обратная связь, признание и удовлетворение от создания популярного продукта.