У нас вы можете посмотреть бесплатно Никита Сидоров. Метрики и бенчмарки для оценки генеративных текстовых моделей или скачать в максимальном доступном качестве, видео которое было загружено на ютуб. Для загрузки выберите вариант из формы ниже:
Если кнопки скачивания не
загрузились
НАЖМИТЕ ЗДЕСЬ или обновите страницу
Если возникают проблемы со скачиванием видео, пожалуйста напишите в поддержку по адресу внизу
страницы.
Спасибо за использование сервиса ClipSaver.ru
DUMP SPb 2025 - 14 февраля, dump-spb.ru DUMP Ekb 2025 - 25 апреля, dump-ekb.ru Метрики и бенчмарки для оценки генеративных текстовых моделей Никита Сидоров Руководитель направления, SberDevices Доклад про автоматические и ручные методы оценки генеративных моделей, как работать с ними при множественном сравнении различных моделей. Также рассмотрим, какие бывают открытые бенчмарки для мультимодальных и текстовых инструктивных моделей. Рассмотрим пример пайплайна по созданию локального бенчмарка с использованием LLM. Слушатели смогут понять, как эфективнее выбирать генеративные модели, и познакомятся с методами создания и валидации датасетов для оценки их качества на своих задачах.