Что лучше - ChatGPT, GigaChat или Mistral? Часть 1. Сравниваем качество генерации текста

Наши контакты: Больше материалов по чат-ботам и LLMs: Ml16EbQoepcwMGNi 00:00 - введение 01:01 - сравнение GigaChat, Mistral и ChatGPT на MMLU, HumanEval, HellaSwag и WinoGrande 03:22 - таблица сравнения моделей на различных бенчмарках 04:22 - какие кейсы будем рассматривать 04:32 - запускаем модели в jupyter notebook 06:38 - файл с промптами 06:58 - сравнение моделей на промптах для генерации контента 10:59 - промпты для маркетинга (генерация рекламных объявлений) 15:23 - промпты для сферы продаж 21:44 - итоговая таблица сравнения gpt-4, , GigaChat-Pro и Saiga-Mistral 22:02 - выводы