3 октября в 12:00 доктор технических наук Владимир Крылов расскажет о бенчмарках для LLM. Рассмотрим современные методы оценивания способностей больших языковых моделей решать различные задачи.
Вы узнаете:
🔸какие бенчмарки для определения лучших моделей сейчас наиболее типичны;
🔸как применяется шахматный рейтинг ELO для бенчмаркинга;
🔸что такое Leaderboard Arena;
🔸какие частные, но важные бенчмарки применяются для проблемно ориентированных моделей и мультимодальных LLM.
Если вы хотите работать в ИТ и в Artezio, отправляйте своё резюме по ссылке
Подписывайтесь на телеграм-канал AI4Dev:
70 views
482
137
3 days ago 00:22:34 1
[Planya Channel] КИТАЙЦЫ ПОБЕДИЛИ? | BLACK MYTH WUKONG
3 days ago 00:14:36 1
[Кунька] ЛУЧШИЙ ШТЫК М9 НОЖ! КАКОЙ ШТЫК М9 НОЖ ЛУЧШЕ КУПИТЬ! САМЫЙ ЛИКВИДНЫЙ ШТЫК М9 НОЖ!
3 days ago 00:10:59 1
Сравнение Режимов, какой лучше? Your Bizarre Adventure и World Of Stands
3 days ago 00:01:33 1
СРАВНЕНИЕ. Возраст сексуального согласия в разных странах мира
3 days ago 00:24:06 4
[Newtonlabs] iPhone 14 vs 15 vs 16. Стоит ли переплачивать?
3 days ago 00:27:37 34
[ЯЯНА] Сравниваю ВИНТАЖНЫЕ и НОВЫЕ товары**назад в СССР**
3 days ago 00:10:51 2
Audient iD4 или Focusrite Scarlett Solo или Behringer UMC22. Обзор и сравнение звуковых карт. Тест
3 days ago 00:29:11 4
[Арсений Петров] КАКОЙ iPHONE ВЫБРАТЬ В 2025: Я В ШОКЕ!
3 days ago 00:26:59 1
iPhone 16 vs 15 vs 14 - Неочевидный выбор | СРАВНЕНИЕ от
3 days ago 00:26:57 1
Сати Казанова: «Как найти свое предназначение? Что такое миссия жизни?»
3 days ago 00:00:54 1
Какая слава Украине? Где заводы? Беларуси в подметки не годится! Украинец сравнил две страны
3 days ago 00:17:25 1
C POIZON Приходит ПАЛЬ? Сравниваю с Оригиналом!
3 days ago 00:32:22 11
Цены на Пхукете vs Россия: Где Дешевле Покупать?
3 days ago 00:18:40 3
[GodRay] Графика Driveclub это нечто! Сравнение с Forza Motorsport 2023
3 days ago 00:25:58 11
FLUX: Полный гайд по лучшей TXT2IMG модели для webui FORGE! Сравнение версий, установка, настройка (c)Nerual Dreming
3 days ago 00:57:07 1
JUMP UP ПРОТИВ DEEP DRUM&BASS [БИТВА ЖАНРОВ #8]
3 days ago 00:00:58 1
Производство сельхозпродукции в Дагестане за 8 месяцев выросло почти на 2% по сравнению с аналогичным периодом
3 days ago 00:35:59 140
Защита кожи от и до - покрытия для кожаного салона. Как и чем ухаживать? Тест и сравнение
3 days ago 00:14:02 2
[Василий Дорин] Показываю, почему спецслужбы НЕ смогут восстановить данные после форматирования жесткого диска
3 days ago 01:33:42 1
СтереоПравда с Мишей Кучеренко. Сравниваем аудиоформаты на акустике Tidal с усилением Gryphon
3 days ago 00:15:29 1
Сравнение бейткастинговых катушек Shimano SLX и Shimano SLX XT
3 days ago 10:00:00 1
🎧 # 115 Зеленый Шум Черный Экран, 10 часов 😴 Сладкий шум для Сна, Релакса, Чтения, Учебы
3 days ago 00:07:25 15
Масштаб 9EMU 1/10 или 1/8? Сравним моделями Remo Hobby 1/10, 1/8 и Slash Traxxas
3 days ago 00:25:59 1
FLUX: Полный гайд по лучшей TXT2IMG модели для webui FORGE! Сравнение версий, установка, настройка