Artwork

Контент предоставлен Tony Wan. Весь контент подкастов, включая эпизоды, графику и описания подкастов, загружается и предоставляется непосредственно компанией Tony Wan или ее партнером по платформе подкастов. Если вы считаете, что кто-то использует вашу работу, защищенную авторским правом, без вашего разрешения, вы можете выполнить процедуру, описанную здесь https://ru.player.fm/legal.
Player FM - приложение для подкастов
Работайте офлайн с приложением Player FM !

Anthropic's Claude chatbot | Benchmarking LLMs | LMSYS Leaderboard | Episode 24

10:35
 
Поделиться
 

Manage episode 420535012 series 3427795
Контент предоставлен Tony Wan. Весь контент подкастов, включая эпизоды, графику и описания подкастов, загружается и предоставляется непосредственно компанией Tony Wan или ее партнером по платформе подкастов. Если вы считаете, что кто-то использует вашу работу, защищенную авторским правом, без вашего разрешения, вы можете выполнить процедуру, описанную здесь https://ru.player.fm/legal.

In this solo episode, we go beyond Google's Gemini and OpenAI's ChatGPT to take a look at Anthropic, a startup that made headlines after securing a $4 billion investment from Amazon. We'll also dive into the importance of AI industry benchmarks. Learn about LMSYS's Arena Elo and MMLU (Measuring Massive Multitask Language Understanding), including how these benchmarks are constructed and used to objectively evaluate the performance of large language models. Discover how benchmarks can help you identify promising chatbots in the market. Enjoy the episode!

Anthropic's Claude
https://claude.ai
LMSYS Leaderboard
https://chat.lmsys.org/?leaderboard

For more information, check out https://www.superprompt.fm There you can contact me and/or sign up for our newsletter.

  continue reading

28 эпизодов

Artwork
iconПоделиться
 
Manage episode 420535012 series 3427795
Контент предоставлен Tony Wan. Весь контент подкастов, включая эпизоды, графику и описания подкастов, загружается и предоставляется непосредственно компанией Tony Wan или ее партнером по платформе подкастов. Если вы считаете, что кто-то использует вашу работу, защищенную авторским правом, без вашего разрешения, вы можете выполнить процедуру, описанную здесь https://ru.player.fm/legal.

In this solo episode, we go beyond Google's Gemini and OpenAI's ChatGPT to take a look at Anthropic, a startup that made headlines after securing a $4 billion investment from Amazon. We'll also dive into the importance of AI industry benchmarks. Learn about LMSYS's Arena Elo and MMLU (Measuring Massive Multitask Language Understanding), including how these benchmarks are constructed and used to objectively evaluate the performance of large language models. Discover how benchmarks can help you identify promising chatbots in the market. Enjoy the episode!

Anthropic's Claude
https://claude.ai
LMSYS Leaderboard
https://chat.lmsys.org/?leaderboard

For more information, check out https://www.superprompt.fm There you can contact me and/or sign up for our newsletter.

  continue reading

28 эпизодов

所有剧集

×
 
Loading …

Добро пожаловать в Player FM!

Player FM сканирует Интернет в поисках высококачественных подкастов, чтобы вы могли наслаждаться ими прямо сейчас. Это лучшее приложение для подкастов, которое работает на Android, iPhone и веб-странице. Зарегистрируйтесь, чтобы синхронизировать подписки на разных устройствах.

 

Краткое руководство