Podle výsledků testu nový model Gemini AI od Googlu překonává ostatní, včetně ChatGPT-4o

Gemini 1.5 Pro od Google je nyní v čele závodu generativních modelů umělé inteligence. Předchozí šampion, ChatGPT-4o od OpenAI, byl překonán 1. srpna, když Google zahájil experimentální vydání svého nejnovějšího modelu.

Nový model umělé inteligence přišel bez fanfár a velkých oslav a ihned se dostal do čela nejvýkonnějších AI modelů. Rychle si tak získal pozornost komunity umělé inteligence napříč sociálními médii, jakmile se začaly objevovat zprávy o tom, že překonává své soupeře.

Organizace velkých modelových systémů uvedla:

Vzrušující zprávy z Chatbot Areny! Nový Gemini 1.5 Pro (experimentální 0801) od @GoogleDeepMind byl minulý týden testován v Aréně a získal více než 12 tisíc hlasů komunity.

Poprvé se Google Gemini umístil na prvním místě, když překonal GPT-4o/Claude-3,5 s působivým skóre 1300 (!), a také dosáhl na první místo v našem žebříčku Vision Leaderboard.

Gemini 1.5 Pro (0801) vyniká ve vícejazyčných úlohách a poskytuje robustní výkon v technických oblastech, jako je matematika, těžké úlohy a kódování.

benchmark LMSYS Chatbot Arena testuje modely na různých úkolech a přiděluje celkové skóre kompetence. GPT-4o získal skóre 1 286, zatímco Claude-3 získal slušných 1 271. Předchozí verze Gemini 1.5 Pro dosáhla skóre 1 261 a experimentální verze (Gemini 1.5 Pro 0801) vydaná 1. srpna zaznamenala 1 300.

Ačkoli podle těchto dat nová verze Gemini 1.5 Pro dominuje, benchmarky nejsou jedinou reprezentací toho, které modely jsou nejlepší, nebo co který model umělé inteligence umí a co ne.

Další: