Google hävdar att deras artificiella intelligens slår GPT-4, medan Microsoft säger att GPT-4 är bättre.
AV KRISTIAN KASK
Artificiell intelligens
I december lanserade Google sin nya AI, eller snarare sin nya stora språkmodell, Gemini. Modellen Gemini 1.0 finns i tre versioner, Gemini Nano ska vara bäst lämpad för uppgifter på en specifik enhet, Gemini Pro ska vara bästa alternativet för ett bredare urval uppgifter och Gemini Ultra är Googles största språkmodell som ska klara av de mest komplexa uppgifterna.
Något som Google var noga med att lyfta fram vid lanseringen av Gemini Ultra var att språkmodellen var bättre än den senaste versionen av Open AI:s GPT-4 i 30 av de 32 mest använda testerna för att mäta språkmodellernas förmågor. Testerna täcker allt från läsförståelse och olika matematiska frågor till att skriva kod till Python och bildanalys. I vissa av testerna rörde det sig om uppemot tio procentenheters skillnad.
Slår mänskliga experter
Gemini Ultras mest imponerande prestation är nog dock att den är den första språkmodellen som kan slå mänskliga experter i så kallade mmlutester (massive multitask language understanding) där Gemini Ultra och experterna ställdes inför problemlösningsuppgifter inom 57 olika fält, allt från matematik och fysik till medicin, juridik och etik. Gemini Ultra lyckades få ett resultat på 90,0 procent, medan den mänskliga experten AI:n jämfördes mot ”endast” nådde upp till 89,8 procent.
Finns i Pixel-mobil
Lanseringen av Gemini kommer ske stegvis, Gemini Pro blev tillgänglig för offentligheten när Googles chattrobot Bard började använda sig av en modifierad version av språkmodellen, och Gemini Nano finns inbyggd i ett antal olika funktioner på Googles flaggskeppsmobil Pixel 8 Pro. Gemini Ultra är i skrivande stund inte redo för allmänhete
