Dit is een door AI vertaalde post.
De nieuwe Gemini-lijn van Google - Experimenteel
- Taal van de tekst: Koreaans
- •
- Referentieland: Alle landen
- •
- Informatietechnologie
Selecteer taal
Samengevat door durumis AI
- Google heeft nieuwe experimentele modellen uitgebracht, waaronder Gemini 1.5 Pro Exp, Gemini 1.5 Flash Exp en Gemini 1.5 Flash 8B Exp. In het bijzonder is Gemini 1.5 Pro Exp een verbeterde versie van de bestaande versie, en Gemini 1.5 Flash Exp is een upgrade naar de beste in de entry-versie.
- Gemini 1.5 Flash 8B Exp presteert vergelijkbaar met de bestaande Claude 3 Sonnet, is een lichtgewicht versie van de Flash-lijn en is wat minder in staat om complexe JSON-structuren te vertalen dan de Pro-lijn, maar levert bevredigende resultaten op voor taken als samenvatten en schrijven.
- Naar verwachting zal Google Gemini 1.5 Flash 8B Exp tegen een lage prijs uitbrengen, waardoor het een grote impact zal hebben op andere lijnen. Na de lancering zullen we de prijstabel opnieuw analyseren en delen.
Google heeft onlangs nieuwe modellen van Gemini uitgebracht.
Eigenlijk is het geen officiële versie, maar een experimentele (Experimental) versie.
De modellen zijn als volgt.
- Gemini 1.5 Pro Exp
- Gemini 1.5 Flash Exp
- Gemini 1.5 Flash 8B Exp
Allereerst kunnen de 1.5 Pro Exp en 1.5 Flash Exp versies worden beschouwd als updates van de vorige versies. In de praktijk, wanneer je ze test, heeft de 1.5 Pro Exp een iets betere prestatie dan de vorige 1.5 Pro (de benchmarkprestatie is ook verbeterd. Ik heb geen gegevens meegenomen, maar onder de bestaande releases is het de beste. ) De 1.5 Flash Exp is ook niet de beste, maar hij is de beste onder de entry-level versies.
De twee versies zullen binnen een paar weken worden geïntegreerd in de eerdere versies 1.5 Pro en 1.5 Flash (de vorige versie was 001, dus het zal waarschijnlijk worden bijgewerkt naar versie 002).
Bron: Chatbot Arena
Als je naar de tabel kijkt, staat de Gemini 1.5 Pro Exp versie op de tweede plaats en de Gemini 1.5 Flash Exp op de zesde plaats.
Interessant is dat de 1.5 Flash Exp een hogere rang heeft dan de Gemini 1.5 Pro op de 10e en 11e plaats.
De eerste 5 plaatsen zijn de vlaggenschips van de bedrijven (GPT 4o, Gemini 1.5 Pro, Grok 2) en de 6e en 7e zijn de entry-level modellen van de bedrijven (GPT 4o mini, Gemini 1.5 Flash). Claude 3.5 Sonnet was de beste voor een tijdje, maar... de ontwikkelingstempo in deze industrie is echt...
Hoe dan ook, persoonlijk denk ik dat de twee versies (1.5 Pro, 1.5 Flash) binnenkort officieel zullen worden uitgebracht. Ik ben momenteel nieuwsgierig naar de 1.5 Flash 8b versie.
Laten we eerst naar de benchmark kijken.
Bron: Chatbot Arena
De benchmark hierboven laat zien dat de prestatie van de 1.5 Flash 8b Exp ongeveer hetzelfde is als de bestaande Claude 3 Sonnet, en hoewel hij iets hoger of lager is dan de bestaande 1.5 Flash, toont hij een vergelijkbare prestatie als Llama 3 70 b.
Flash is een lichtere versie van Pro, en Flash 8b is een veel lichtere versie dan die (ik denk dat het zo is?)
Ik heb een paar tests gedaan, waaronder zinnen die we veel gebruiken in onze service.
- Vertalen.
- Samenvatten.
- Schrijven.
Andere tests zijn ergens anders beschikbaar, dus ik heb alleen een paar tests gedaan. Toen ik een tekst met een complexe JSON-structuur vertaalde, gaf Flash geen bevredigende output, maar Pro-opstellingen gaven wel bevredigende output. Bovendien produceerde de Pro Exp-versie een meer nette output.
Zowel Flash als Flash 8b gaven bevredigende resultaten voor samenvatting en schrijven. Het lijkt erop dat Flash 8b kan worden gebruikt voor eenvoudige taken, tenzij de taak erg moeilijk is.
Google lijkt van plan om Flash 8b een aanzienlijk lagere prijs te geven bij de officiële release, gezien de prestaties en parameters.
Waarschijnlijk zullen ze een prijs vaststellen die een grote schade aanricht aan de bestaande productlijnen van derden. Zodra het is uitgebracht, zal ik "weer" terugkomen met de prijscatalogus.