Dies ist ein von KI übersetzter Beitrag.
Sprache auswählen
Von durumis AI zusammengefasster Text
- Google hat neue experimentelle Modelle veröffentlicht, darunter Gemini 1.5 Pro Exp, Gemini 1.5 Flash Exp und Gemini 1.5 Flash 8B Exp. Insbesondere Gemini 1.5 Pro Exp bietet eine verbesserte Leistung gegenüber der vorherigen Version, während Gemini 1.5 Flash Exp ein Upgrade der besten Version in der Einstiegsklasse darstellt.
- Gemini 1.5 Flash 8B Exp bietet eine Leistung, die der von Claude 3 Sonnet ähnelt, und ist eine leichtgewichtige Version der Flash-Reihe. Bei der Übersetzung von Text mit komplexen JSON-Strukturen ist es etwas weniger leistungsfähig als die Pro-Reihe, aber bei der Zusammenfassung und beim Schreiben von Text liefert es zufriedenstellende Ergebnisse.
- Google erwartet, dass Gemini 1.5 Flash 8B Exp bei der offiziellen Veröffentlichung zu einem günstigen Preis angeboten wird, was erhebliche Auswirkungen auf andere Reihen haben könnte. Nach der Veröffentlichung werden wir die Preislisten erneut vergleichen und analysieren und diese Ergebnisse teilen.
Google hat kürzlich neue Modelle von Gemini veröffentlicht.
Es sind eigentlich keine offiziellen Versionen, sondern experimentelle (Experimental) Versionen.
Diese Modelle sind:
- Gemini 1.5 Pro Exp
- Gemini 1.5 Flash Exp
- Gemini 1.5 Flash 8B Exp
Zunächst einmal sind 1.5 Pro Exp und 1.5 Flash Exp als Updates der vorherigen Versionen anzusehen. Wenn man sie tatsächlich testet, stellt man fest, dass 1.5 Pro Exp im Vergleich zum vorherigen 1.5 Pro eine etwas höhere Leistung aufweist (die Benchmark-Leistung hat sich ebenfalls verbessert. Ich habe keine Daten darüber, aber im Vergleich zu den zuvor veröffentlichten Versionen ist es die beste Version). Auch 1.5 Flash Exp ist natürlich nicht die beste, aber im Vergleich zu den Einsteigerversionen ist es eine deutliche Verbesserung.
Laut Google sollen die beiden Versionen innerhalb weniger Wochen in die vorherigen Versionen 1.5 Pro und 1.5 Flash integriert werden. (Die vorherige Version war 001, daher wird es wahrscheinlich ein Update auf Version 002 sein.)
Quelle: Chatbot Arena
Wenn man sich die Tabelle ansieht, befindet sich die Version Gemini 1.5 Pro Exp auf Platz 2 und Gemini 1.5 Flash Exp auf Platz 6.
Interessant ist, dass 1.5 Flash Exp über 1.5 Pro, das auf den Plätzen 10 und 11 steht, liegt.
Die Plätze 1-5 werden von den Flaggschiff-Versionen der jeweiligen Unternehmen belegt (GPT 4o, Gemini 1.5 Pro, Grok 2), die Plätze 6 und 7 von den Einstiegslinien der jeweiligen Unternehmen (GPT 4o mini, Gemini 1.5 Flash). Lange Zeit war Claude 3.5 Sonnet an der Spitze ... aber die Geschwindigkeit der Entwicklung in dieser Branche ist wirklich ...
Jedenfalls werden die beiden Versionen (1.5 Pro, 1.5 Flash) meiner Meinung nach bald zu offiziellen Versionen, und derzeit bin ich neugierig auf die Version 1.5 Flash 8b.
Zuerst sollten wir uns den Benchmark einmal ansehen.
Quelle: Chatbot Arena
Wenn man sich den Benchmark oben ansieht, ist die Leistung von 1.5 Flash 8b Exp etwa vergleichbar mit der von Claude 3 Sonnet, wobei es sich etwa auf dem Niveau der vorherigen Version 1.5 Flash befindet, aber auch ähnliche Leistung wie Llama 3 70 b zeigt.
Flash ist eine leichtgewichtige Version von Pro, und Flash 8b ist eine noch viel leichtgewichtigere Version (wahrscheinlich).
Ich habe ein paar direkte Tests durchgeführt, vor allem mit den Tests, die in unserem Dienst häufig verwendet werden:
- Übersetzen.
- Zusammenfassen.
- Text verfassen.
Es gibt viele andere Tests an anderen Orten, daher habe ich nur ein paar Tests durchgeführt. Bei der Übersetzung eines komplexen JSON-strukturierten Texts lieferte Flash keine zufriedenstellenden Ergebnisse, während die Pro-Reihe eindeutig zufriedenstellend war. Darüber hinaus lieferte die Pro Exp-Version ein saubereres Ergebnis.
Sowohl bei der Zusammenfassung als auch beim Texten lieferte Flash, ja sogar Flash 8b, zufriedenstellende Ergebnisse. Es zeigt sich, dass einfache Aufgaben mit Flash 8b erledigt werden können, sofern es sich nicht um hochkomplexe Aufgaben handelt.
Wenn man sich die Leistung oder die Parameter ansieht, ist es wahrscheinlich, dass Google Flash 8b bei der offiziellen Veröffentlichung zu einem sehr günstigen Preis anbieten wird.
Wahrscheinlich wird der Preis so niedrig sein, dass er den bestehenden Lineups anderer Unternehmen großen Schaden zufügt. Sobald es veröffentlicht ist, werde ich "wieder" mit einer Preisliste zurückkommen.
