Laut einem neuen Test der Tsinghua-Universität in Peking liegen Ernie Bot 4.0 von Baidu und GLM-4 des Start-up-Unternehmens Zhipu AI unter den chinesischen Large Language Models (LLMs) an der Spitze, aber ihre ausländischen Konkurrenten sind immer noch führend bei den Gesamtfähigkeiten.
Der SuperBench-Bewertungsbericht untersuchte 14 repräsentative LLMs – die Technologie, die Chatbots mit generativer künstlicher Intelligenz (KI) zugrunde liegt – und stellte fest, dass ausländische Modelle wie GPT-4 von OpenAI und Claude-3 von Anthropic in mehreren Funktionen die Nase vorn hatten, darunter semantisches Verständnis, Codierungsfähigkeiten und Ausrichtung auf menschliche Befehle.
Die Forscher fanden „offensichtliche Lücken“ in den Code-Schreib- und operativen Fähigkeiten in der realen Umgebung zwischen inländischen und erstklassigen ausländischen Modellen.
Der Bericht zielt darauf ab, „objektive und wissenschaftliche Bewertungskriterien bereitzustellen“, um eine wachsende Zahl von LLMs zu untersuchen, die in letzter Zeit entstanden sind, heißt es in einem WeChat-Beitrag, der vom Basic Model Research Centre von Tsinghua veröffentlicht wurde, das die Bewertung zusammen mit dem staatlich geförderten Zhongguancun Laboratory durchgeführt hat.
05:03
Wie schlägt sich Chinas KI im Vergleich zu ChatGPT?
Wie schlägt sich Chinas KI im Vergleich zu ChatGPT?
Chinesische Technologiegiganten und Start-ups liefern sich einen Wettlauf um die Verbesserung ihrer LLMs, seit OpenAI, ein von Microsoft unterstütztes US-Start-up, eine Reihe innovativer Tools auf Basis generativer KI auf den Markt gebracht hat, darunter ChatGPT und den Text-zu-Video-Dienst Sora.
Laut Regierungsangaben wurden in China rund 200 LLMs eingeführt, wo die Dienste von OpenAI offiziell nicht verfügbar sind.
Zhipu AI wurde 2019 gegründet und hat nach Angaben seines Gründers seit letztem Jahr 2,5 Milliarden Yuan (347 Millionen US-Dollar) von Geldgebern eingesammelt, zu denen staatsnahe Investoren, Risikokapitalgeber und Big-Tech-Unternehmen wie Alibaba, Tencent Holdings und Meituan gehören.
Laut mehreren chinesischen Medienberichten hat Moonshot AI, ebenfalls mit Sitz in Peking, im Februar in einer Finanzierungsrunde 1 Milliarde US-Dollar eingesammelt.