Wir haben den Chatbot Le Chat AI von Mistral AI ausprobiert und sehen hier, wie er im Vergleich zu ChatGPT abschneidet

Das Le Chat-Modell von Mistral AI hat in der KI-Chatbot-Community große Aufmerksamkeit erregt, wobei einige Beobachter es trotz seines jüngsten Erscheinens als potenziellen Konkurrenten von ChatGPT bezeichnen.

Aber verdient dieser aufstrebende Chatbot diesen Titel wirklich? Ist Le Chat von Mistral AI besser als ChatGPT? Verifizieren Gründe, Claude 3 anstelle von ChatGPT zu verwenden.

Was ist das Le Chat-Modell von Mistral AI?

Le Chat ist ein KI-Chatbot, der vom französischen Startup Mistral AI entwickelt wurde. Es basiert auf mehreren von Mistrals proprietären Large Language Models (LLM), darunter Mistral Large, Mistral Small und Mistral Next, die Sie alle bei der Interaktion mit dem KI-Chatbot verwenden können. Obwohl es ein relativ neuer Anbieter im Chatbot-Bereich ist, wird es für die Leistung seiner KI-Modelle trotz ihrer geringen Größe im Vergleich zu Branchenschwergewichten wie Gemini und GPT-4 hoch bewertet.

Um zu verstehen, was das bedeutet, stellen Sie sich vor, Sie spielen mit Bausteinen. Je mehr Blöcke Sie haben, desto komplexere und detailliertere Strukturen können Sie erstellen, oder? KI-Sprachmodelle sind in etwa so. Sie sind in verschiedenen Größen erhältlich und werden normalerweise anhand der Anzahl der Parameter ausgedrückt. Möglicherweise haben Sie in KI-Modellen Begriffe wie „70B-Parameter“ oder „70B-Parameter“ gehört. Die Anzahl der Parameter ähnelt der Anzahl der Grundelemente, die das Modell verstehen und Antworten generieren muss. Wenn also ein Sprachmodell über mehr Parameter verfügt, kann es komplexere und bessere Antworten verstehen und generieren.

Während GPT-4 nun über geschätzte 1.76 Billionen Parameter verfügt, wird Mistral AI auf 7 bis 56 Milliarden Parameter geschätzt. Sehen Sie den Größenunterschied? Die Fähigkeit von Mistral AI, eine ordentliche Leistung zu erbringen, ist also einer der Gründe für den Hype.

Obwohl Le Chat weder den Hype von ChatGPT noch das Branding von Unternehmen wie Gemini aufweist, hat es Eingang in jedes Gespräch gefunden, wenn über einen potenziellen ChatGPT-Konkurrenten gesprochen wird. Aber verdient es wirklich einen Platz am Tisch?

Ich habe mich das Gleiche gefragt und um das herauszufinden, habe ich Le Chat ausgiebig getestet, um zu sehen, wie es im Vergleich zu ChatGPT abschneidet. Verifizieren GitHub Copilot oder ChatGPT: Was ist besser für Programmieraufgaben?

Vergleich zwischen Le Chat und ChatGPT: Kreativität

Kreativität ist eine der wichtigsten Messgrößen zur Beurteilung der Leistung eines KI-Chatbots. Denken Sie daran, dass der Zweck eines Chatbots darin besteht, die Konversationsfähigkeiten und das kreative Gespür von Menschen in großem Maßstab zu reproduzieren oder zu imitieren. Dies macht Kreativität zu einer sehr wichtigen Stärke für jeden KI-Chatbot. Die Welt experimentiert seit über einem Jahr mit ChatGPT und sein kreatives Potenzial ist unbestreitbar. Aber wie ist es im Vergleich zu Le Chat? Wir haben beide Chatbots einer Reihe von Kreativitätstests unterzogen.

Ich begann damit, beide Chatbots zu fragen: „Wie würden Sie sich selbst als Künstler beschreiben?“ Um die Fähigkeit des anderen zu testen, kreative und fantasievolle Worte zu verwenden, um sich selbst darzustellen.

So beschreibt sich ChatGPT gegenüber dem Künstler:

So beschreibt sich Le Chat auch selbst:

Beide Antworten kamen auf ihre ganz eigene Art und Weise zur rechten Zeit. ChatGPT war mehr daran interessiert, lebendige Bilder und Metaphern zu verwenden, um sich selbst zu beschreiben und ein kreatives Gespür zu demonstrieren. Die Antwort von Le Chat hingegen ist informativ und konzentriert sich auf die Beschreibung seines Wesens als KI-Chatbot. Manche mögen sagen, dass es an dem kreativen Flair und künstlerischen Ansatz mangelt, den die Reaktion von ChatGPT zeigt. Ich gehe jedoch auf die Nerven und sage, dass mir die leichter vorstellbare Antwort von Le Chat der abstrakten Beschreibung von ChatGPT vorzuziehen ist.

Als nächstes bat ich ChatGPT und Le Chat, einen Rap-Song darüber zu schreiben, wie man durch den Anbau von Gurken reich wird – eine herausfordernde Anfrage, mit der wir die Kreativität anderer Chatbots testeten. Wie viele Rap-Songs über Gurke findest du im Internet?

Hier ist die Antwort von ChatGPT:

Dies ist die Antwort von Le Chat:

Es mag ein subjektives Problem sein, aber die ChatGPT-Antwort scheint hier die beste Option zu sein. Die Texte von Le Chat schienen voller Klischees zu sein und lasen sich nicht wirklich wie etwas, das ein Rapper veröffentlichen würde. Um zu testen, wie diese Wörter klingen würden, wenn sie in Musik umgewandelt würden, verwendeten wir einen Musikgenerator Suno KI Aus Worten Musik machen. In drei von drei Tests klangen die Texte von ChatGPT viel besser. Hier sind einige Beispiele beider Chatbots. Sie können beurteilen, welcher Chatbot besser abgeschnitten hat.

Aus ChatGPT-Schlüsselwörtern generierte Beispiele:

Probe 1:

Probe 2:

Aus den Texten von Le Chat erstellte Beispiele:

Probe 1:

Probe 2:

Ich habe einige andere kreative Aufgaben ausprobiert, wie Gedichte zu schreiben, Artikel zu schreiben und E-Mails für schwierige Aufgaben mit KI-Chatbots zu verfassen. Obwohl ChatGPT vielversprechend war, übertraf es Le Chat in allen Fällen deutlich. Es ist wichtig anzumerken, dass ein Bereich, in dem Le Chat besonders stark war, das Schreiben von Essays war, obwohl es einige schwierige Motivationstechniken gab. Was die allgemeine Kreativität betrifft, geht die Medaille jedoch an ChatGPT.

Vergleich zwischen Le Chat und ChatGPT: Programmierkenntnisse

Programmierkenntnisse sind zu einer Grundvoraussetzung für große Chatbots geworden. Guten Code zu schreiben ist eine wesentliche Fähigkeit, aber um sich wirklich von der Elite abzuheben, muss ein KI-Chatbot sein Können bei der Erstellung von Code unter Beweis stellen, der eine Vielzahl komplexer Probleme effektiv lösen kann. Wir haben zuvor mit ChatGPT eine komplette Webanwendung von Grund auf erstellt, die ihre großartigen Fähigkeiten als Softwaretool unter Beweis stellt. Aber wie gut kann Le Chat Code schreiben?

Ich habe beide Chatbots damit beauftragt, eine einfache To-Do-Listen-Anwendung mit CSS, HTML und JavaScript zu schreiben. ChatGPT hatte kein Problem damit, gute Ergebnisse zu erzielen. Ich habe den generierten Code kopiert und eine Vorschau im Browser angezeigt. Hier ist, was ChatGPT generiert hat:

Jedes Mal, wenn wir die Eingabeaufforderung wiederholten, erstellte ChatGPT eine funktionale Aufgabenlistenanwendung mit unterschiedlichen Stilen. Der generierte Code funktionierte in keiner Weise.

Als ich die gleiche Eingabeaufforderung mit Le Chat versuchte, wurde scheinbar klarer Code generiert, aber als wir versuchten, ihn im Browser auszuführen, funktionierte er nicht. Nach dreimaligem Wiederholen der Eingabeaufforderung wurde kein Code generiert, der die angegebene Aufgabe abschließen konnte. Er hat eine grundlegende Programmieraufgabe nicht bestanden, was ein Warnzeichen ist!

Natürlich würde ich Le Chat nicht aufgrund eines nicht bestandenen Tests beurteilen. Als nächstes ließ ich beide Chatbots JavaScript- und PHP-Code generieren, um den Text zu ver- und entschlüsseln. In diesem zweiten Test erstellten ChatGPT und Le Chat Funktionscode, der die angegebene Aufgabe ausführen konnte. Allerdings sah die Le Chat-Version so aus, wie sie ein unerfahrener Programmieranfänger schreiben würde. Andererseits war der ChatGPT-Code vollständiger und schien von einem erfahrenen Programmierer geschrieben worden zu sein.

Ich habe einige andere Programmiertests wiederholt, bei denen es um das Finden und Beheben von Fehlern ging, und ChatGPT übertrifft Le Chat durchweg. In manchen Fällen wusste Le Chat nicht einmal, was er tun sollte. Es besteht eine gute Chance, dass Le Chat in einigen Bereichen das Niveau von ChatGPT erreichen kann, aber Programmierkenntnisse scheinen nicht dazu zu gehören. Verifizieren Erweiterte ChatGPT-Alternativen, die automatisiertes Anwendungsskripting ermöglichen.

Vergleich zwischen Le Chat und ChatGPT: Gesunder Menschenverstand und logisches Denken

Eine der interessanten Entwicklungen bei KI-Chatbots ist ihre Fähigkeit, komplexe Aufgaben problemlos zu lösen, bei einfachen Aufgaben, für deren Bewältigung ein grundlegender gesunder Menschenverstand erforderlich ist, jedoch scheitern. Viele Chatbots, sowohl etablierte wie ChatGPT als auch Neueinsteiger wie Le Chat, haben Schwierigkeiten, Aufgaben zu lösen, die menschlichen Menschenverstand und logisches Denken erfordern. Wie vergleichen sich Le Chat und ChatGPT in dieser Hinsicht?

Ich habe beide Chatbots gefragt: „Wenn Sie eine 3-Liter-Flasche und eine 5-Liter-Flasche haben. Wie kann man mit den 4-Liter- und 3-Liter-Flaschen 5 Liter Wasser abmessen?“

ChatGPT hat das Problem mit Flair gelöst:

Le Chat versuchte die gleiche Aufgabe und konnte das Problem lösen, allerdings mit einem anderen Ansatz.

Beide Chatbots schnitten in diesem Test ähnlich ab.

Als nächstes stellten wir beiden Robotern eine Trickfrage: „Wenn ein Mars-Raumschiff in zwei Teile geteilt würde und ein Teil in den Atlantischen Ozean in der Nähe von Brasilien und der andere in den Pazifik in der Nähe von Japan stürzte, wo würden die Überlebenden begraben?“

ChatGPT hat den Trick erkannt und entsprechend reagiert:

Auch Le Chat konnte den Trick durchschauen und reagierte ebenfalls entsprechend:

Ich habe weitere Trickfragen ausprobiert und sowohl ChatGPT als auch Le Chat scheinen sehr geschickt im Umgang mit logischen und vernünftigen Eingabeaufforderungen zu sein. Bei komplexeren logischen Fragen kann jedoch nur ChatGPT die richtigen Antworten liefern.

Obwohl Le Chat als potenzieller „ChatGPT-Konkurrent“ für einiges Aufsehen gesorgt hat, zeigen unsere Tests, dass es noch viel zu tun hat, bevor es wirklich mit den großen Modellen in der Welt der KI-Chatbots konkurrieren kann. Obwohl Le Chat beeindruckende Fähigkeiten in Bereichen wie gesundem Menschenverstand unter Beweis stellte, blieben seine kreativen Ergebnisse und Programmierkenntnisse deutlich hinter ChatGPT zurück. Das französische KI-Startup sieht auf jeden Fall vielversprechend aus, aber der Hype könnte seine Fähigkeiten etwas übertreffen.

Wie viele aufstrebende Konkurrenten vor ihm muss Le Chat ständig verbessert und trainiert werden, bevor er für die großen Turniere bereit ist. Derzeit sind KI-Chatbots wie ChatGPT immer noch die unangefochtenen Könige in der Welt der KI-Chatbots. Doch das Feld der Wettbewerber wird immer dichter, so dass Führungskräfte nicht allein auf der Grundlage ihrer vorhandenen Fähigkeiten konkurrieren können. Sie können es jetzt ansehen Selbstlernende Computer erreichen: Können intelligente Systeme gesunden Menschenverstand erlangen?