Wir haben den neuen Meta AI mit Llama 3 getestet: die echte Chance ChatGPT zu übertrumpfen

Wir haben einen neuen Chatbot im Büro. Es ist Meta.ai, der Assistent, den das Unternehmen von Mark Zuckerberg im September 2023 eingeführt hat und der jetzt aus zwei Gründen immer beliebter wird.

Erstens, weil er auf dem neuen grundlegenden Modell, Llama 3, basiert. Zweitens, weil wir ihn im Web nutzen können: Wir sind nicht mehr auf seine Integration in Apps wie WhatsApp, Instagram, Facebook oder Messenger angewiesen.

Genau das haben wir bei Xataka gemacht, und nach den ersten Stunden der Nutzung haben wir bereits einige Eindrücke darüber, was er leisten kann. Die Überraschung ist nicht, dass er sich gut verhält – was er tut – sondern dass sein wahres Potenzial nicht gerade im Web liegt: Das ist nur das “Zuckerl” von Meta, um mit seinen Konkurrenten auf deren Spielfeld konkurrieren zu können. Sein Vorteil liegt woanders.

Wie man den Meta.ai Chatbot testet

Theoretisch kann Meta.ai nur genutzt werden, wenn wir uns in den Vereinigten Staaten oder einem der 13 zusätzlichen Länder befinden, die in den anfänglichen Start einbezogen wurden, nämlich: Australien, Kanada, Ghana, Jamaika, Malawi, Neuseeland, Nigeria, Pakistan, Singapur, Südafrika, Uganda, Sambia und Simbabwe.

Außerdem kann der Chatbot nur auf Englisch genutzt werden. Meta gibt an, dass er bald in weiteren Sprachen und Regionen verfügbar sein wird, aber momentan sind dies die geografischen und sprachlichen Einschränkungen, die der Dienst auferlegt.

Die geografische Beschränkung kann leicht mit einem VPN überwunden werden. Dies ist eine Methode, die uns bereits in der Vergangenheit ermöglicht hat, Chatbots zu testen, die ebenfalls zunächst in Ländern wie den USA eingeführt wurden, und das trifft auch diesmal zu: Durch die Verbindung mit einem VPN und die Auswahl eines Knotenpunkts in einem der verfügbaren Länder ist das erledigt.

Wir haben eine Verbindung genutzt, die vorgab, wir seien in Atlanta, woraufhin eine Startseite erschien, die uns ermutigte, einige der Nutzungsmöglichkeiten des Chatbots auszuprobieren und uns auch dazu aufforderte, der KI von Meta alles zu fragen.

Ein kaum von seinen Rivalen zu unterscheidender Chatbot

In einer linken Seitenleiste haben wir einen Verlauf der Gespräche und vor allem eine Option, sich bei Facebook anzumelden, was unerlässlich ist, um auf eine der interessanten Optionen dieser Plattform zugreifen zu können: das Erzeugen von Bildern durch KI.

Zunächst konzentrierten wir uns darauf, einige Fragen zu stellen, um seine Antworten zu bewerten. Nachdem festgestellt wurde, dass Meta.ai kein Spanisch spricht — der Chatbot entschuldigte sich und versicherte, dass er in Zukunft diese Unterstützung bieten würde — fragten wir allerlei Dinge.

Wir begannen mit etwas Aktuellem aus dem Sport, um zu sehen, wie aktuell der Chatbot war. Er antwortete korrekt, als wir ihn nach den nächsten Champions-League-Spielen fragten, während er bei der Frage, wer der Favorit auf den Gewinn sei, Antworten basierend auf einer Wettseite gab, eine zwar merkwürdige, aber durchaus vernünftige Entscheidung.

Wir wollten auch wissen, ob er irgendwelche Informationen über Xataka hatte. Wieder antwortete er schnell und präzise. Die Beschreibung war genau und er fügte sogar ein Detail hinzu, das andere Chatbots in der Vergangenheit falsch hatten, das Gründungsjahr, 2004.

Um weitere informative – und wiederum sportliche – Fragen hinzuzufügen, baten wir Meta.ai, etwas zu tun, was wir bereits bei anderen Chatbots, die wir in der Vergangenheit bewertet hatten, gefragt hatten: eine Tabelle mit den Ländern zu erstellen, die die meisten Meisterschaften und zweiten Plätze bei den Fußballweltmeisterschaften erreicht hatten.

Hier machte der Assistent von Meta etwas Großartiges, was wir ihm nicht einmal gebeten hatten: er fügte die Jahre hinzu, in denen diese Länder die Meisterschaften gewonnen hatten. Er fügte keine weitere Spalte mit den Jahren der Vizemeisterschaften hinzu, und als wir ihn darum baten, erstellte er sie zunächst getrennt von der ersten.

Jedoch, nachdem wir ihn gebeten hatten, sie zusammenzuführen, führte er diese Fusion durch, um eine fast perfekte Tabelle zu erstellen: Es gab fehlerhafte Daten, wie das Vizemeisterschaftsjahr von Frankreich 1986, das nicht in diesem Jahr, sondern 2006 stattfand. Dann erreichte es diesen Erfolg erneut bei der letzten Weltmeisterschaft in Katar im Jahr 2022, aber dieses Datum gab er korrekt an.

Ein kaum von seinen Rivalen zu unterscheidender Chatbot

Wir wollten auch, dass Meta.ai einige kleine mathematische Probleme löst. Beim ersten Versuch scheiterte er: Wir fragten folgendes (übersetzt ins Englische): “Die Summe der Alter von drei Erwachsenen beträgt 60 Jahre. Der Älteste von ihnen ist 6 Jahre älter als der Jüngste. Wie alt ist jeder von ihnen? Nehmen wir an, ein Erwachsener ist mindestens 18 Jahre alt”. Er antwortete 18,24,24, was nicht korrekt war.

Sowohl ChatGPT als auch Claude 3 (in ihren kostenlosen Versionen im Web) antworteten korrekt auf das Problem. Die Lösung ist 18,18,24, und nachdem wir Meta.ai darauf hingewiesen hatten, dass er einen Fehler gemacht hatte, versuchte er es erneut, aber er irrte sich wieder und sagte, die Lösung sei 12,30,18. Nachdem wir seinen Fehler erneut angezeigt hatten, bat er um die Lösung, um zu verstehen, was er falsch machte. Ein interessantes Detail, das erneut zeigt, dass diese Chatbots richtig (oder falsch) liegen können, aber ohne zu wissen, wie sie das tun.

Meta.ai hat auf andere kleine mathematische Probleme korrekt geantwortet, und wir wollten ihm auch andere Fragen stellen, zum Beispiel, wie man eine SSD in einem Mac mini installiert. Die Antwort war korrekt, obwohl sie an einigen Stellen etwas ungenau war.

Zum Beispiel sagte er nur “Stellen Sie sicher, dass die SSD mit Ihrem Mac mini Modell kompatibel ist”, ohne weitere Details zu geben, aber als wir auf diesem Punkt bestanden, half er uns, indem er konkretere Informationen lieferte, da er mehr Informationen benötigte. Ein interessantes Detail war die Aufnahme der notwendigen Werkzeuge, und hier, als wir nach den Quellen fragten — die anfangs nicht erschienen — gab er an, dass seine Daten von der Apple-Support-Website stammen — wahrscheinlich die bestmögliche Quelle, ein Pluspunkt für Meta.ai — und bot bis zu fünf verschiedene Links an.

Diese Tests zeigten ein Verhalten, das mit dem anderer Chatbots auf dem Markt vergleichbar scheint. Die Antworten werden sehr schnell generiert — schneller als ChatGPT 3.5, gleichauf mit Claude 3 zum Beispiel —, und ihre Korrektheit und Präzision sind bemerkenswert, obwohl es natürlich immer möglich ist, dass der Chatbot Fehler macht oder sogar Daten erfindet.

Abschließend wollten wir seine kreative Ader testen und sehen, wie er sich mit einem anderen KI-Modell kombiniert, das in den letzten Tagen besonders auffällig war. Wir wollten ein Lied mit Suno.ai erstellen und den Text von Meta.ai schreiben lassen. Das Thema, ein kleiner Hinweis auf den seit Jahrzehnten andauernden Krieg zwischen Tabs und Leerzeichen, den Programmierer führen.

Das Ergebnis, das ihr in diesem Video genießen könnt, ist sicherlich beeindruckend und zeigt, dass solche Systeme überraschende Ergebnisse liefern können. Dabei blieb es nicht, und bei Xataka wollten wir noch ein weiteres Element dieses Chatbots testen. Etwas Kreativeres.

Bilder generieren mit Meta.ai

Wie bereits erwähnt, bietet dieser Chatbot auch die Möglichkeit, Bilder zu generieren, etwas, das einige seiner Konkurrenten seit einiger Zeit ebenfalls ermöglichen. Dafür müssen wir uns bei Meta anmelden (oder ein Konto erstellen), woraufhin wir Bilder mit “Imagine…” — demselben Befehl wie bei Midjourney — erstellen können, obwohl wir auch andere Formulierungen wie “Generate an image” oder “show a…” verwenden können.

Wir haben auch einige Bildgenerierungstests durchgeführt. Der in diesen Chatbot integrierte Motor ist sicherlich anständig, obwohl er einen besonders auffälligen Filter hat, der viele Bilder nicht generieren lässt. Selbst harmlose Begriffe oder Aufforderungen scheinen Probleme zu verursachen, und zum Beispiel versuchten wir, ein Bild mit einem hypothetischen Real Madrid, das die Champions League in diesem Jahr gewinnt, zu generieren, und er weigerte sich, es zu erstellen.

Was er jedoch tat, war zum Beispiel “ein deutsches Paar von 1820” zu generieren, was genau der gleiche Prompt war, der vor ein paar Wochen dazu führte, dass Gemini übermäßig inklusive Bilder erstellte. Das brachte Google Ärger ein, aber zumindest bei Meta scheint dieses Problem nicht zu bestehen, und die Bilder sind, wenn auch nicht perfekt, zumindest in ihrem Erscheinungsbild vernünftig.

Der Bildgenerator ist daher interessant als potenzielle Hilfe zur Bildgenerierung, aber wir glauben nicht, dass er auf der Höhe spezifischerer, leistungsstärkerer Modelle wie Midjourney ist. Hier eine interessante Anmerkung: Meta.ai fügt den Bildern eine kleine sichtbare Wasserzeichenmarke in der unteren linken Ecke hinzu. Dies ist eine Maßnahme, zu der auch andere wie Google, Adobe oder OpenAI greifen.

Der wahre Trumpf von Meta.ai sind seine mobilen Plattformen

Nach diesen Tests wurde deutlich, dass sich das Verhalten von Meta.ai nicht besonders unterscheidet — auch nicht besonders schlechter und besser, zumindest in diesen Tests — von dem, was andere Chatbots, die in diesem Markt konkurrieren, bieten, und das macht deutlich, dass heutzutage diese Angebote schwer zu unterscheiden sind, es sei denn, sie werden sehr intensiv und in sehr spezifischen Segmenten verwendet.

Das bedeutet, dass für Meta der Krieg um die KI ebenso erreichbar (oder nicht) ist wie für den Rest, aber obwohl die Verfügbarkeit eines Chatbots im Web für diejenigen interessant ist, die einen PC verwenden, liegt das wahre Potenzial dieses Assistenten genau dort, wo Meta ihn ursprünglich eingeführt hat: auf dem Handy.

Das ist leicht zu verstehen. Der Assistent von Meta.ai ist bereits für einige Nutzer von Facebook, Instagram, Messenger oder WhatsApp verfügbar, wird aber nach und nach weltweit verfügbar sein und nur einen Klick von diesen Anwendungen entfernt sein.

Das bietet eine potenziell enorme Wachstumsmöglichkeit für das Angebot von Meta, das Zugang zu Milliarden von Nutzern hat, die diese Plattformen täglich — und konstant — nutzen und die zu Meta.ai greifen könnten, einfach weil es speziell auf diesen Anwendungen verfügbar ist. Man müsste Instagram, Facebook oder WhatsApp nicht verlassen, um zu fragen, wie das Madrid-Spiel gestern ausgegangen ist oder wie das Wetter am Wochenende in Soria sein wird: Wir könnten Antworten auf diese Fragen direkt von diesen Plattformen erhalten.

Das macht ihn zusammen mit der neuen Funktionsweise, die auf Llama 3 basiert, zu einem starken Kandidaten für den Referenz-Chatbot. Die Schlacht ist eröffnet, und es wird zunehmend schwieriger zu vorherzusagen, wer sie gewinnen wird.

Tags:

No Responses

Leave a Reply

Your email address will not be published. Required fields are marked *

BLOG

GPT-5 und größerer Kontext

Während die Technologie mit atemberaubender Geschwindigkeit voranschreitet, sticht die künstliche Intelligenz als eine der faszinierendsten Grenzen der Innovation hervor. Inmitten dieses technologischen Wirbels taucht GPT-5, die neueste Iteration des Sprachmodells von OpenAI, als ein Thema heißer Erwartungen auf. Diese neue Version des bereits beeindruckenden GPT-4 verspricht, die Fähigkeit von Maschinen, menschliche Sprache zu verstehen und […]

Wie man ChatGPT verwendet, um Ihre Texte zusammenzufassen und umzuschreiben

In der heutigen Zeit ist die Fähigkeit, originelle und relevante Inhalte zu produzieren, unerlässlich, besonders wenn man sich inmitten der riesigen Menge an Informationen im Internet hervorheben möchte. Der Fortschritt der künstlichen Intelligenz (KI) hat Werkzeuge wie ChatGPT Talk hervorgebracht, die den Prozess des Umschreibens und Zusammenfassens von Texten nicht nur schneller, sondern auch dynamischer […]

Maximieren Sie Ihren Gewinn: So verdienen Sie mit der Chat-GPT-Technologie

Einführung: Wie man mit Chat-GPT Geld verdient Im ständig fortschreitenden Bereich der künstlichen Intelligenz und des maschinellen Lernens taucht ein Begriff immer wieder auf: GPT oder Generative Pre-Trained Transformers. Einfach ausgedrückt, GPT ist ein wesentlicher Bestandteil von KI-Modellen und darauf spezialisiert, menschenähnlichen Text zu verstehen und zu erzeugen. Die dynamischen Fortschritte in diesem Bereich haben […]

Navigieren in der Co-Evolution von KI und Menschheit

Die KI verwandelt uns von Schöpfern und Antwortenden in Kuratoren und Fragesteller. In diesem provokativen Gespräch mit Peter Deng, VP für Verbraucherprodukte und Leiter von ChatGPT bei OpenAI, werden wir die Rolle der Menschen im Zeitalter der KI erkunden. Was sind die praktischen und philosophischen Implikationen der KI? Wie wird sie unsere Wahrnehmung von uns […]

Entdecken Sie die 6 besten Möglichkeiten, Chat GPT jetzt zu nutzen, um online Geld zu verdienen!

Einführung in die Nutzung von Chat GPT zur Gewinnmaximierung Unsere Einführung in die Gewinnmaximierung mit den besten Methoden des Generativen Vortrainierten Transformators (GPT) enthüllt revolutionäre Innovationen in der künstlichen Intelligenz, die den E-Commerce und den Kundenservice revolutionieren. Die vielfältigen Anwendungen des GPT umfassen unter anderem Chatbots und die Textgenerierung. Die besten Wege, um Chat GPT […]

Prompt-Techniken Wie man das Beste aus künstlicher Intelligenz herausholt

Prompt-Techniken: Wie man das Beste aus künstlicher Intelligenz herausholt

Generative Künstliche Intelligenz, wie ChatGPT, Gemini, DALL-E, Midjourney oder Stable Diffusion, sind fortschrittliche Technologien, die in der Lage sind, Texte, Dokumente, Mindmaps, Tabellen, Kalkulationstabellen, Präsentationen, Bilder oder Videos zu erstellen. Sie benötigen jedoch präzise Anleitungen, klare, direkte Vorgaben und ausreichende Informationen, um das bestmögliche Ergebnis zu erzielen. Diese Anweisungen oder Leitfäden werden als Prompts bezeichnet, […]