#560 — KI-Qualität im Tiefgang: Praktikant vs. Experte – der echte Test

KI-Qualität im Tiefgang: Praktikant vs. Experte – der echte Test

Woran erkennst du, ob ein KI-Tool wirklich taugt? Nicht an Einzelfragen – sondern daran, wie es sich schlägt, wenn ein echter Arbeitskontext entsteht. TJ schildert zwei gescheiterte Setups mit Perplexity und wie Claude dasselbe Problem in fünf Minuten gelöst hat. Warum der Unterschied zwischen KI-Modellen erst im Tiefgang sichtbar wird – und was du daraus für deinen Workflow mitnehmen kannst.

Die Oberfläche lügt – warum KI-Qualität sich versteckt Viele KI-Tools wirken auf den ersten Blick ähnlich leistungsfähig. Einzelne Fragen beantworten sie sauber, die Antworten klingen kompetent, das Interface ist flüssig. Der echte Unterschied zeigt sich erst, wenn du tiefer gehst: wenn aus einer Frage ein Dialog wird, wenn Zwischenergebnisse zurückgeliefert, bewertet und weiterverarbeitet werden müssen. Genau das ist der Moment, in dem manche Tools schlicht aufhören zu funktionieren – und du es ohne direkten Vergleich oft gar nicht merkst. TJ beschreibt diesen Punkt treffend: „Qualitätsunterschiede, die kannst du an der Oberfläche nicht erkennen."

Slack-Einführung abgebrochen: wenn das Kontextfenster nicht reicht TJ wollte die Slack-Einführung in seinem Unternehmen mit Perplexity aufsetzen – und musste mittendrin abbrechen. Das Modell halluzinierte, lieferte mit „geschwellter Brust" Anweisungen, die inhaltlich weit vom Ziel entfernt waren. Der Grund: Das Kontextfenster reichte schlicht nicht aus. Je länger das Gespräch wurde, desto mehr verlor Perplexity den Faden. Was zu Beginn funktionierte, kippte in dem Moment, in dem der Arbeitskontext komplexer wurde. Ein klassisches Beispiel dafür, dass Einzelfragen kein verlässlicher Maßstab für die Leistungsfähigkeit eines Modells sind.

VPS-Installation: Trial and Error statt strukturierter Lösung Der zweite Test war technisch anspruchsvoller: TJ versuchte, Mirofish auf einem VPS mit angebundenem Ollama zu installieren – eine mehrstufige Aufgabe mit Abhängigkeiten, Rückmeldeschleifen und echten Systemzugängen. Perplexity lieferte Trial and Error. Probier das, schau mal, probier das nochmal. Kein strukturiertes Vorgehen, kein klarer Plan. Das kostete Zeit – und Nerven. Der Wechsel kam nicht aus Ungeduld, sondern aus Vernunft: Wenn ein Tool nach mehreren Schleifen nicht weiterkommt, ist der sauberste Zug, den Kontext geordnet zu übergeben und neu anzusetzen.

Fünf Minuten mit Claude: strukturiert, ergebnisorientiert, gelöst TJ übergab Claude den Kontext mit einem klaren Briefing: „Ich bin hier mit Perplexity dran, der kriegt's nicht auf die Reihe – guck mal drauf, verschaff dir ein Bild, dann lösen wir das." Claude bekam die nötigen Zugänge, analysierte die Situation und arbeitete sich in klar definierten Schritten vor: „Mach das, liefer mir das Ergebnis zurück. Mach das, liefer das Ergebnis zurück." Dieser Rhythmus aus Anweisung, Rückmeldung und nächstem Schritt ist der entscheidende Unterschied. Nach fünf Minuten war das gesamte Thema gelöst. Der Vergleich, den TJ zieht, trifft es gut: Perplexity war der Praktikant, Claude der Experte, den man dazuholt, wenn es drauf ankommt.

Fazit: Teste KI-Tools dort, wo es wirklich schwierig wird Der wichtigste Punkt dieser Episode ist kein Produktvergleich – es ist eine Methode. Teste KI nicht mit Einstiegsfragen, sondern mit echtem Arbeitskontext. Geh tief, lass das Tool in Schleifen arbeiten, fordere Zwischenergebnisse zurück. Erst dort wird sichtbar, ob ein Modell wirklich strukturiert denkt oder nur gut klingt. Und wenn ein Tool nicht weiterkommt: kein stundenloses Trial and Error, sondern Kontext sauber zusammenfassen und ein anderes Modell neu ansetzen lassen. Das ist keine Schwäche – das ist effizienter Umgang mit den Werkzeugen, die dir zur Verfügung stehen.

Das nimmst du mit: • Perplexity verliert bei längeren, mehrstufigen Aufgaben den Kontext und halluziniert – selbst mit Max-Account und Opus 4. • KI-Qualität ist an der Oberfläche kaum erkennbar: Der echte Unterschied zeigt sich erst, wenn du wirklich tief in ein Problem gehst. • Wenn ein Tool nicht weiterkommt, lohnt es sich, den Kontext sauber zu übergeben und mit einem anderen Modell neu anzusetzen – statt stundenlang Trial and Error zu betreiben. • Die Fähigkeit, strukturiert Teilaufgaben abzuarbeiten und Ergebnisse zurückzufordern, trennt brauchbare KI-Assistenten von teuren Zeitfressern. • Teste KI-Tools nicht mit Einstiegsfragen, sondern mit echtem Arbeitskontext – erst dort wird sichtbar, ob ein Modell wirklich taugt.
Kapitel: 00:00 Hook: Praktikant vs. Top-Experte 00:12 Perplexity verliert den Kontext bei der Slack-Einführung 00:28 VPS-Installation: Trial and Error mit Perplexity 00:48 Wechsel zu Claude: strukturiertes Vorgehen, Problem gelöst 01:30 Fazit: Qualitätsunterschiede zeigen sich erst im Tiefgang

Noch mehr von den Koertings ...
Das KI-Café ... jede Woche Mittwoch (>350 Teilnehmer) von 8:30 bis 10:00 Uhr ... online via Zoom .. kostenlos und nicht umsonst Jede Woche Mittwoch um 8:30 Uhr öffnet das KI-Café seine Online-Pforten ... wir lösen KI-Anwendungsfälle live auf der Bühne ... moderieren Expertenpanel zu speziellen Themen (bspw. KI im Recruiting ... KI in der Qualitätssicherung ... KI im Projektmanagement ... und vieles mehr) ... ordnen die neuen Entwicklungen in der KI-Welt ein und geben einen Ausblick ... und laden Experten ein für spezielle Themen ... und gehen auch mal in die Tiefe und durchdringen bestimmte Bereiche ganz konkret ... alles für dein Weiterkommen. Melde dich kostenfrei an ... www.koerting-institute.com/ki-cafe/
Mit jedem Prompt ein WOW! ... für Selbstständige und Unternehmer Ein klarer Leitfaden für Unternehmer, Selbstständige und Entscheider, die Künstliche Intelligenz nicht nur verstehen, sondern wirksam einsetzen wollen. Dieses Buch zeigt dir, wie du relevante KI-Anwendungsfälle erkennst und die KI als echten Sparringspartner nutzt, um diese Realität werden zu lassen. Praxisnah, mit echten Beispielen und vollständig umsetzungsorientiert. Das Buch ist ein Geschenk, nur Versandkosten von 9,95 € fallen an. Perfekt für Anfänger und Fortgeschrittene, die mit KI ihr Potenzial ausschöpfen möchten. Das Buch in deinen Briefkasten ... koerting-institute.com/shop/buch-mit-jedem-pro…
Die KI-Lounge ... unsere Community für den Einstieg in die KI (>2800 Mitglieder) Die KI-Lounge ist eine Community für alle, die mehr über generative KI erfahren und anwenden möchten. Mitglieder erhalten exklusive monatliche KI-Updates, Experten-Interviews, Vorträge des KI-Speaker-Slams, KI-Café-Aufzeichnungen und einen 3-stündigen ChatGPT-Kurs.
Tausche dich mit über 4.000 KI-Enthusiasten aus, stelle Fragen und starte durch. Initiiert von Torsten & Birgit Koerting, bietet die KI-Lounge Orientierung und Inspiration für den Einstieg in die KI-Revolution. Hier findet der Austausch statt ... www.koerting-institute.com/ki-lounge/
Starte mit uns in die 1:1 Zusammenarbeit Wenn du direkt mit uns arbeiten und KI in deinem Business integrieren möchtest, buche dir einen Termin für ein persönliches Gespräch. Gemeinsam finden wir Antworten auf deine Fragen und finden heraus, wie wir dich unterstützen können. Klicke hier, um einen Termin zu buchen und deine Fragen zu klären. Buche dir jetzt deinen Termin mit uns ... www.koerting-institute.com/termin/
Weitere Impulse im Netflix Stil ... Wenn du auf der Suche nach weiteren spannenden Impulsen für deine Selbstständigkeit bist, dann gehe jetzt auf unsere Impulseseite und lass die zahlreichen spannenden Impulse auf dich wirken. Inspiration pur ... www.koerting-institute.com/impulse/
Die Koertings auf die Ohren ... Wenn dir diese Podcastfolge gefallen hat, dann höre dir jetzt noch
weitere informative und spannende Folgen an ... über 500 Folgen findest du hier ... www.koerting-institute.com/podcast/
Wir freuen uns darauf, dich auf deinem Weg zu begleiten!