Um die Antwort vorwegzunehmen: Nein. Die Rede ist hier von einem KI-Tool, ohne Prompts veredelt und ohne „echte“ Intelligenz – so wie z. B. ChatGPT. Dies ist lediglich ein Statistik-Tool – nicht mehr und nicht weniger. Um Miriam Meckel zu zitieren: „Was eine (derartige) KI produziert, ist nichts anderes als eine sehr gute Vorhersage von Wort- oder Pixelwahrscheinlichkeiten“.
Der Fall
Ich habe in letzter Zeit getestet, welche Qualität Informationen aufweisen, wenn man der einfachen, kostenlosen ChatGPT diverse Fragen zur HPLC stellt. Ich greife ein willkürliches Beispiel auf: Ich habe ChatGPT gefragt: „Wie kann ich die Bodenzahl in der HPLC erhöhen?“ Ich fragte mit zeitlichen Abständen und hatte dabei recht unterschiedliche Aussagen erhalten; ferner habe ich die Frage auch in Englisch gestellt. Nachfolgend zwei von mehreren (!) Antworten, sie waren abhängig vom Datum und der Version des Tools.
Im Bild 1 ist eine Antwort des KI-Chatbots zuzüglich meiner Kommentare:
Bild 1 3.24
Zwei Antworten sind absolut nichts-sagend (1 und 3), eine ist richtig (2) und eine in dieser Form falsch (4). Ich habe die richtige Aussage dort formuliert.
Unterschiedliche Versionen von ChatGPT lieferten weitere, enttäuschende Antworten, die hier nicht gezeigt werden.
Betreffende Frage habe ich nun auch auf Englisch gestellt, hier das Ergebnis:
How can I increase the theoretical plates in HPLC? (GPT-3.5)
- Use a longer column: Increasing the length of the column can increase the number of theoretical plates, as there is more surface area for separation to occur.
Aussage richtig, Begründung falsch
- Use smaller particle size: Using smaller particles in the stationary phase can increase the number of theoretical plates by providing more efficient separation.
OK
- Optimize mobile phase composition: Adjusting the composition of the mobile phase, such as changing the solvent ratio or adding modifiers, can improve peak resolution and increase theoretical plates.
OK …
- Optimize flow rate: Adjusting the flow rate of the mobile phase can improve peak shape and increase theoretical plates.
OK … (Zu- oder Abnahme?)
- Use proper packing techniques: Ensuring that the column is properly packed and free from voids or channeling
OK
- Use appropriate temperature: Controlling the temperature of the system can improve separation efficiency and increase theoretical plates
OK … (Zu- oder Abnahme?)
- Use appropriate detector settings: Optimizing detector settings, such as wavelength and sensitivity, can improve peak resolution and increase theoretical plates.
“Optimizing detector settings” ist richtig, der Rest nicht
- Use appropriate sample preparation: Proper sample preparation techniques can improve peak shape and resolution, leading to an increase in theoretical plates.
OK
Kommentar:
Im englischen Text sind mehr und qualitativ bessere Antworten enthalten. Vermutlich liegt es an der Content-Menge im Netz in Englisch zum besagten Thema.
Schließlich hat mich die Frage interessiert, was denn für Antworten eine „ordinäre“ Google-Suche liefert, siehe Bild 2. Das Ergebnis ist keinesfalls dürftiger – im Gegenteil:
Das Fazit
Der Output eines KI-Tools hängt von der Fülle, vor allem jedoch von der Qualität der gefundenen Informationen resp. Aussagen im Netz ab. Es wird dann besonders kritisch, wenn das Tool über keine echte „Intelligenz“ verfügt. D. h., wenn das Tool keine intrinsischen Kriterien besitzt, um die Wahrhaftigkeit von Aussagen in eigener Regie bewerten zu können – was natürlich über eine reine Statistik hinaus geht. In diesem Fall können Informationen geliefert werden, die nicht brauchbar oder aber auch schlicht falsch sind. Es bleibt – vorerst – leider nicht aus: User von KI-Tools brauchen bei derart spezialisierten Fragen fundiertes Wissen, um den gelieferten Inhalt beurteilen zu können.
© Dr. Stavros Kromidas
