Software Testing & Qualität - Testautomatisierung, KI & Agilität

Wer automatisiert testet, baut auf Determinismus, auf Konsistenz, auf klare Erwartungen. Mit Anupam Krishnamurthy spreche ich darüber, warum genau das bei LLMs nicht funktioniert und was wir stattdessen brauchen. Wir gehen der Frage nach, wie man einen Chatbot testet, der nie zweimal die gleiche Antwort gibt, warum ein LLM ein anderes LLM beurteilen kann und wo das an seine Grenzen stößt. Anupam erklärt, wie RAG-Systeme sich in Retrieval und Generation zerlegen lassen, und warum die meisten Fehler im Retrieval stecken.

Was können wir von Bakterien und Motten lernen, um besser mit Unsicherheit umzugehen? Mit Anna Melbinger spreche ich darüber, wie Strategien aus der Natur auf Softwareprojekte und Projektmanagement übertragbar sind. Anna bringt einen ungewöhnlichen Hintergrund mit: Jahre in der Wissenschaft, Physik studiert, biologische Fragestellungen mit Mathematik bearbeitet, und heute im IT-Projektgeschäft. Wir reden darüber, warum Stillstand keine Robustheit erzeugt, warum Bug-Trends oft aussagekräftiger sind als einzelne Bugs, und wann es sich lohnt, bewusst einen Schritt zu tun, der nicht direkt zum Ziel führt, nur um Wissen zu gewinnen. Am Ende landet das Gespräch bei Karl Popper und der Frage, ob das aktive Suchen nach Widerlegung eigentlich die ehrlichste Methode ist, mit komplexen Entscheidungen umzugehen.

Wer programmieren lernt, ohne je einen Lötstift in der Hand gehabt zu haben, wer Code generiert, ohne zu verstehen, in welchem Umfeld er läuft, und wer darauf vertraut, dass Vibecoding schon irgendwie funktioniert: Genau das diskutiere ich mit Marc Bless und Thomas Ronzon. Wir reden darüber, was es heute wirklich braucht, um Systeme zu durchdringen, warum das T-Shape-Modell nicht mehr reicht und was passiert, wenn die Mittelschicht der Entwicklung einfach wegbricht. Dabei geht es nicht nur um Technologie, sondern auch um Vertrauen: in Systeme, in KI, in Menschen.

Wer gestaltet eigentlich die Software, die unseren Alltag durchdringt, und wessen Werte fließen dabei ein? Mit Claudia Nass Bauer spreche ich darüber, warum homogene Teams blinde Flecken produzieren, die keine böse Absicht sind, sondern einfach das natürliche Ergebnis, wenn immer dieselben Perspektiven am Tisch sitzen. Wir reden über unbewusste Denkmuster, über Kommunikationssysteme, die in männerdominierten Gruppen entstehen, und darüber, wie agile Methoden mit kleinen Teams diesen Mustern entgegenwirken können. Claudia stellt außerdem ein Forschungsprojekt vor, das Studentinnen aus Design, Psychologie und Sozialwissenschaften gezielt an Softwareentwicklung heranführt, weil viele von ihnen schlicht nicht wissen, dass sie dort einen echten Beitrag leisten könnten.

Menschen mit Autismusdiagnose, die im Wartezimmer spontan 48 Rechtschreibfehler in einer Illustrierten zählen, bevor das Gespräch überhaupt beginnt: Das erzählen mir Helmut Pichler und Markus Kalbhenn, und es erklärt besser als jede Theorie, warum genau diese Fähigkeiten im Softwaretesting so gut ankommen. Wir sprechen darüber, wie das Ausbildungsprogramm aufgebaut ist, welche Anpassungen im Training wirklich den Unterschied machen, und was Unternehmen konkret brauchen, damit die Zusammenarbeit funktioniert. Dabei geht es nicht nur um Pausen und ruhige Räume, sondern auch darum, wie klare Aufgabenstellungen und ein fester Tagesrhythmus aus einer unsicheren Situation ein gutes Arbeitsverhältnis machen können.