AI Test Engineer (f/m/d)

Das Unternehmen ist ein innovativer Anbieter im Bereich GovTech mit Sitz in Berlin, der sich auf die Entwicklung von KI-gestützten Softwarelösungen spezialisiert hat. Diese Lösungen zielen darauf ab, administrative Prozesse zu vereinfachen und zu digitalisieren, um Bürgern und öffentlichen Institutionen den Zugang zu sicheren, benutzerfreundlichen und vollständig digitalen Dienstleistungen zu ermöglichen. Zur Unterstützung des Wachstums der Organisation suchen wir einen AI Test Engineer (f/m/d), der leidenschaftlich daran interessiert ist, die Zuverlässigkeit, Sicherheit und Qualität von KI-gestützten Anwendungen im öffentlichen Sektor sicherzustellen. In dieser Rolle werden Sie dazu beitragen, KI-Systeme zu validieren und zu optimieren, die direkt die digitalen Regierungsdienste und die Erfahrungen der Bürger beeinflussen. Zu Ihren Aufgaben gehören das Entwerfen, Entwickeln und Optimieren von KI-gestützten Lösungen, die dazu beitragen, die öffentliche Verwaltung zu modernisieren und nahtlose digitale Erlebnisse für Bürger und Institutionen zu schaffen. Sie werden Teststrategien für KI-Anwendungen und maschinelles Lernen entwerfen, implementieren und pflegen sowie die Leistung, Genauigkeit, Robustheit und Zuverlässigkeit von KI-Modellen in verschiedenen Anwendungsfällen bewerten. Darüber hinaus identifizieren Sie Systemschwächen, Randfälle, Verzerrungen, Halluzinationen und Sicherheitsanfälligkeiten. Sie entwickeln automatisierte Testframeworks und Qualitätsmanagementprozesse für KI-Lösungen und arbeiten eng mit KI-Ingenieuren, Produktmanagern und Softwareentwicklern während des gesamten Entwicklungszyklus zusammen. Eine Analyse von Datensätzen und Ausgaben zur Sicherstellung der Einhaltung von Qualitäts- und ethischen Standards gehört ebenfalls zu Ihren Aufgaben. Sie dokumentieren Testmethoden, Ergebnisse und Empfehlungen für interne und externe Stakeholder und tragen zur Etablierung von Best Practices für verantwortungsvolle und vertrauenswürdige KI in der öffentlichen Verwaltung bei.

Der ideale Kandidat verfügt über einen Abschluss in Informatik, Softwaretechnik, KI, Data Science oder einem verwandten Bereich. Sie sollten Erfahrung im Softwaretest, in der Qualitätssicherung oder in der Bewertung von KI/ML-Systemen mitbringen. Ein starkes Verständnis von Konzepten des maschinellen Lernens, des Verhaltens von KI-Systemen und von Testmethoden ist unerlässlich. Zudem sollten Sie mit automatisierten Testwerkzeugen, Skriptsprachen und Testframeworks vertraut sein. Erfahrung in der Analyse von Modellausgaben, Leistungskennzahlen und potenziellen Verzerrungen ist ebenfalls wichtig. Kenntnisse über Sicherheits-, Datenschutz- und Compliance-Aspekte in KI-Anwendungen sind von Vorteil. Wir suchen eine Person mit ausgeprägtem analytischen Denken und Problemlösungsfähigkeiten sowie hervorragenden Kommunikationsfähigkeiten und der Fähigkeit, in interdisziplinären Teams zu arbeiten. Fließende Englischkenntnisse sind erforderlich, Deutschkenntnisse sind von Vorteil.