Datamics colleague Saumya Goyal presented a 5-step framework for evaluating LLM and agentic systems at MLcon.

AI Innovation Lab by Datamics – Über uns: Die meisten Unternehmen haben heute Ideen für den Einsatz von künstlicher Intelligenz. Die eigentliche Herausforderung besteht darin, daraus produktive Lösungen zu entwickeln, die im Arbeitsalltag genutzt werden und messbaren Geschäftswert schaffen. Genau dafür gibt es das AI Innovation Lab von Datamics. Seit über 20 Jahren arbeiten wir an der Schnittstelle von Data Science, künstlicher Intelligenz, Forschung und Praxis. Wir haben mehr als 60.000 Fach- und Führungskräfte weitergebildet, Bücher veröffentlicht, einen der bekanntesten deutschsprachigen Data-Science-Podcasts aufgebaut und Unternehmen bei der erfolgreichen Einführung von KI begleitet. Heute unterstützen wir Unternehmen dabei, den Schritt von der KI-Strategie zur produktiven Umsetzung zu gehen. Unser Schwerpunkt liegt auf kleinen und mittelständischen Unternehmen, die KI pragmatisch, sicher und mit überschaubarem Aufwand einsetzen möchten. Gleichzeitig begleiten wir Innovations-, Fach- und Produktteams größerer Unternehmen bei der Entwicklung und Umsetzung moderner KI-Lösungen. Unsere Leistungen umfassen unter anderem: • KI-Strategie & AI Readiness • AI Engineering • Large Language Models (LLMs) • Retrieval-Augmented Generation (RAG) • KI-Agenten & intelligente Automatisierung • MLOps und produktive KI-Systeme Wir glauben, dass erfolgreiche KI nicht an der Anzahl der Pilotprojekte gemessen wird. Sondern daran, ob Mitarbeitende sie täglich nutzen und dadurch bessere Entscheidungen treffen, Prozesse beschleunigen und echten Mehrwert schaffen. Von der ersten Idee bis zur produktiven KI-Lösung – pragmatisch, nachhaltig und messbar.