Wer überlegt, eine KI-Software einzuführen, der sollte in der Lage sein, die richtigen Fragen bei der Auswahl der KI Software zu stellen. Dieser Blogbeitrag hilft Unternehmen, bei der Auswahl solcher Systeme die richtigen Fragen zu stellen.

amberSearch ist ein Anbieter einer unternehmensinternen Software, die es Mitarbeitern ermöglicht, durch eine Kombination von intelligenter Suche und generativer KI mit unternehmensinternen Inhalten zu chatten und so sein eigenes „unternehmensinternes“ ChatGPT aufzubauen.

Alles über die Anwendung

  • Handelt es sich um ein Standardprodukt und wie schnell ist es installiert und einsatzbereit?
  • Inwieweit ist die Software von Open Source/Drittanbietern abhängig und garantiert sie ausreichende Investitionssicherheit?
  • Ist die KI-Lösung fit für die Zukunft? Bietet der Anbieter moderne Technologiekonzepte (intelligente Suche, RAG, Multihop Q&A, ….)?
  • Wer steht hinter den entwickelten KI-Modellen? Wird hier auf externes Know-How gesetzt oder hat man eigenes Know-How?
  • Berücksichtigt das Produkt generative künstliche Intelligenz, z.B. für Textzusammenfassungen oder Chatbots auf Basis interner Daten? Falls ja, wie wird das umgesetzt, was sind die Unterschiede zu anderen Methoden?
  • Kann ich direkt mit dem Anbieter zusammenarbeiten, oder nur über Partner?
  • Hat der Anbieter Erfahrung in meiner Branche?

Benutzerfreundlichkeit

  • Ist die Lösung für die Benutzer intuitiv und kann sie ohne Schulung verwendet werden?
  • Wie greift der Nutzer auf die Software zu? Per Webapp oder gibt es andere Integrationsmöglichkeiten (mobile App, Iframe, Teamsapp, Desktopapp, …)
  • Wie modern/einfach ist die Nutzeroberfläche? Genügt diese den Ansprüchen von Nutzern, die von B2C ziemlich verwöhnt sind?
  • Inwiefern ist man nur auf Text beschränkt oder sind auch multimediale Inhalte wie bspw. Bilder etc durchsuchbar?
  • Inwiefern können persönliche Dinge (bspw. OneDrive Ordner, E-Mails, Teams etc eingebunden werden?
  • Wenn ja, sind diese Funktionen auf Benutzerrechte geprüft?
  • Werden Unterstützungsfunktionen wie Autovervollständigung und Autokorrektur angeboten?
  • Gibt es Filteroptionen innerhalb der Antworten? Wenn ja, welche?
  • Gibt es eine Dokumentenvorschau für PowerPoint-Folien, einzelne Seiten in PDF-Dokumenten usw.?
  • Sind die Treffer markiert und sofort sichtbar?
  • Können die Benutzer mit den Suchergebnissen weiterarbeiten, z. B. sie mit Kollegen teilen oder direkt nachfragen an ein Dokument stellen?
  • Gibt es Personalisierungsmöglichkeiten? Wenn ja, welche?
  • Können Ergebnisse gespeichert werden?
  • Kann die Benutzeroberfläche angepasst werden (z.B. Firmen-CI)?
  • Wie gut kann die Software den gewünschten Anwendungsfall unterstützen?

Dieser Blogbeitrag ist Teil unseres White Papers „Checkliste KI Einführung“. Über dieses Formular erhält man den kompletten Zugriff:

Funktionalitäten

  • Wie gut ist die Qualität der Treffer? Wie stellt die Lösung relevante Treffer sicher?
  • Berücksichtigt das Produkt die klassische Volltextsuche UND die moderne semantische (intelligente) Vektorsuche bei der Generierung von Antworten?
  • Baut die Software auf ein Retrieval Augmented Generation bzw. Multi-Hop Question Answering System auf?
  • Kann man auch ausschließlich den Chat verwenden und die Suche vernachlässigen?
  • Kann man mit Dokumenten chatten?
  • Kann man eigene Gruppen von Informationen erstellen und nur mit diesen Chatten? (unternehmensinterne GPT’s)
  • Ist es möglich, nach Metadaten zu suchen?
  • Können Laufwerke angebunden werden?
  • Müssen Dokumente erst manuell aufbereitet werden, bevor die Software mit diesen umgehen kann?
  • Müssen Dokumente irgendwo hin exportiert werden oder holt sich die Software die aktuellsten Informationen selbstständig?
  • Erkennt die Software die Sprache/n meines Inhalts? Auch in gemischtsprachigen Texten?
  • Erkennt sie organisationsspezifische Begriffe? Oder kann dies zur Verfügung gestellt werden?
  • Sind Schnittstellen/APIs zur Erstellung eigener Konnektoren oder zur Anbindung eigener Frontends, zum Beispiel ohne zusätzliche Kosten zugänglich und gut dokumentiert?
  • Können neue KI-Modelle flexibel ergänzt werden?
  • Ist das System eine Blackbox? Besteht die Gefahr eines Vendor Lock-in?

Daten

  • Welche Datenquellen kann ich anbinden? Sind Standardkonnektoren verfügbar? Wenn ja, welche?
  • Kann ich einen Konnektor für meine spezielle Anwendung erstellen lassen?
  • Kann die Software unstrukturierte Daten und/oder strukturierte Daten durchsuchen?
  • Deckt die Software alle für mich relevanten Dateiformate ab?
  • Wie viele Dokumente kann die Lösung erfassen? Ist die Datenbank begrenzt? Ist die Lösung skalierbar?
  • Wie aktuell sind die angebundenen Daten?

Datenschutz und Datensicherheit

  • Wenn ich eine Cloud/SaaS-Lösung bevorzuge, wo werden meine Daten gespeichert? (EU, USA, usw.)
  • Wie gewährleistet der Anbieter die Datensicherheit?
  • Werden die Zugriffsrechte der Benutzer auf die Dokumente automatisch beachtet?

Betrieb

  • Wo wird die Lösung betrieben? In der Cloud, On Premise, Private Cloud? Ist auch ein hybrider Ansatz denkbar?
  • Wie viel Aufwand muss betrieben werden, um Synonyme und Co zu integrieren?
  • Ist die Software einfach zu installieren, auch durch den Kunden?
  • Könnte auch eine generative KI On Premise gehostet werden?
  • Erhält der Kunde während der Implementierung Projektunterstützung durch den Anbieter?
  • Ist die Lösung multimandantenfähig? Können mehrere Standorte, Niederlassungen, etc, angebunden werden?
  • Ist die Lösung stabil, wenn viele Benutzer gleichzeitig auf die Software zugreifen?
  • Wie kann ich die Software testen? Ist ein Proof of Value möglich? Wenn ja, ist dieser kostenpflichtig?
  • Wie zeitaufwändig ist die Administration der Lösung?
  • Ist eine Benutzerschulung erforderlich?

Damit jeder amberSearch einmal ausprobieren kann, haben wir in unserer Onlinedemo eine mittlere sechsstellige Anzahl an Dokumenten auf über 10 Systeme verteilt:

Dienstleistung und Beratung

  • Welche Support-Modelle sind vor Ort verfügbar?
  • Wird der Support durch interne Vertreter des Anbieters oder durch externe Partner geleistet?
  • Bietet der Anbieter bei Bedarf zusätzliche Funktionen in der Anwendung an?
  • Wie oft werden Software-Updates durchgeführt?
  • Wie lange erhalte ich Support für meine Software?

Kommerzielle Kriterien

  • Ist das Preismodell einfach zu verstehen? Ist das Preismodell nutzungs-, dokumenten- oder benutzerbasiert?
  • Fallen für Entwicklungs-, Test- oder Staging-Instanzen der Lösung zusätzliche Kosten an?
  • Welche ROI-Berechnungen müssen berücksichtigt werden?

Anbieter Informationen

Du findest unseren Content spannend?

Dann bleib jetzt über unseren Newsletter mit uns in Kontakt: