Test

Die Diskussion um Künstliche Intelligenz (KI) wird oft von großen Tech-Konzernen und deren englischsprachigen Anwendungen dominiert. Doch auch kleine und mittelständische Unternehmen (KMU) in Deutschland stehen vor der Frage: Welches Large Language Model (LLM) ist das richtige für meinen Betrieb? Die Antwort ist gar nicht so einfach – denn die gängigen Vergleichstests, sogenannte Benchmarks, sind fast ausschließlich auf Englisch verfügbar. Viele Anbieter übersetzen diese Benchmarks einfach ins Deutsche, um Modelle für unseren Sprachraum zu bewerten. Doch genau hier liegt das Problem. Eine aktuelle Studie der Mittelstand-Digital Zentrum – Fokus Mensch Mitarbeiter Darius Hennekeuser, Daryoush Vaziri und David Golchinfar untersucht, wie zuverlässig diese Übersetzungen sind. Das Ergebnis: Automatische Übersetzungen reichen nicht aus.

A/B-Tests gelten als einfache Methode, um Nutzungsverhalten messbar zu machen.Der Beitrag erklärt Schritt für Schritt, wie A/B-Testing funktioniert, zeigt typische Anwendungsbereiche –und worauf es bei Planung und Umsetzung ankommt.

Spätestens mit dem Pandemie-bedingten Schub für die remote Arbeit stellt sich die Frage, wie auch Usability-Forschung remote stattfinden kann. Dank leistungsstärkerer Endgeräte und Kameras entstehen auch für Webcam-basiertes Eyetracking neue Einsatzfelder. Welche Technologie dahinter steckt und was damit möglich ist, erfahren Sie im Artikel.

Das Pilotprojekt mit Wakeword ist abgeschlossen - es wurde ein prototypischer User Research-Alexa Skill für VUIs entwickelt und erprobt

Seit Mitte März 2020 ist es wichtiger denn je auf Abstand zu gehen. So wurde es auch wichtig Tests mit NutzerInnen auf Abstand durchzuführen. Was läge da näher als mit dem Pilotprojektpartner Wake Word einen User Research-Skill zu entwickeln, der genau dies möglich macht? Wake Word sind nämlich Experte auf dem Gebiet der Voice-Assistenten und Sprach-Steuerungen

Bei aller Digitalisierung sind viele der herkömmlichen User Research Methoden sehr analog aufgebaut: Bei Site Visits werden Nutzer besucht, um ihre Umgebung und Arbeitsweisen besser kennenzulernen, auch Befragungen und Beobachtungen leben von der direkten Kommunikation. Nichtsdestotrotz gibt es auch viele Möglichkeiten, die Nutzer aus der Ferne besser zu verstehen. Eine der Methoden dazu ist der Remote Usability Test. Die Ergebnisse sind mit denen herkömmlicher Labortests vergleichbar.

Im Pilotprojekt mit BIMSystems unterstützte das Mittelstand 4.0 Kompetenzzentrum Usability das Startup BIMSystems mit Ideen zur Testkonzeption für remote Usability Tests.