Document ID: /fineweb-2-swissfilter-quality_10-filterrobots/filtered/03610.jsonl.gz/2507

Microsoft
20.10.2020, 09:00 Uhr
20.10.2020, 09:00 Uhr
Azure AI beschreibt Bilder genauso gut wie ein Mensch
Um Bilder auch für Sehbehinderte oder Blinde zugänglich zu machen, hat Microsoft ein neues KI-System entwickelt, das automatisch Beschreibungen für Bilder erzeugt. In vielen Fällen sogar genauer als ein von Menschen gemachter sogenannter Alt-Text.
Das neue Feature steht über die Azure Cognitives Services zur Verfügung, die Teil der KI-Plattform von Azure sind und soll noch im Laufe dieses Jahres in Word und Outlook (Windows und OSX) sowie für PowerPoint (Windows, OSX und Web) integriert werden. Ausserdem soll die verbesserte Bildbeschreibungsfunktion zukünftig auch in Microsofts Kamera-App Seeing AI zum Einsatz kommen. Dort wird die Funktion verwendet, um Nutzern der Apps Fotos zu beschreiben.
Der Ansatz des visuellen Vokabulars vor dem Training, erklärt Xuedong Huang, CTO von Microsofts Azure AI Cognitive Services, ähnelt der Vorbereitung von Kindern auf das Lesen, indem zunächst ein Bilderbuch verwendet wird, das einzelne Wörter mit Bildern assoziiert, wie zum Beispiel ein Bild eines Apfels mit dem Wort «Apfel» darunter und ein Bild einer Katze mit dem Wort «Katze» darunter. Das vortrainierte Modell wird dann für die Untertitelung auf dem Datensatz der mit Untertiteln versehenen Bilder verfeinert. In dieser Phase des Trainings lernt das Modell, wie man einen Satz verfasst. Wenn ihm ein Bild mit neuartigen Objekten präsentiert wird, nutzt das KI-System das visuelle Vokabular, um eine genaue Bildunterschrift zu generieren.
«Das System kombiniert das, was sowohl im Vortraining als auch in der Feinabstimmung gelernt wird, um mit neuartigen Objekten in der Prüfung umzugehen», sagt Wang.
Autor(in) Bernhard Lauer
Kommentare
Es sind keine Kommentare vorhanden.