De ondertiteling van Microsoft beschrijft afbeeldingen zodat u dat niet hoeft te doen

Video: Teams eenvoudige complete uitleg 2024

Video: Teams eenvoudige complete uitleg 2024
Anonim

Microsoft heeft een hulpmiddel voor beeldherkenning gelanceerd dat probeert de inhoud van een afbeelding te beschrijven. Deze tool voor kunstmatige intelligentie bevindt zich nog in de ontwikkelingsfase en leert voortdurend van foto's die door gebruikers zijn geüpload.

Wat de nauwkeurigheid betreft, is de beschrijving soms vrij nauwkeurig, terwijl CaptionBot soms beschrijvingen biedt die niets te maken hebben met wat er wordt afgebeeld. Er zijn ook gevallen waarin de app helemaal geen beschrijving kan geven, vanwege de ruwe staat rond de randen.

Microsoft heeft CaptionBot ontworpen om met meer ervaring te leren, in de verwachting dat de ondertitels na verloop van tijd nauwkeuriger zullen worden. Hoe meer foto's gebruikers uploaden, hoe beter de app wordt, zoals CaptionBot zichzelf beschrijft:

Ik kan de inhoud van elke afbeelding begrijpen en ik zal proberen deze evenals elke mens te beschrijven. Ik ben nog aan het leren, dus ik zal je foto vasthouden, maar geen persoonlijke info.

CaptionBot gebruikt drie technologieën om te beschrijven wat op een foto wordt afgebeeld: Computer Vision, Emotion en Bing Image van Microsoft. De Computer Vision API haalt rijke informatie uit afbeeldingen om visuele gegevens te categoriseren en te verwerken, naast het identificeren en extraheren van tekst uit een afbeelding. De Emotion API, zoals de naam al doet vermoeden, analyseert gezichten om een ​​scala aan gevoelens te detecteren, alles van woede, minachting, walging, angst, geluk, neutraliteit, verdriet en verrassing. Bing Image zoekt op internet naar afbeeldingen.

We hebben CaptionBot getest en de resultaten waren in 50% van de gevallen nauwkeurig. We hebben bijvoorbeeld twee foto's geüpload: een afbeelding van een gamingmuis, de andere een stapel kaarten. In beide gevallen suggereerde de tool dat het een mobiele telefoon was. Aan de andere kant heeft CaptionBot nauwkeurig mensen en gezichten gedetecteerd.

Blijkbaar heeft CaptionBot een obsessie met mobiele telefoons. Een Twitter-gebruiker meldde dat de app dacht dat Michelle Obama een mobiele telefoon was. Bekijk deze Twitter-pagina voor meer grappige CaptionBot-ondertitels.

U kunt CaptionBot hier ook testen. Probeer het maar eens: u kunt het hulpprogramma helpen verbeteren of u zult goed lachen!

De ondertiteling van Microsoft beschrijft afbeeldingen zodat u dat niet hoeft te doen