Microsoft a lansat un instrument de recunoaștere a imaginii care încearcă să descrie conținutul unei imagini. Acest instrument de inteligență artificială este încă în stadiul de dezvoltare și învață constant din imaginile încărcate de utilizatori.

În ceea ce privește acuratețea, uneori descrierea este destul de exactă, în timp ce, uneori, CaptionBot oferă descrieri care nu au nicio legătură cu ceea ce este înfățișat. Există, de asemenea, cazuri în care aplicația nu poate oferi deloc o descriere, din cauza stării sale brute.

Microsoft a proiectat CaptionBot pentru a învăța cu mai multă experiență, cu așteptarea că legendele sale vor deveni mai precise în timp. Cu cât utilizatorii încarcă mai multe imagini, cu atât aplicația devine mai bună, așa cum se descrie CaptionBot:

Pot înțelege conținutul oricărei imagini și voi încerca să îl descriu la fel de bine ca orice om. Încă învăț, așa că mă voi ține de fotografia ta, dar nu există informații personale.

CaptionBot folosește trei tehnologii pentru a descrie ceea ce este reprezentat într-o imagine: Microsoft Computer Vision, Emotion și Bing Image. API Computer Vision extrage informații bogate din imagini pentru a clasifica și prelucra date vizuale, alături de identificarea și extragerea textului dintr-o imagine. API-ul Emotion, așa cum sugerează și numele său, analizează fețele pentru a detecta o serie de sentimente, totul de la furie, dispreț, dezgust, frică, fericire, neutralitate, tristețe și surpriză. Bing Image caută imagini pe web.

Am testat CaptionBot și rezultatele au fost exacte în 50% din cazuri. De exemplu, am încărcat două poze: una înfățișând un mouse pentru jocuri, cealaltă o stivă de cărți. În ambele cazuri, instrumentul a sugerat că este un telefon mobil. Pe de altă parte, CaptionBot a detectat cu precizie oamenii și fețele.

Aparent, CaptionBot are o obsesie cu telefoanele mobile. Un utilizator de Twitter a raportat că aplicația a crezut că Michelle Obama este un telefon mobil. Pentru mai multe titluri amuzante CaptionBot, consultați această pagină Twitter.

Puteți testa, de asemenea, CaptionBot aici. Încercați: fie veți ajuta instrumentul să se îmbunătățească, fie veți râde bine!