W NeoTeo od jakiegoś czasu śledzimy wysiłki Microsoftu w dziedzinie sztucznej inteligencji. Od wykrywania wieku i rozpoznawania emocji po czatbota, który w mniej niż 24 godziny stał się psychotyczny i rasistowski, ludzie z Redmond są zdecydowanie zdeterminowani, aby ulepszać swoją technologię za pomocą wielu projektów online. Teraz przyszedł czas na CaptionBot, system, w którym wystarczy wgrać zdjęcie i pozwolić algorytmowi stworzyć automatyczny opis na jego temat.

CaptionBot: Automatyczne opisy dla Twoich zdjęć
CaptionBot

Niedawno pisałem o Seeing AI, platformie sztucznej inteligencji, której główną funkcją jest pomoc osobom niewidomym. Jednym z najbardziej krytycznych punktów tej technologii jest jej zdolność do dokładnego opisywania otoczenia użytkownika. W filmie prezentacyjnym widzimy test, gdy identyfikuje młodego mężczyznę wykonującego trik na deskorolce, ale to tylko namiastka jej potencjału. Nie trzeba dodawać, że wszystkie projekty sztucznej inteligencji (niezależnie od tego, czy należą do Microsoftu, czy nie) mają przed sobą ogromną pracę. Gigant z Redmond nauczył się jednej lub dwóch rzeczy z Tay, swojego byłego czatbota uwielbiającego faszyzm i kazirodztwo, zwłaszcza że potrzebuje dobrych nauczycieli zamiast «Web», i postanowił wrócić do nieco bardziej kontrolowanych eksperymentów, jak w przypadku CaptionBot.

CaptionBot: Automatyczne opisy dla Twoich zdjęć
Opis jest bardzo podstawowy, ale poprawny
CaptionBot: Automatyczne opisy dla Twoich zdjęć
CaptionBot nie doszedł do pełnego wniosku, ale wykrył, że Tay jest zaskoczona

Zasadniczo wszystko, co możesz zrobić w CaptionBot, to wgrać zdjęcie lub wkleić adres URL prowadzący do zgodnego obrazu, a sztuczna inteligencja wygeneruje automatyczny opis na jego temat. CaptionBot już na początku informuje, że przez jakiś czas będzie przechowywał zdjęcie, aby ulepszyć swoje umiejętności, ale nie obejmuje to danych osobowych. Podczas moich testów zauważyłem, że niektóre opisy mogą być bardzo powierzchowne (choć technicznie poprawne), ale nietrudno doprowadzić ją do sytuacji, w której popełni kilka błędów z rzędu. Gdy parametry identyfikacji nie są idealne, CaptionBot wprowadzi do opisu frazy takie jak «Nie jestem zbyt pewny».

CaptionBot: Automatyczne opisy dla Twoich zdjęć
Tym razem błąd był całkowity. Nie ma garnituru ani krawata.

Podsumowując: daleko… ale się zbliża. Jeśli połączymy wszystkie platformy wykrywania i rozpoznawania, które Microsoft rozwija, z tym, co reprezentuje HoloLens, zdecydowanie można sobie wyobrazić więcej niż interesującą przyszłość.

CaptionBot: Automatyczne opisy dla Twoich zdjęć
CaptionBot: Automatyczne opisy dla Twoich zdjęć
CaptionBot: Automatyczne opisy dla Twoich zdjęć

Oficjalna strona: