Microsoft научила бота придумывать подписи к фотографиям

Компания Microsoft запустила алгоритм CaptionBot, способный анализировать фотографии пользователей и придумывать к ним подписи. В основе сервиса лежит Microsoft Cognitive Services, и работает бот с помощью искусственного интеллекта.

В создании CaptionBot задействованы два алгоритма - Computer Vision и Natural Language. Сервис CaptionBot работает на базе двух нейросетей, одна из которых анализирует фотографии, а вторая придумывает к ним англоязычные описания.

Сервис легко распознает, что запечатлено на фото, он сможет определить, насколько тот или иной человек, изображенный на снимке, похож на какую-либо знаменитость. Отмечается, что пока CaptureBot часто ошибается. После каждого описания нейросеть просит оценить свою работу.