Исследователи из Вашингтонского университета и Института Аллена создали нейросеть, которая может предугадывать действия собак исходя из изображения окружающей среды, сообщает Мир24 со ссылкой на arXiv.org.
Алгоритм натренировали на реальных записях действий собак от первого лица и научили корректно предугадывать их действия на пять кадров вперед.
Всего ученые разработали три нейросетевые модели разной архитектуры для трех основных подзадач. Одна модель предсказывает будущие движения собаки на основе предыдущих. Вторая занимается планированием движений, а третья учится классифицировать объекты в кадре и определять зоны, по которым животное может передвигаться.
Модели построены на основе долгой краткосрочной памяти и остаточной нейросети ResNet, которую часто используют для подобных задач. Например, швейцарские инженеры с ее помощью научили дрон летать на основе записей с видеорегистраторов.
По мнению ученых, уже в ближайшем будущем алгоритм можно будет протестировать на данных с большего количества собак и других животных.