ОмніPredict — нова розробка у сфері штучного інтелекту, яка дозволяє прогнозувати поведінку пішоходів у реальному часі, наближаючи автономні транспортні системи до людської інтуїції.

Інженери з Техаського університету A&M у співпраці з Корейським інститутом передових технологій створили унікальну систему OmniPredict, що ґрунтується на мультимоделі великої мовної моделі (MLLM). Це означає, що ШІ не лише бачить, але й “розуміє” ситуацію на дорозі, зокрема — передбачає наступні дії пішохода. Система аналізує візуальні дані та контекст — положення тіла, напрямок погляду, швидкість транспорту — і класифікує поведінку у чотири категорії: перехід, перекриття, дії, погляд.

«Наш новий підхід — це крок у бік машин, які не просто реагують, а передбачають дії людини», — наголошує керівник проєкту, доктор Срінкант Саріпаллі. На відміну від традиційних систем, що працюють лише з даними камер, OmniPredict спирається на повноцінне інтерпретування сцени, яке дозволяє прогнозувати навіть ускладнені сценарії — наприклад, коли пішохода частково не видно.

У ході тестування на відомих наборах JAAD і WiDEVIEW, без попереднього навчання, система досягла точності у 67%, перевершивши існуючі моделі на 10%. «Це відкриває двері для безпечнішого функціонування автономного транспорту та зменшення кількості аварій», — зазначає Саріпаллі. Ба більше, навіть при зміні умов — погоді, освітленні чи поведінці людей — система зберігала стабільну ефективність.

Інноваційність OmniPredict полягає в здатності інтерпретувати людську мотивацію, а не лише фізичну активність. Це відкриває потенціал для використання не лише у транспорті, а й у військових та надзвичайних ситуаціях, де швидке розпізнавання намірів людини може зберегти життя. «Йдеться не про заміну людини, а про посилення її можливостей завдяки розумному партнеру», — підкреслює автор дослідження.

OmniPredict — це крок до майбутнього, де автономні машини не просто функціонують, а діють на основі причинно-наслідкового аналізу поведінки людини. Як зазначає Саріпаллі: «OmniPredict не просто бачить, що ми робимо — він розуміє, чому ми це робимо, і коли зробимо наступний крок».

Источник: cikavosti.com