Мобилни софтуерни агенти (Mobile Agents)
Мобилните софтуерни агенти са автономни AI асистенти, оптимизирани за взаимодействие с потребителски интерфейси на смартфони и таблети чрез визуално разпознаване на екрана и емулация на докосвания и жестове.
Технологичен стек
- Мултимодални модели за зрение: Разпознаване на икони, бутони и текстови полета в реално време.
- Семантично картографиране на екрана: Превод на визуални пиксели в структурирано дърво от достъпни елементи.
- Локално изпълнение на устройството: Стремеж за оптимизиране на моделите за работа на мобилни NPU чипове за гарантиране на бързина и поверителност.