AutoDroid: LLM-powered Task Automation in Android

https://github.com/MobileLLM/AutoDroid

Relevance


Purpose


Key Problem

  1. GUI 表示:将 GUI 状态和动作转换为文本格式,帮助 LLM 理解并做出决策。
  2. 知识集成:LLM 需要领域特定知识来导航并完成复杂智能手机应用中的任务。
  3. 成本优化:优化 LLM 查询效率,提供响应式的任务自动化体验。

Method

Task-oriented UI Prompting