harmonyos-device-automation

harmonyos-device-automation是什么

HarmonyOS 设备自动化是一款基于Midscene的视觉驱动工具，适用于HarmonyOS NEXT设备，通过截图操作实现设备自动化，支持自然语言命令控制，适用于华为设备等。

开源协议：MIT-0

harmonyos-device-automation的主要功能

• 视觉驱动：完全通过截图操作，无需DOM或无障碍标签，可交互屏幕上的所有可见元素。
• 自然语言命令：通过HDC使用自然语言命令控制HarmonyOS设备，执行点击、滑动、文本输入等操作。
• 设备兼容：适用于HarmonyOS NEXT设备，包括华为设备等。
• 自动化操作：支持自动化执行点击、滑动、文本输入、应用启动、截图等操作。
• 命令映射：每个CLI命令直接映射到MCP工具，实现高效自动化。

如何使用harmonyos-device-automation

• 配置环境变量：配置Midscene模型API密钥等环境变量。
• 编写自动化脚本：根据需求编写自动化脚本，使用Midscene命令控制设备。
• 执行脚本：运行自动化脚本，实现设备自动化操作。
• 监控与调试：监控自动化过程，进行必要的调试和优化。
• 结果分析：分析自动化结果，评估自动化效果。

harmonyos-device-automation的应用场景

• 自动化测试HarmonyOS应用
• 自动化操作HarmonyOS设备
• 批量处理HarmonyOS设备任务
• 远程控制HarmonyOS设备
• 开发HarmonyOS自动化工具