El proyecto de código abierto Phone Use es un asistente de automatización de inteligencia artificial basado puramente en dispositivos móviles que no requiere computadora: Roubao. Utilizando el lenguaje natural, la IA puede usar directamente los teléfonos móviles para completar comandos complejos como pedir comida para llevar, enviar mensajes de WeChat y navegar. Reescribieron MobileAgent de Alibaba usando Kotlin y escribieron todo el proceso de "captura de pantalla, pensamiento de IA, clic/deslizar" en una aplicación usando Kotlin, el lenguaje nativo de Android, que se ejecuta de forma nativa en dispositivos Android. Obtener privilegios a nivel de sistema utilizando Shizuku, no a través de comandos ADB. En el primer lanzamiento, simplemente use la depuración inalámbrica (Android 11+) o escriba un comando mientras esté conectado a una computadora para habilitar el servicio Shizuku. A partir de ahora, Meatball tendrá permisos de "nivel ADB", lo que le permitirá tomar capturas de pantalla y simular clics en cualquier momento, sin necesidad de acceso root o una conexión a computadora. VLM se puede implementar utilizando herramientas como Tongyi Qianwen, OpenAI GPT-4V y Claude. En términos de seguridad, el sistema se detendrá automáticamente cuando se detecten páginas sensibles como de pago o contraseñas; todo el proceso de ejecución de la tarea es visible, con una ventana flotante que muestra el progreso; y la tarea se puede detener manualmente en cualquier momento. #usodelteléfono #AsistentedeTeléfonoInalámbrico
github:github.com/Turbo1123/roub…
