모바일 에이전트: 모바일 기기 운영 도우미를 위한 다중 에이전트 협업

58.9K 00

일반 소개

모바일에이전트는 멀티 에이전트 협업과 향상된 시각 인식 모듈을 통해 모바일 디바이스 운영의 효율성과 자동화를 개선하도록 설계된 강력한 모바일 디바이스 운영 도우미입니다. X-PLUG 팀이 개발한 이 도구는 안드로이드 및 하모니 OS 시스템을 지원하며 복잡한 멀티 애플리케이션 작업에서 탁월한 성능을 발휘합니다. MobileAgent는 모바일 에이전트-v2와 모바일 에이전트-v3 등 여러 버전으로 제공되며, 각 버전은 성능과 기능이 향상되었습니다. 사용자는 간단한 구성과 설치를 통해 도구를 빠르게 시작하여 모바일 디바이스를 효율적으로 운영 및 관리할 수 있습니다.

new 모바일 에이전트-E 복잡한 작업을 처리하는 능력을 향상시키는 스스로 진화하는 모바일 장치 운영 도우미입니다.

기능 목록

멀티 에이전트 협업여러 에이전트의 공동 작업을 통해 복잡한 작업을 효율적으로 탐색하고 조작할 수 있습니다.
시각 인식 모듈향상된 시각 인식 모듈로 작업 정확도와 효율성이 향상되었습니다.
다중 시스템 지원현재 안드로이드와 하모니 OS가 지원되며 향후 더 많은 플랫폼으로 확장될 가능성이 있습니다.
자동화다양한 운영 작업의 자동화를 지원하여 수동 개입을 줄입니다.
고성능최신 버전인 Mobile-Agent-v3는 메모리 사용량이 더 적고 추론 속도가 더 빠릅니다.
오픈 소스 모델오픈 소스 모델을 사용하여 손쉽게 2차 개발 및 사용자 지정할 수 있습니다.

도움말 사용

설치 프로세스

예비::
- Android 디버그 브리지(ADB)를 다운로드하여 설치합니다.
- Android 휴대폰에서 ADB 디버깅 스위치를 활성화합니다(먼저 개발자 옵션에서 활성화해야 합니다).
- 데이터 케이블을 통해 휴대폰을 컴퓨터에 연결하고 '파일 전송' 모드를 선택합니다.
- ADB 환경을 테스트하려면: 명령줄에 다음과 같이 입력합니다. /path/to/adb devices연결된 장치가 표시되면 준비가 완료된 것입니다.
ADB 키보드 설치::
- ADB 키보드 APK 설치 프로그램을 다운로드합니다.
- 모바일 장치에서 APK를 탭하여 설치합니다.
- 시스템 설정에서 기본 입력 방법을 'ADB 키보드'로 전환합니다.
구성 환경::
- 쇼(티켓) run.py 파일을 열고 설정 섹션을 편집한 다음 ADB 경로, 명령, GPT-4 API URL 및 토큰을 입력합니다.
- 디바이스에 적합한 아이콘 설명 모델을 호출하는 방법을 선택합니다. 디바이스에 고성능 GPU가 장착된 경우 '기본' 방법, 즉 로컬 디바이스에 아이콘 설명 모델을 배포하는 방법을 사용하는 것이 좋습니다.

사용 프로세스

연결된 장치::
- 모바일 장치가 ADB를 통해 컴퓨터에 연결되어 있는지 확인합니다.
- 명령줄에 관련 명령을 입력하여 MobileAgent를 시작합니다.
운영::
- 내비게이션, 작업 자동화 등 필요에 따라 다양한 작업 모듈을 선택합니다.
- 작업에 시각 인식 모듈을 사용하여 작업 실행의 정확성을 개선하세요.
사용자 지정 설정::
- 사용자는 상담원 수, 시각적 인식 매개변수 등 필요에 따라 MobileAgent의 설정을 사용자 지정할 수 있습니다.
- 구성 파일을 수정하여 사용자 환경을 맞춤 설정하세요.
결함 해결::
- 연결 문제가 발생하면 ADB 디버그 스위치가 켜져 있고 데이터 케이블이 제대로 연결되어 있는지 확인하세요.
- 로그 파일에서 자세한 오류 정보를 확인하고 그에 따라 조정 및 수정하세요.