두바오가 스스로 마우스를 클릭하기 시작했습니다: Windows 버전에서 소프트웨어를 직접 조작할 수 있습니다

동차 Beating 모니터링에 따르면, 두바오(豆包)의 '작업 업무'가 Windows에서 가상 데스크톱을 새로 추가했습니다. '컴퓨터 조작'을 활성화하면 두바오가 소프트웨어 인터페이스를 이해하고, 직접 마우스를 움직이며 버튼을 클릭하고 내용을 입력하여 사용자의 컴퓨터에서 직접 작업을 완료할 수 있습니다.

이는 사용 중인 마우스와 키보드를 점유하지 않습니다. 사용자는 계속해서 컴퓨터를 정상적으로 조작할 수 있으며, 두바오는 동시에 다른 데스크톱에서 작업을 수행합니다. 전체 과정은 실시간으로 확인할 수 있고, 언제든지 일시 중지하거나 직접 제어권을 넘겨받을 수도 있습니다.

이로 인해 두바오는 더 많은 일반 소프트웨어를 조작할 수 있게 되었습니다. MCP, API, 플러그인 또는 CLI가 없더라도, 소프트웨어에 그래픽 인터페이스만 있으면 두바오는 인터페이스 인식, 클릭 및 입력을 통해 작업을 완료할 수 있으며, 여러 소프트웨어를 넘나들며 연속적으로 작업을 수행할 수도 있습니다.