요청 한 줄이면, AI 에이전트가 폰 화면을 직접 눌러서 그동안 못 들어가던 우버·보험 앱까지 써요

“Everyone jumps to agents doing errands, but the interesting use case is testing. A phone an agent can operate is the first honest way to check whether an app actually works for a real user, taps and all. Mobile QA as a category is about to get eaten by this.”

다들 심부름하는 에이전트부터 떠올리지만, 흥미로운 쓰임은 테스트예요. 에이전트가 조작할 수 있는 폰은, 앱이 실제 사용자에게 정말 돌아가는지를 누르는 동작까지 그대로 확인하는 첫 정직한 방법이에요. 모바일 QA라는 분야 전체가 곧 이것에 먹힐 거예요.

창업자는 "Testing is one use case. Yes"(테스트도 쓰임 가운데 하나예요. 맞아요)라고 답했어요.

Oppi(@theoppius) · Xx.com

“the flight delay demo is my favorite part. the agent sees the notification, works out what it means for your day and texts alex before you even check your phone. that's the kind of help people actually want from an agent”

항공편 지연 시연이 제일 좋아요. 에이전트가 알림을 보고, 그게 당신의 하루에 무슨 뜻인지 따져서, 당신이 폰을 확인하기도 전에 Alex에게 문자를 보내요. 사람들이 에이전트에게 실제로 바라는 도움이 바로 이런 거예요

Adam James Hill(AI 콘텐츠 크리에이터) · Xx.com

“phone use is the next most important infrastructure primitive for agents and you're the best one to be building it congrats on the launch!”

폰 사용은 에이전트에게 다음으로 가장 중요한 기본 인프라예요. 그걸 만들 사람으로 당신이 가장 적임자예요. 출시 축하해요!

출시 글에 단 축하 답글이에요.

Dhravya Shah(supermemory 창업자) · Xx.com

“The part that should make people pause is "completing two-step verification". If an agent can read your codes, 2FA stops being a second factor and becomes the same one. The rule I'd use: let it navigate and fill forms, but codes, payments and password changes stay a human tap. «Stop and ask me before any one-time code, payment or account setting change.»”

사람들이 멈칫해야 할 대목은 '2단계 인증 완료'예요. 에이전트가 인증 코드를 읽을 수 있으면, 2단계 인증은 두 번째 단계가 아니라 같은 한 단계가 돼요. 제가 쓸 규칙은 이래요: 화면 이동과 양식 채우기는 맡기되, 인증 코드·결제·비밀번호 변경은 사람이 직접 누른다. «일회용 코드, 결제, 계정 설정 변경 앞에서는 멈추고 나에게 물어봐.»

에이전트가 2단계 인증까지 마친다고 소개한 글에 단 답글이에요.

JVCE(엔지니어이자 변호사) · Xx.com

“the real test is whether it survives a checkout that makes you create an account first. that's where i quit as a human”

진짜 시험은 계정부터 만들라는 결제 화면을 넘기느냐예요. 사람인 저도 거기서 그만두거든요

Hasnain Bharmal(jobply.ai 창업자) · Xx.com

“Their own docs also rule out several things: no test assertions, no running across many devices at once, no scheduler, no video recording, and no spend cap.”

그들의 문서도 여러 가지를 스스로 배제해요: 테스트 결과 검증이 없고, 여러 기기에서 동시에 돌리기가 없고, 예약 실행이 없고, 영상 녹화가 없고, 지출 상한이 없어요.

PhoneUse 문서를 읽고 자기 프로젝트와 비교한 글이에요.

richard-better(경쟁 오픈소스 phone-use 메인테이너) · GitHubgithub.com

“cool concept, don't understand why you cant just buy a second phone for less than the monthly fee then build the tap and scroll hardware yourself (and your activity is secure vs in one persons phone farm)”

멋진 아이디어지만, 월 요금보다 싸게 두 번째 폰을 사서 누르고 넘기는 장치를 직접 만들면 왜 안 되는지 모르겠어요(그러면 한 사람의 폰 농장에 맡기는 것보다 내 활동도 안전하고요)

창업자는 "we are mostly for enterprise who uses our phones / you can totally automate your own phone"(우리는 주로 우리 폰을 쓰는 기업을 위한 서비스예요. 자기 폰은 얼마든지 직접 자동화해도 돼요)이라고 답했어요.

Leon Khoshnevis(EF 인재 담당, 창업자) · Xx.com

“true phone use when will be when an agent can use MY phone, NOT your phone”

진짜 phone use는 에이전트가 당신 폰이 아니라 내 폰을 쓸 수 있을 때일 거예요

Sid Jain(DrDroid, YC W23) · Xx.com

“Won’t this just completely circumvent any sandbox? By making the full phone the MCP, it gives unrestricted internet access to models, and then gives them all the tools, and the environment to download any tools needed to do whatever they please.”

이러면 어떤 샌드박스든 완전히 우회되는 것 아닌가요? 폰 전체를 MCP로 만들면 모델에게 제한 없는 인터넷 접속을 주고, 모든 도구를 주고, 원하는 일을 하는 데 필요한 도구를 무엇이든 내려받을 환경까지 주게 돼요.

Menachem Loriner · Xx.com

“Of course, giving an agent a physical phone doesn’t resolve the underlying problem. A real device isn’t proof of legitimate intent, any more than a human finger is proof that the person using it is trustworthy. An AI operating a smartphone could still make mistakes, exceed its instructions or expose sensitive information.”

물론 에이전트에게 실물 폰을 준다고 근본적인 문제가 풀리지는 않아요. 사람 손가락이 그 손을 쓰는 사람이 믿을 만하다는 증거가 아니듯, 실제 기기도 정당한 의도의 증거가 아니에요. 스마트폰을 다루는 AI도 여전히 실수하거나, 지시를 넘어서거나, 민감한 정보를 드러낼 수 있어요.

Guillaume Field · Substack The Shrug Reporttheshrugreport.substack.com