블로그 | Patty · 2026. 10. 15.
운전석에는 누가 앉아야 할까 클라우드가 쓰고 로컬이 읽는 에이전트
AI 엔지니어링 브리핑
클라우드의 큰 모델은 작업 계획을 세우고 기기의 작은 모델은 개인정보를 밖으로 보내지 않은 채 현장 내용을 해석하게 나누면, 에이전트의 정확도와 프라이버시를 함께 개선할 수 있다는 연구입니다.
문제 & 배경
- 문제 & 배경: 클라우드 모델은 사용자 데이터를 직접 읽어 정확하지만 개인정보가 외부로 나가고, 로컬 모델은 데이터를 지키지만 복잡한 여러 단계 작업과 실행 중 나타나는 문장 해석에 약했습니다.
기술 & 해결책
- 기술 & 해결책: 클라우드가 개인정보를 보지 않은 상태에서 실행 프로그램을 만들고, 프로그램이 실행 중 애매한 내용을 만나면 짧고 답이 정해진 질문만 기기 안의 로컬 모델에 함수로 물어보도록 역할을 나눴습니다.
교훈 & 주의점
- 교훈 & 주의점: 이 방식은 여섯 가지 실험 조건에서 코드만 실행하는 방식보다 성공률을 높였지만, 로컬 모델 호출 횟수와 질문 설계, 오답 복구, 배터리·메모리 부담을 실제 서비스 환경에서 신중히 관리해야 합니다.
함께 읽을 글
내용이 비슷해요내용이 비슷한 글을 먼저 보여드려요. 같은 문제나 해결책을 다룬다는 뜻은 아니에요.