LINE 광고 분석, 계산은 코드·해석은 LLM으로 분리
LY가 LINE 광고의 실적 분석 보고서를 자동 생성하는 설계를 공개했다. 매출 집계·주요 항목 선정·일관성 검사는 코드가 맡고 LLM은 검증된 수치의 해석과 문장 생성을 담당한다. 추가 원인 탐색은 허용된 차원에서만 진행하며, 보고서에 넣을 원인은 별도 규칙으로 검증한다.
첫 단일 프롬프트 방식에서 수치 오류·주요 항목 누락·형식 불안정·얕은 해석을 겪었다고 개발진이 설명했다.
코드가 일·월·연간 변화율과 기여 항목을 계산·선정하며, LLM은 확정된 수치를 다시 계산하지 않는다.
사전 집계 KPI로 변화를 찾고, 추가 설명이 필요하면 ReAct 에이전트가 허용된 탐색 그래프 안에서 Trino 쿼리를 선택한다.
도구·매개변수의 중복 실행을 막고 분석 단계 수·실행 시간을 제한한다.
방향·기여도·업무 제약을 규칙으로 대조해 주요 원인·주의 사항·관찰 신호를 구분한다.
일별 보고서는 Slack·이메일로 전달한다. 글의 예시 매출과 광고주는 실제 수치가 아니라 가상 값이다.
원문
- How much should we delegate to an LLM? Automating advertising analytics reports with an AI agentLINE Engineering · 원문 2026-10-27