•
국내 직원 90+(엔지니어 1/2)
•
국내 1000+ 이상 고객
•
Bits AI
•
MCP Server제공
◦
코드와 가시성 정보 결합 가능
•
LLM Observability
아모레퍼시픽의 AI + 통합 Observability 혁신 사례
•
기존 Observability 에는 복잡성은 있으나 통합이 없다.
•
인프라, 비즈니스 메트릭등 기반의 통합 가시성 제공
•
아모레챗 - 업계 최초 B2C vertical AI Agent 서비스
◦
비동기 → 가시성 확보는?
◦
Non-deterministic
•
아모레퍼시픽의 AI Observability 도전 과제
◦
품질
▪
나쁜 답변
▪
불완전한 답변
◦
안전/안정성
▪
프롬프트 인젝션
▪
법적, 비즈니스 계약 관련 질문에 대한 답변.
◦
비용
▪
대국민 서비스다 보니 토큰 고민.
▪
어떤 질의, 어떤 인터렉션이 과도한 비용을 발생시키는 지 분석에 집
GS Retail's DevSecOps Transformation with Datadog
•
Datadog 도입 전
•
Datadog 도입 후
•
일반사용자의 문의 대응에 RUM활용
◦
replay 기능 사용
