사피엔즈 2016년 연구의 ISSTA 2026 수상과 메타 대규모 테스트 운영의 실제
안드로이드 앱의 탐색 범위 확장, 비정상 충돌 감지, 재현 단계 최소화를 결합했던 2016년 사피엔즈 연구가 ISSTA 2026 영향력 논문상을 받았다. 메타는 이 연구를 기반으로 대규모 자동 테스트 파이프라인을 구축해 운영해 왔으나, 초기 학술 실험 수치와 현재의 일일 운영 통계는 측정 대상과 조건이 다르므로 구분해 살펴봐야 한다.
“테스트” 검색 결과검색 초기화7편
당근 QAHub, 하이브리드 자동화와 자가 치유로 모바일 앱 테스트 플랫폼 구축
당근이 노션과 구글 시트에 분산되어 있던 22개 프로젝트의 검증 자산을 통합하고, 자가 치유와 경로 재생 기술을 결합해 실기기 모바일 앱 테스트를 안정화한 QAHub 구조를 공개했다.
토스 쇼핑, 정수계획법 도입해 추천 후보 반감하고 구매 전환율 7.55% 개선
토스 커머스 개인화 팀이 추천 파이프라인의 리트리벌 단계에 정수계획법을 적용해 후보 수를 50% 축소하고 구매 전환율 7.55% 개선을 기록했습니다. 노출 다양성 저하 문제는 검베 가중 샘플링을 결합해 함께 보완했습니다.
토스의 모바일 QA 자동화 실험, '토스닥터 V2'가 설계한 자가 치유와 통제의 경계
토스 QA Platform 팀이 주간 배포 파이프라인의 스모크 테스트 유지보수 비용을 낮추기 위해 '토스닥터 V2'를 공개했습니다. 한국어 BDD 시나리오를 바탕으로 LLM과 Appium MCP를 연동해 코드를 자동 생성하고, 테스트 실행 중 장애를 실시간으로 치유하며 실패 원인을 스스로 수정하는 구조를 구축했습니다. 다만 완전 자동화의 위험을 방지하기 위해 검증 단계의 유사 매칭을 제한하고 수동 개입 기준을 명확히 분리했습니다.
여기어때 QA 경험담…화면 확인에서 예약·정산의 정책과 금액 검증으로
여기어때 서비스QA팀이 전시 화면 검증에서 예약·정산 업무로 이동하며 달라진 테스트 관점을 공유했다. 배치 실행 뒤 결과를 확인하고 정책·계산식과 상태 테이블을 준비하는 과정이 핵심이다. 화면의 정상 동작과 데이터 흐름의 정합성이 어떻게 다른 검증을 요구하는지 살펴본다.
당근, 전사 실험 플랫폼 개편으로 지표 등록 UI화와 트래픽 상호배제 도입
당근이 월 290여 건으로 급증한 A/B 테스트 환경에 맞춰 사내 실험 플랫폼을 개편했습니다. 깃허브 코드 기반 등록을 UI 셀프서브 방식으로 바꾸고 슬롯 및 레이어 기반 상호배제 그룹을 도입해 실험 간 간섭을 분리했습니다.
UX 투자 수익 수치의 맥락과 다섯 명 테스트 및 기업 지표 검토
캐리 웹스터가 제시한 UX 투자 효과를 원자료와 비교해 검토했다. 널리 인용되는 다섯 명 테스트와 디자인 기업의 재무 수치는 반복 조사 절차와 퍼센트포인트 단위를 함께 살펴야 타당한 투자 근거가 된다.
