Spotify, A/B 소프트웨어 개발 테스트 플랫폼 'Confidence' 공개

"Spotify의 데이터 과학자와 엔지니어는 수년 동안 제품 테스트 방법을 개발하고 연마해 왔습니다."라고 Spotify 블로그 게시물은 새로운 플랫폼을 발표하기 시작합니다. “동시 A/B 테스트를 자동으로 조정하거나 모바일, 데스크톱, 웹 전반에 걸쳐 AI 추천 시스템 출시를 조율하는지 여부입니다. 우리가 구축한 플랫폼은 모든 팀에 실험 모범 사례와 기능을 확장합니다. 머지않아 이 실험 플랫폼은 우리가 Spotify에서 하는 방식으로 빠르고 안정적이며 자신있게 아이디어를 구축, 테스트 및 반복하려는 모든 회사에서 사용할 수 있게 될 것입니다.”

Confidence는 소프트웨어 개발 팀이 빠른 A/B 테스트를 통해 피드백을 얻을 수 있는 쉬운 플랫폼으로 설계되었습니다. Spotify는 이 도구가 DSP에서 내부적으로 A/B 테스트를 수행하면서 자체 데이터 과학자와 엔지니어의 요구에 따라 구축되었다고 말합니다. 테스트가 수동으로 이루어지고 오류가 발생하기 쉬웠지만 Spotify는 프로세스를 개선하기를 원했습니다. ABBA라고 불리는 자체 내부 A/B 테스트 플랫폼을 구축했습니다.

Spotify는 ABBA를 구축하면서 배운 모든 것을 바탕으로 다시 시작했다고 말합니다. 이것이 자신감입니다. Confidence는 새로운 도구를 제공하고 고급 테스트 방법을 통합하는 동시에 일부 과학적인 모범 사례를 자동화하여 개발 팀이 통제된 실험을 더 쉽게 설정할 수 있도록 합니다. Spotify는 “2020년에 ABBA를 종료할 때까지 우리는 비즈니스의 거의 모든 측면에서 연간 수백 건의 실험을 실행하다가 수천 건의 실험을 실행하게 되었습니다.”라고 말합니다.

공유: