AWS Device Farm, Google Cloud Test Lab 가격 비교

테스티드는 사람의 수작업 없이 모바일 앱을 다양한 디바이스에 한꺼번에 설치하고 자동으로 동작시켜 오류를 탐지하여 보고합니다.

해외에 유사한 서비스가 있습니다. AWS가 제공하는 Device Farm에서 테스트 종류를 Explorer로 선택하면 테스티드와 비슷한 테스트를 수행할 수 있습니다. 또, Google의 Cloud Test Lab에서 테스트 종류를 Robo Test로 선택하면 비슷한 테스트를 수행할 수 있습니다.

가격은 아래와 같습니다. 가격만 보면 Google이 제일 저렴합니다. 테스티드가 AWS보다 저렴합니다.
– AWS Device Farm : $0.17/분
– Google Cloud Test Lab : 약 $0.084/분($60/분)
– 테스티드 : 140원/분 (kt가 제공하는 ucloud appster로 이용했을 경우)

테스트 결과를 보면, 테스티드는 오류를 재현할 수 있도록 스크린샷과 이벤트를 정확히 보여줍니다. AWS와 Google은 스크린샷을 보여주지만 이벤트를 보여주지 않아 재현이 어렵습니다. 오류가 발견되어도 재현할 수 없으면 고치기 어렵습니다. AWS와 Goolge은 이 부분에 개선이 필요합니다. AWS는 스크린샷이 너무 크게 보여서 순차적으로 보기도 어렵습니다.
테스트 결과는 테스티드가 가장 좋습니다.

제공하는 디바이스를 보면, 일장일단이 있습니다.
– 테스티드 : 20여 종 이상(한국, 중국에서 판매되는 디바이스 위주)
– AWS : 약 200여 종(미국에서 판매되는 디바이스 위주)
– Google : 약 30여 종(레퍼런스 디바이스 모델 약 17개와 OS 조합으로 선택, 언어 제외할 경우)

Device Farm의 Explorer와 Cloud Test Lab의 Robo Test를 테스티드와 함께 비교해보았습니다. 결론은, 테스티드입니다.

테스티드TESTYD의 테스트 결과 화면_재현하기 좋습니다
[테스티드의 테스트 결과 화면, 재현하기 좋습니다]

클라우드 테스트 랩 Cloud Test Lab Robo Test 결과 화면_재현하기 어렵습니다
[Cloud Test Lab의 테스트 결과 화면, 재현하기 어렵습니다]

디바이스 팜 Device Farm Explorer 테스트 결과_재현하기 어렵고 보기도 어렵습니다
[Device Farm의 테스트 결과 화면, 재현하기 어렵고 보기도 어렵습니다]

Cloud Test Lab 디바이스 목록
[Cloud Test Lab의 디바이스 목록]

키워드 : 아마존 웹 서비스, AWS, Device Farm, 구글, 클라우드 테스트 랩, Google, Cloud Test Lab, 가격 비교