제작자와 이용자가 접하는 시점이 다르다
2023년 6월 27일 유니티는 실시간 3D 콘텐츠를 만드는 도구 뮤즈와 센티스를 공개했다. 회사는 뮤즈를 제작 과정에서 도움을 받는 도구로, 센티스를 신경망 모델을 배포할 프로그램에 넣고 실행하는 도구로 설명했다. 두 발표는 같은 날에 나왔지만 작동 시점과 이용자가 다르다. 첫 경우에는 개발자가 만들고 검토하는 동안 도구를 이용한다. 둘째는 개발자가 모델을 포함해 빌드한 프로그램을 이용자가 실행할 때 모델이 동작한다.[1][2]
센티스에서 설명한 추론은 이미 훈련된 모형에 새 입력을 넣어 결과를 계산하는 일이다. 사용자가 들어올 때마다 새 모델을 처음부터 훈련한다는 뜻은 아니다. 개발자는 어떤 입력을 모형에 보낼지, 계산 결과가 화면이나 동작에 어떤 영향을 줄지 결정해야 한다. 실행 단계에 모델이 들어가면 개발할 때만 AI를 쓰는 경우와 달리 이용자의 기기에서도 그 계산에 필요한 자원이 쓰일 수 있다.[1]
한 게임의 두 작업으로 비교해 보기
예를 들어 한 개발팀이 게임 속 공간의 초기 구상을 정리하는 데 제작 도구의 도움을 받는다고 하자. 개발자가 결과를 확인하고 장면을 다듬어 완성하면, 배포되는 프로그램에 그 제작 도구를 그대로 넣지 않아도 된다. 다른 경우에는 게임이 실행되는 동안 화면 입력의 일부를 모델에 넣어 특정 동작을 감지하는 기능을 만들 수 있다. 이때는 어떤 모델이 이용자의 기기에서 실행되는지와 어떤 결과가 나오는지가 게임 동작의 일부가 된다.
이 두 예는 기능이 자리 잡는 단계를 설명한다. 유니티가 해당 게임을 만들었거나 제품에서 예시와 같은 기능이 이미 검증됐다는 뜻은 아니다. 게임이 배포되기 전에 쓰는 도구는 작업자의 검토 시간과 생산성에 영향을 줄 수 있다. 프로그램 안에서 모델을 실행하는 도구는 이용자의 기기 성능과 응답 시간에 영향을 줄 수 있다. 그래서 새 기능을 평가할 때 어떤 사람의 작업이 빨라지는지부터 구분할 필요가 있다.
기기에서 실행한다는 말에 들어 있는 조건
유니티는 센티스를 지원되는 플랫폼에서 실행할 수 있는 추론 도구로 소개했다. 계산을 기기에서 처리하면 해당 작업을 매번 별도 서버에 보내야 하는 경우와 데이터의 경로가 달라진다. 그렇다고 모든 모델이 모든 기기에서 같은 속도로 작동하거나 모든 네트워크 연결이 사라진다는 뜻은 아니다. 게임 자체에 다른 온라인 기능이 있을 수 있고, 모델의 크기나 사용하는 계산 방식에 따라 기기별 성능도 달라질 수 있다.[1][2]
예를 들어 한 기기에서는 화면을 그리는 작업과 모델 계산이 동시에 진행돼도 끊김이 적을 수 있다. 다른 기기는 여유가 작아 같은 모델을 실행할 때 화면 반응이 느려질 수 있다. 테스트에서 비교할 것은 모델이 실행되는지뿐 아니라 반응이 일정한지, 필요할 때 계산을 생략하는 경로가 있는지다. 제품 공개 발표만으로 이런 결과를 확정할 수는 없다.
공개와 비공개 베타를 나눠 읽기
유니티의 공식 안내는 두 도구를 이용자들과 검토하기 위해 비공개 베타로 제공한다고 밝혔다. 6월 27일에 도구의 구상과 지원 방법이 소개됐지만 누구나 바로 같은 버전을 쓸 수 있는 단계라는 의미는 아니었다. 당시 개발자가 실제 프로젝트에 도입하려면 참가 여부, 모델과 기기의 지원 조건, 배포할 프로그램에서의 동작을 확인해야 했다.[2]
한국의 소규모 개발팀도 이 구분을 사용할 수 있다. 제작 단계에 도구를 쓰려는 팀은 어떤 작업을 자동화할지와 결과를 누가 검토할지 먼저 볼 수 있다. 모델을 게임에 넣으려는 팀은 이용자가 쓸 기기를 정하고 실행 시간과 정확도를 테스트할 수 있다. 두 도구를 하나의 AI 기능으로 묶어 읽으면 한쪽의 테스트 결과가 다른 쪽에도 그대로 적용된다고 오해하기 쉽다.
제품 소개에서 실제 적용으로
유니티가 공개한 설명은 각 도구의 역할과 이용 가능 단계에 관한 것이다. 제작 도구로 만든 자산의 품질과 실행 중 모델이 내는 판단의 정확도는 각각 다른 방법으로 확인해야 한다. 예를 들어 작업자가 초안을 쉽게 고칠 수 있는지는 제작 흐름을 살펴야 하고, 센티스로 넣은 모델이 잘못 분류할 때 어떻게 처리하는지는 프로그램을 실제로 실행해야 알 수 있다. 같은 6월 발표를 보고도 도입 전에 준비할 검증 항목이 달라지는 이유다.[1][2]
모델이 어디에서 작동하는지 확인하는 법
제작 도구에서 초안을 만들 때는 그 초안을 사람이 검토한 뒤 배포물에 반영할 수 있다. 반면 실행 중인 프로그램이 모델을 호출하면 사용자 입력에 따라 결과가 즉시 달라질 수 있다. 테스트에서는 모델이 어떤 입력을 받는지, 결과를 잘못 냈을 때 화면이나 조작이 어떻게 달라지는지 살펴야 한다. 센티스 소개가 기기에서 실행되는 추론을 다룬다는 점은 모델 출력에 이런 확인 절차가 필요함을 보여 준다.[1][2]
모델을 자체 실행하는 환경을 선택할 때도 모든 데이터가 자동으로 기기 안에만 남는다고 단정할 수 없다. 해당 프로그램이 별도로 기록이나 온라인 기능을 쓴다면 다른 데이터 경로가 있을 수 있다. 따라서 기능별로 어떤 계산이 기기에서 이뤄지고 어떤 정보가 다른 곳으로 이동하는지 따로 확인해야 한다. 6월 발표는 센티스로 모델을 넣고 실행하는 경로를 소개했다. 개별 게임이나 서비스의 전체 설계를 보여 주지는 않았다.[1][2]
