GCP : Video AI

Video AI는 구글 클라우드 플랫폼에서 제공하는 서비스로 동영상을 분석하고 메타데이터를 추출할 수 있습니다.

20,000개가 넘는 객체, 장소, 동작을 인식할 수 있기 때문에 동영상을 정확하게 분석할 수 있고 샷이나 프레임에서 다양한 메타데이터를 추출하는 것도 가능합니다.

이를 통해 다양한 작업을 할 수 있는데요, 먼저 스트리밍 동영상 주석을 사용해 실시간으로 유용한 정보를 얻고 감지된 객체를 기반으로 이벤트를 트리거할 수 있고 통계를 실시간으로 확보할 수 있습니다. 또한 AutoML Video Intelligence를 사용하여 커스텀 항목 라벨을 만들 수 있습니다. 고객을 위한 하이라이트나 맞춤 동영상을 제공하는 환경을 조성할 수도 있겠죠.

동영상 분석 기술을 해당 애플리케이션의 일부로 사용할 수 있습니다. 사용자는 REST API를 이용하여 Cloud Storage에 로컬로 저장되거나 실시간 스트리밍되는 동영상에 전체 동영상 수준의, 세그먼트, 장면, 프레임당 문맥 정보를 추가할 수 있습니다.

또한 간편하게 미디어를 관리할 수도 있습니다. 문서를 검색할 때와 똑같이 동영상 카탈로그를 검색할 수 있는 기능이 있는데요, 이를 통해 동영상 콘텐츠의 색인 생성, 정리, 검색에 사용할 수 있는 메타데이터를 추출하고 관련성이 높은 콘텐츠를 관리하며 필터링할 수도 있습니다.

이 Video AI에는 두가지 방법이 주로 사용됩니다.

AutoML Video Intelligence
Video Intelligence API

입니다.

AutoML Video Intelligence의 그래픽 인터페이스를 활용하면 머신러닝 경험이 많지 않아도 자체 커스텀 모델을 쉽게 학습시켜 동영상 내의 객체를 분류하고 추적할 수 있습니다. 이 제품은 사전 학습된 Video Intelligence API로는 처리가 안 되는 커스텀 라벨을 필요로 하는 프로젝트에 적합합니다.

Video Intelligence API에는 이미 저장된 동영상과 스트리밍 동영상에서 수많은 객체, 장소, 동작을 자동 인식하는 선행 학습된 머신러닝 모델이 있습니다. 일반적인 사용 사례에서 매우 효율적이며 향후 새로운 개념이 도입됨에 따라 성능이 향상됩니다.

따라서 Video Intelligence API를 사용하면 수천 개의 사전 정의된 라벨로 콘텐츠를 빠르게 분류할 수 있고 AutoML Video Intelligence를 사용하면 특정 요구에 맞는 커스텀 라벨을 만들 수 있습니다.

이렇듯 Video AI는 다양한 기능들이 존재하는데요.

먼저 각 프레임이나 사진에 나타나는 콘텐츠에 대한 메타데이터를 자동으로 추출하여 빠르고 일관되게 동영상에 태그를 지정하고 분류할 수 있고 Google의 머신 러닝 기능을 사용해 도메인별 기능으로 표준 비디오 AI 솔루션의 기능을 확장함으로써 전문 콘텐츠에 태그를 빠르고 일관되게 지정하고 분류하는 것도 가능합니다. 또한 분류 중에 생성된 메타데이터를 검색하여 관련 동영상 스니펫을 빠르게 검색할 수 있습니다.

그리고 동영상의 음성이나 동영상 내에 등장하는 텍스트를 추출해 이를 통해 특정 단어나 문구가 말하거나 표시되는 모든 비디오를 검색할 수 있고 구글 번역과 함께 사용해 자막을 자동으로 생성할 수도 있습니다. 이를 통해 직접 번역하는 비용이나 시간 지연에 따른 불편함을 감소할 수 있겠죠.

또한 선정적인 콘텐츠를 걸러내는 역할도 하는데요, 폭력적이거나 성적인 콘텐츠가 포함된 동영상을 자동으로 식별하고 평가합니다.

광고에 있어서도 편리합니다. 이 서비스는 동영상에서 적절한 위치를 파악해 영상 콘텐츠와 문맥상 관련성이 높은 광고를 알아서 삽입할 수 있는 기능이 있습니다. 이는 동영상 콘텐츠의 타임프레임별 라벨과 광고의 콘텐츠를 일치시키는 과정을 통해 이루어집니다.

그렇다면 Video AI의 가격정책은 어떻게 될까요?

월별 무료 할당량이 있으며 가격은 분 단위로 책정되고 초 단위 시간은 분 단위로 올림됩니다. 볼륨은 월 단위로 적용됩니다.