데이터를 효율적으로 관리하는 데이터 큐레이션
디지털 시대에 맞게 데이터는 이전보다 훨씬 복잡해지고, 다양해졌으며, 양도 굉장히 방대해졌습니다. 데이터를 관리하는 것이 모든 디지털 작업에 있어 필수적인 요소가 되었죠. 모든 비즈니스에서 데이터를 어떻게 관리하면 좋을지에 대한 고민을 품고 계실텐데요. 데이터를 효율적으로 관리하고 관련 문제를 해결하기 위한 방법이 하나 있습니다. 바로 데이터 큐레이션입니다. 오늘은 데이터 큐레이션에 관해 자세히 알아보겠습니다.
데이터 큐레이션이란?
큐레이션은 ‘돌보다, 보살피다’ 라는 뜻을 지닌 라틴어 큐레어(curare)에서 유래된 단어입니다. ‘작품이 생기가 날 수 있게 도와주는 활동’이라는 뜻을 가지고 있죠. 일반적으로 큐레이션은 미술관 혹은 박물관에서 주제에 맞는 작품들을 선별하여 관람객에게 전시하고 소개하는 행동을 의미합니다. 큐레이터의 역할은 기존의 작품을 주제에 맞게 보여주는 데서 그치지 않고, 작품의 새로운 의미를 찾아내고 여러 작품을 엮어 하나의 주제로 만듭니다. 작품 배치나 주변 소품에 신경 쓰기도 하고, 필요하다면 해설도 곁들여 안내하기도 합니다.
빅데이터 시대를 맞이한 최근, 데이터에 있어서도 큐레이션의 역할이 점점 더 중요해지고 있습니다. 데이터 큐레이션이란 콘텐츠를 사용하는 데에 있어 필요한 데이터들을 취사선택하고 비즈니스와 연결해주는 작업입니다. 즉, 데이터를 분석하는 데 있어서 효율적으로 데이터를 검색 및 활용, 판단하는 작업을 말하죠. 빅데이터 시대에는 이렇게 고객이 필요로 하는 결과를 빠르게 제공할 수 있는 큐레이션 작업의 필요성이 점점 더 높아지고 있습니다.
데이터 큐레이션의 6단계
데이터 큐레이션을 하기 위해서는 데이터를 기반으로 하여 심도 있는 분석과 기계 학습이 필요합니다. 대규모 데이터를 확보해야 함은 물론이고 기계가 읽을 수 있고, 학습할 수 있어야 하며, 의미를 이해할 수 있는 형태로 데이터가 가공이 되어야 합니다. 이를 위해서는 다음의 6단계를 거쳐야 합니다.
1. 수집 및 구축 단계
이미지, 음성, 텍스트 등 기본적인 데이터를 수집 및 구축하고 기본 데이터를 생성하는 단계입니다.
2. 저장관리 및 통합 단계
데이터를 안전하게 저장하고 서로 다른 데이터를 통합하거나 중복 데이터의 제거, 데이터 셋을 관리하는 단계입니다.
3. 정제 및 변환 단계
데이터를 정제하거나 오류 및 이상이 있는 데이터를 식별, 분석하여 학습 데이터로 변환시키는 단계입니다.
4. 학습 및 분석 준비 단계
데이터의 집계 및 통계 분석을 하고 데이터 어노테이션 및 학습을 준비하는 단계입니다.
5. 학습 및 분석 최적화 단계
데이터 학습 및 분석 알고리즘을 선정하여 실험하고 최적화하는 단계입니다.
6. 품질 평가 및 검증 단계
마지막으로 학습한 데이터의 품질을 평가하는 단계입니다.
데이터 큐레이션의 사례
그럼 데이터 큐레이션은 어떤 업계에서 어떻게 사용되고 있을까요? 가장 대표적인 사례는 미디어 분야입니다. 예를 들면 핀터레스트, 왓챠, 지그재그와 같은 플랫폼들이 데이터 큐레이션 기술을 응용한 플랫폼입니다.
또한 데이터 큐레이션은 다음과 같은 경우에 사용됩니다.
- 웹/소셜 데이터의 수집 및 정제 분야.
- 음성 인식/합성 데이터 구축 분야
- 영상/이미지 데이터 분야
- 자연어처리 구축 분야
- 지식 그래프/온톨로지 구축
- 오픈 데이터 수집, 변환 및 통합
- 공간 데이터 통합 및 분석 분야
- 헬스케어 데이터 및 과학기술 데이터 분야
에지오의 큐레이션 서비스
에지오에서는 빅데이터 시대에 맞게 이러한 데이터 큐레이션 관련 서비스를 제공하고 있습니다. 에지오의 큐레이션은 적은 자원으로 테마 기반 재생목록, FAST 채널을 생성하거나 전문가처럼 브로드캐스트 규모의 라이브 이벤트를 스트리밍하는 강력한 기술을 가지고 있습니다.
1. 가상 선형
테마가 있는 재생 목록을 빠르게 선별하거나 실시간 선형 경험을 위한 콘텐츠를 예약하고 광고 시간을 삽입하여 쉽게 FAST 채널로 만들 수 있습니다.
2. 라이브 이벤트
방송 품질 도구를 사용하여 라이브 이벤트를 원격으로 제어할 수 있고, 이를 통해 광고 삽입, 권리, 신디케이션 및 참여하는 것을 관리할 수 있습니다.
3. 채널 스케쥴러
캘린더 인터페이스로 라이브 및 VOD 콘텐츠를 예약할 수 있습니다. 광고 시간을 구성하고 시간 이동 미리보기를 활성화하여 슬라이서 간에 쉽게 전환이 가능합니다.
4. 콘텐츠 라이브러리
조직 내에서 또는 타사 파트너와 자산을 신속하게 생성, 패키징 및 공유할 수 있는 통합 기능으로 방대한 콘텐츠 라이브러리를 구성하고 분할합니다.
5. 클리핑 도구
라이브 또는 VOD 콘텐츠에서 전문적인 클립을 쉽게 생성, 저장 및 게시할 수 있습니다. 자동화 규칙으로 클립을 만들고 효과를 빠르게 적용하거나 실시간 프로모션 및 하이라이트를 위한 축소판을 추가할 수 있습니다.
큐레이션 외에도 에지오는 Uplynk를 사용하여 하나의 플랫폼에서 운영을 확장하고 더 많은 시청자에게 도달하며 전 세계적으로 콘텐츠를 제공하고 있습니다. 아래 배너를 클릭하여 에지오의 다양한 서비스에 더 알아보세요.
