본문으로 건너뛰기

개요

프로젝트 개요​

SceneMakerAI 는 오픈소스 멀티모달 AI로 방송 콘텐츠의 장면·감정·인물·대사를 통합 분석하고, 이를 하이라이트·숏폼·모아보기 등으로 자동 재가공하는 서비스입니다. 방송·미디어 사업자가 방대한 영상 아카이브를 더 빠르고 저렴하게 활용할 수 있도록 돕는 것을 목표로 합니다.

SceneMakerAI는 2026년 NIPA(정보통신산업진흥원) 오픈소스 AI·SW 개발·활용 지원사업 국책과제로 수행되며, 주요 결과물은 Apache 2.0 라이선스 로 공개됩니다.

  • 과제 개요
항목내용
과제명오픈소스 멀티모달 AI 기반 방송 콘텐츠 지능형 재가공 서비스 개발 및 사업화
사업2026년 NIPA 오픈소스 AI·SW 개발·활용 지원사업
수행기간2026년 5월 ~ 2026년 12월
주관기관(주)솔박스
참여기관SBSi (SBS 미디어그룹 기술 계열사)
라이선스Apache 2.0

실증은 SBSi의 실제 방송 콘텐츠를 대상으로 진행하며, 온프레미스 도입과 B2B SaaS 형태의 사업화를 지향합니다.

무엇을 해결하나요​

방송·미디어 사업자는 드라마, 예능, 스포츠, 뉴스 등 방대한 영상 아카이브를 보유하고 있습니다. 그러나 이 콘텐츠를 하이라이트 클립, 숏폼, 인물별 모아보기처럼 새로운 형태로 재가공하는 작업은 대부분 사람이 직접 영상을 보며 편집해야 하는 수작업이라 시간과 비용이 많이 듭니다.

SceneMakerAI는 영상과 오디오를 함께 이해하는 오픈소스 멀티모달 AI와 워크플로우 오케스트레이션을 결합해, 장면 분석부터 재가공까지의 과정을 자동화합니다.

핵심 서비스​

SceneMakerAI는 네 가지 축의 AI 서비스를 제공합니다.

서비스설명
모아보기정주행 가이드형, 인물별 하이라이트, 감정선·감성 몽타주 등 시청 목적에 맞춘 재구성
리믹스·숏폼예고편·티저, 명장면 클립, 명대사 카드, 멀티플랫폼 변환 등 짧은 형식의 콘텐츠 생성
광고 삽입 최적화장면 맥락에 맞춘 광고 매칭과 감정 흐름에 맞춘 삽입 타이밍 최적화
Batch 자동화풀 파이프라인, 숏폼 마케팅, 모아보기+광고, 커스텀 워크플로우의 일괄 처리

어떻게 동작하나요​

SceneMakerAI는 방송 영상을 전처리 → 멀티모달 분석 → 색인 → 재가공 의 파이프라인으로 처리합니다.

  • 전처리 : 영상 디코딩, 음성 추출·자막화(STT), 음원·화자 분리 등으로 분석에 필요한 신호를 정리합니다.
  • 멀티모달 분석 : 영상과 오디오를 동시에 이해하는 오픈소스 멀티모달 AI로 장면·인물·대사·감정을 분석합니다.
  • 워크플로우 오케스트레이션 : LangGraph 기반 Map-Reduce 병렬 처리로 대용량 콘텐츠를 효율적으로 다룹니다.
  • 색인·검색 : 분석 결과를 벡터 검색과 관계형 데이터베이스로 색인해, 재가공 시 원하는 장면을 빠르게 찾습니다.

세부 아키텍처와 사용 기술은 별도 문서에서 다룹니다.

목표 성과 (KPI)​

과제의 성과지표는 ETRI 공인시험을 통한 검증을 목표로 하며, 아래 수치는 달성을 지향하는 목표치 입니다.

  • 처리 성능 : 1시간 분량 방송 콘텐츠 처리 시간 20분 이내
  • 장면 분석 정확도 : F1 점수 0.70 이상 (40~60분물 기준), 0.65 이상 (60~120분물 기준)

오픈소스와 커뮤니티​

SceneMakerAI는 오픈소스 생태계 위에서 만들어졌으며, 그 성과를 다시 커뮤니티에 환원하는 것을 지향합니다. 방송 도메인에 맞춘 프롬프트 템플릿과 RAG 설정, 데이터셋을 공개하고, 프로젝트가 사용하는 오픈소스 프로젝트에 이슈와 PR로 기여합니다. 진행 과정과 기술적 배경은 기술 블로그로 꾸준히 공유합니다.