릴리스AI 같은 서비스 제작하기: 영상·PDF를 근거 있는 요약 보고서로 바꾸는 기능 제작법
음성 전사와 문서 파싱, 근거 인용 요약과 문서 출력까지 연결해 영상·PDF 요약 서비스를 만드는 방법을 설명합니다.
핵심 요약
1. 영상·음성과 PDF를 읽어 원문 위치가 연결된 요약·질의응답·보고서로 만드는 서비스를 설계합니다. 2. RTZR STT, Upstage Document Parse, Claude Citations와 Notion API·PDF 출력을 역할별로 연결합니다. 3. 파일 접수, 원문 위치 통합, 요약 범위 관리, 편집 버전과 내보내기 검수는 자체 개발합니다.
영상·음성을 시간별 원문으로 바꾸기
릴리스AI 같은 요약 도구의 가치는 긴 자료에서 필요한 내용을 빠르게 파악하게 하는 데 있습니다. AI 요약 서비스 개발을 시작할 때는 자료를 읽는 단계와 요약을 만드는 단계를 나눕니다. 아래 기술은 유사 기능을 만들기 위한 연결안입니다.
이용 권한이 있는 미디어 파일을 접수하고 음성을 RTZR STT API에 전달해 텍스트로 변환합니다. 자체 코드는 파일 형식과 길이를 확인하고 작업 상태를 관리합니다. 출력은 원문 문장과 시간 정보가 연결된 데이터이며, 이후 요약에서도 이 연결을 유지합니다.
음성 파일 텍스트 변환이 끝나면 사용자가 고유명사나 인식 오류를 수정할 수 있게 합니다. 수정본과 원본 전사를 구분해 저장하면 요약을 다시 생성할 때 어떤 버전을 기준으로 했는지 확인할 수 있습니다. 유튜브 영상 요약도 실제로 확보할 수 있는 자막·미디어의 이용 범위 안에서 입력 경로를 구성합니다.

PDF 본문과 표를 요약 입력으로 정리하기
PDF와 문서는 Upstage Document Parse를 연결해 본문과 표를 구조화하는 방식으로 처리할 수 있습니다. 자체 로직은 페이지·문서 ID를 유지하고 문서의 읽기 순서와 표의 연결을 확인합니다. PDF 논문 요약에서 표의 단위나 주석을 잃으면 결과의 의미가 달라질 수 있습니다.
여러 PDF 통합 분석은 파일을 무조건 하나로 붙이는 방식보다 문서별 근거 위치를 유지하는 편이 좋습니다. 서로 다른 문서의 주장이나 수치는 출처 문서와 연결해 저장합니다. 출력은 음성 전사와 같은 요약 단계에서 읽을 수 있는 본문·표·위치 데이터입니다.
근거와 연결되는 맞춤 요약 만들기
정리한 원문과 사용자의 목적을 Claude Citations API에 전달해 요약과 답변을 구성합니다. 긴 강의 핵심 정리라면 주제와 설명을, 회의 녹음 요약이라면 결정 사항과 할 일을 구분하도록 출력 항목을 설계할 수 있습니다.

긴 자료는 구간별로 읽은 뒤 통합하는 흐름을 만들고, 자체 로직이 처리한 범위와 빠진 구간을 관리합니다. 출처 있는 AI 요약은 보기 좋은 문장만 생성하는 기능이 아닙니다. 요약의 문장을 누르면 해당 페이지나 시간으로 돌아가게 연결하고, 원문에 없는 담당자·기한·결론을 채우지 않도록 검수합니다.
수정한 보고서를 문서와 PDF로 출력하기
확정한 요약은 편집 가능한 보고서로 저장하고 Notion API나 PDF 출력 기능에 연결합니다. Notion 연동은 통합에 공유된 대상에 문서를 작성하는 범위로 구성하며, 별도 제품인 Notion Agent를 호출하는 기능으로 설명하지 않습니다.

문서 요약 SaaS 제작에서는 원문, 자동 요약, 사용자 수정본을 구분하는 버전 관리가 필요합니다. 내보낼 때는 표·출처 링크·문단이 유지되는지 검사하고, 요약 보고서 PDF 저장이 끝났는지 파일 결과로 확인합니다. 실패한 문서 출력이 요약 작업 전체를 다시 실행하게 하지 않도록 단계별 상태를 나누면 운영하기 수월합니다.
자료 기반 AI 채팅은 같은 원문 위치 데이터를 재사용해 추가할 수 있습니다. 답변을 생성할 때도 사용자가 선택한 문서 범위와 접근 권한을 확인해 다른 작업의 자료가 섞이지 않도록 합니다.
다루는 자료의 형식과 원하는 요약 항목, 보고서를 전달할 위치를 정하면 실제 업무에 맞는 요약 서비스를 제작할 수 있습니다. 트램스 AI 제작 문의: https://trams.co.kr/ai-si/contact/#inquiry
참고 자료
- https://lilys.ai/en/
- https://help.lilys.ai/ko/articles/14472317-%EC%8B%9C%EC%9E%91-%EA%B0%80%EC%9D%B4%EB%93%9C
- https://help.lilys.ai/en/articles/11704028-source-references-timestamp
- https://help.lilys.ai/en/articles/14337703-a-guide-to-the-new-project-screen
- https://slashpage.com/lilys-terms/7vgjr4m16zr6j2dwpy86
- https://developers.rtzr.ai/docs/stt-file/
- https://www.upstage.ai/products/document-parse
- https://platform.claude.com/docs/en/build-with-claude/citations
- https://developers.notion.com/guides/data-apis/working-with-page-content
- https://pptr.dev/api/puppeteer.page.pdf
비슷한 AI 서비스를
사업에 적용하고 싶으신가요?
아이디어와 필요한 기능을 알려주시면 제작 범위와 방법을 검토합니다.