다음을 통해 공유

텍스트 요약 사용(미리 보기)

  • 아티클

이 문서에서는 Azure AI Video Indexer에서 텍스트 요약을 사용하는 방법을 보여줍니다. 이 예제에서는 Azure OpenAI 모델 배포를 사용합니다.

참고 항목

이 기능은 표준 계정에서만 작동합니다. 표준 계정을 만듭니다.

필수 조건

  • 텍스트 요약 개요를 검토합니다.

클라우드

  • Azure OpenAI 계정에 연결된 Azure AI Video Indexer 계정입니다.

  • 원하는 Azure 구독의 Azure OpenAI에 대한 액세스 권한. 현재 이 서비스에 대한 액세스 권한은 애플리케이션에서만 부여됩니다. 양식을 작성하여 Azure OpenAI 서비스에 대한 액세스를 신청할 수 있습니다.

  • Azure OpenAI gpt-35-turbo 또는 gpt-4 배포. 키 프레임 기반 요약을 활용하려면 시각적 입력을 허용하는 Azure Open AI 모델을 선택해야 합니다. 자세한 내용은 Azure OpenAI 서비스 모델을 참조하세요.

  • 직접 공격(탈옥) 필터에 대한 프롬프트 쉴드를 배포에 추가해야 합니다. 자세한 내용은 Azure OpenAI Service에서 콘텐츠 필터(미리 보기)를 사용합니다.

  • "폭력", "증오", "성적", "자해"와 같은 범주에 대한 유해한 콘텐츠 필터를 구성하는 것이 좋습니다. 이러한 필터는 필수는 아니지만 적어도 중간 수준의 유해성 콘텐츠를 필터링하려면 "보통" 또는 "낮음"으로 설정해야 합니다. 이 설정은 유해성 등급이 중간 이상인 콘텐츠가 차단되도록 합니다. 안전성 향상을 위해 더 엄격한 설정을 선택할 수 있습니다. 구성되면 콘텐츠 필터 설정을 저장하세요.

  • Azure AI Video Indexer 라이브러리에 업로드된 비디오입니다.

참고 항목

Azure AI Video Indexer는 미세 조정된 모델에 연결할 수 없습니다.

Edge

Arc에서 사용하도록 설정된 Azure AI Video Indexer를 사용하면 에지 디바이스에서 Azure AI Video Indexer를 사용할 수 있습니다. 다음은 이 사용 사례에 대한 기술 요구 사항입니다.

  • 버전 번호 1.1.23 이상의 Arc에서 사용할 수 있는 Video Indexer입니다.
  • 하드웨어 요구 사항: GPU 또는 Intel CPU. CPU에서 실행하는 것은 매우 느리고 권장되지 않을 수 있습니다. Nvidia V100 이상을 사용하는 것이 좋습니다. GPU 노드가 여러 개 있는 경우 노드 선택기를 추가하여 원하는 노드를 선택할 수 있습니다.
  • 요약의 일부로 키 프레임을 사용하려면 Nvidia A100 이상이 필요합니다.
  • Edge의 텍스트 비디오 요약은 Phi3.5 모델만 사용합니다. 하드웨어에 대한 자세한 내용은 Phi 3.5 공식 릴리스 정보를 참조하세요.

브라우저에서 웹 페이지 열기

필요한 웹 페이지가 이미 열려 있는 경우 이러한 지침을 따르는 것이 더 쉽습니다. 다음 매개 변수를 복사하여 즐겨찾는 텍스트 편집기로 붙여넣습니다. 시작하는 데 사용할 목록은 다음과 같습니다.

  • VI 계정 ID:
  • 비디오 파일 ID:
  • 배포 이름:
  • 액세스 토큰:
  1. 한 탭 또는 창에서 Azure Portal을 열고 로그인합니다.
    1. 계정 ID에 대한 Azure AI Video Indexer 계정 페이지로 이동합니다.
    2. Azure OpenAI 계정 페이지로 이동합니다.
      1. 메뉴에서 모델 배포를 선택한 다음, 배포 관리를 선택합니다. Azure OpenAI Studio가 열립니다. 사용하려는 배포 이름을 복사합니다.
  2. 다른 탭 또는 창에서 Azure AI Video Indexer 웹 포털을 열고 로그인합니다.
    1. 라이브러리 페이지로 이동하여 비디오를 선택한 다음 비디오 파일 ID에 대해 마우스 오른쪽 단추로 클릭합니다.
  3. 다른 탭 또는 창에서 Azure AI Video Indexer API를 열고 로그인합니다.

키 프레임을 사용하거나 사용하지 않고 텍스트 요약 생성

Azure AI Video Indexer 웹 포털을 사용하여 텍스트를 요약할 수 있습니다.

  1. 웹 포털이 아직 열려 있지 않은 경우 Azure AI Video Indexer 웹 포털을 엽니다.
  2. 파일을 업로드하고 인덱싱할 때까지 기다립니다.
  3. 비디오를 선택하여 미디어 페이지로 이동합니다.
  4. 키 프레임을 사용하여 요약을 생성하려면 시각적 키 프레임 인사이트 포함을 선택하여 더 나은 품질 요약 확인란을 선택합니다.
  5. 요약 생성을 선택합니다. 텍스트 요약이 생성됩니다.

참고 항목

요약 생성 단추가 표시되지 않으면 평가판 계정을 사용할 수 있습니다. 이 기능을 사용할 표준 계정을 만듭니다.

요약 사용자 지정

요약이 생성되면 요약 스타일을 사용자 지정하거나 모델 배포를 변경하여 수정할 수 있습니다.

요약 스타일 사용자 지정

요약 사용자 지정 아이콘을 선택하여 요약을 사용자 지정할 수도 있습니다 . 짧음, **보통 또는 긴 요약 길이 중에서 선택할 수 있으며 중립, 캐주얼 또는 공식을 요약 스타일로 선택할 수 있습니다. 선택한 후 [생성]을 다시 선택합니다.

모델 배포 변경

  1. 요약 사용자 지정 아이콘을 선택합니다.
  2. 모델 배포 드롭다운 목록에서 사용하려는 모델 배포를 선택합니다.
  3. 다시 생성을 선택합니다.

참고 항목

모델 배포는 모델과 필터의 조합입니다. 또한 텍스트 요약을 사용자 지정할 때마다 API PUT 요청을 나타냅니다.

문제 해결

특정 솔루션을 찾기 전에 문서의 필수 구성 요소 섹션에서 리소스 를 만들어야 합니다 .

요약 생성이 표시되지 않음

Azure OpenAI 계정을 Azure AI Video Indexer 계정에 올바르게 연결하지 않았을 수 있습니다.

요약을 생성할 수 없습니다.

  • 유해한 콘텐츠가 표시되지 않도록 배포에 콘텐츠 필터를 추가해야 합니다. Azure OpenAI 스튜디오로 돌아가서 배포에 필터를 추가합니다.
  • 민감하거나 유해한 콘텐츠가 있는 콘텐츠에 대한 허용 콘텐츠 필터를 만들었을 수 있습니다. 콘텐츠 필터는 보통 이상이어야 합니다. 콘텐츠 필터를 중간 및 유해한 콘텐츠로 설정하면 비디오에 남아 있으면 필터가 트리거됩니다. 이 경우 솔루션이 없습니다.
  • 기록을 요청하지 않았거나 인덱싱 프로세스 중에 생성된 정보가 충분하지 않을 수 있습니다.
  • 고급 사전 설정을 사용할 수 있습니다.
  • 비디오에 변환을 만들기에 충분한 오디오가 없을 수 있습니다.

모델 배포 또는 배포를 사용할 수 없음

  • 배포를 만들지 않았을 수 있습니다.
  • 누군가가 배포된 모델을 변경하거나 삭제했을 수 있습니다.

제한

VI로 전송되는 요청이 너무 많을 수 있습니다. 몇 분 정도 기다린 후 다시 시도하세요.

"필터를 찾을 수 없음" 오류가 표시됩니다.

필터를 찾을 수 없는 오류가 발생하면 누락된 내용을 설명하는 자세한 오류가 표시됩니다. 오류는 다음과 비슷하지만 다른 누락된 항목에 대한 세부 정보가 있을 수 있습니다.

ErrorType":"SUMMARY_FILTERS_NOT_FOUND","Message":"Couldn't generate a summary because the model needs to be set with the right content filters to avoid showing harmful content. Input filter 'Jailbreak' must be enabled with action set to 'Annotate and block'. Trace id: '00000000-0000-0000-0000-000000000000'.

참고 항목

탈옥 필터는 2024년 11월 1일부터 키 프레임 기반 요약 또는 일반 요약을 사용하는 경우에만 필요합니다.

탈옥 문제를 해결하려면 다음을 수행합니다.

  1. Azure Open AI 스튜디오로 이동을 선택합니다.
  2. 배포를 선택합니다.
  3. 작업 중인 배포를 선택합니다.
  4. 편집을 선택합니다.
  5. 각 범주에 대해 최소 중간 수준을 갖도록 필터를 구성합니다.
  6. 탈옥 공격에 프롬프트 방패를 적용 합니다.
  7. 필터 만들기를 선택합니다.

기타 고려 사항

동일한 지역에 Azure AI Video Indexer 및 Azure OpenAI 계정을 만드는 것이 좋습니다. 그렇지 않으면 성능 문제가 발생할 수 있습니다.