레거시 데이터 통합 서비스에서 전환

아티클
07/30/2024

데이터 내보내기 서비스, BYOD(Bring Your Own Database) 및 데이터 레이크로 내보내기는 분석 및 데이터 통합 시나리오를 위해 데이터를 내보내도록 Dynamics 365 앱에 도입된 기능이었습니다. 이러한 서비스를 통해 IT 관리자와 전문가는 데이터를 외부 데이터베이스나 데이터 레이크로 내보내고 데이터 통합 파이프라인을 구축할 수 있었습니다. Dynamics 365와 Power Platform 통합의 일환으로 업데이트를 통해 수년에 걸쳐 이러한 서비스를 개선했지만, 이러한 서로 다른 서비스의 동일한 기능을 Power Apps(make.powerapps.com)에 내장된 더 간단하고 통합된 환경으로 재설계했습니다. 연결로 전환하거나 Microsoft Fabric 업그레이드하면 재구성된 서비스를 통해 Azure Synapse Link AI와 Copilot 및 Fabric에 대한 투자의 이점을 쉽게 얻을 수 있습니다. Microsoft Dataverse

이전 세대 서비스를 사용하는 고객인 경우 이 문서에서는 새로운 환경으로 업그레이드하고, 혁신을 활용하고, 엔드투엔드 비용과 노력을 줄이는 방법에 대한 지침을 제공합니다.

또한 프리뷰 고객 설문 조사를 기반으로 전환에 도움이 되는 높은 수준의 비용 및 이점 추정치를 작성했습니다. 추가 정보 및 비디오에 대한 링크, 포럼에 참여하기 위한 링크, 제품 팀, Microsoft 전문가 및 동료 사용자와 소통할 수 있는 주간 업무 시간 세션도 여기에 제공됩니다. 우리는 지역사회 참여를 통해 이러한 서비스를 향상시키기 위해 노력하고 있습니다.

전환 전

레거시 서비스 BYOD, 데이터 내보내기 서비스 또는 데이터 레이크로 내보내기를 사용하는 고객인 경우 여기에 표시된 것과 유사한 데이터 통합 아키텍처가 있을 수 있습니다. 강조 표시된 상자는 조직이 Dynamics 365 및 Dataverse에서 내보낸 데이터를 활용하기 위해 구축했을 수 있는 데이터 파이프라인을 나타냅니다. Microsoft 및 다른 도구에서 제공하는 다양한 도구를 사용하여 Dynamics 데이터를 자신의 데이터와 복사하고 통합할 수 있습니다. 다이어그램의 데이터 준비 상자에 표시된 대로 여러 저장소에 복사하여 데이터를 변환하고 집계할 수도 있습니다. Power BI 또는 다른 도구를 사용하여 데이터를 시각화하고 실행 가능한 인사이트를 얻을 수 있습니다. 온-프레미스 시스템 및 기타 클라우드로 데이터를 내보내기 위해 빌드된 파이프라인이 있을 수 있습니다.

전환 후

Power Apps에는 두 가지 데이터 통합 패턴이 활성화되어 있습니다.

Azure Synapse Link를 사용하면 BYOD, 데이터 레이크로 내보내기 또는 데이터 내보내기 서비스와 유사한 데이터를 연속으로 내보낼 수 있습니다. 이 옵션은 IT 관리자 및 데이터 통합 전문가에게 활성화됩니다.
Link to Fabric 기능은 복사, 추출, 변환 및 로드(ETL) 및 완전 관리형 SaaS(Software as a Service) 통합을 제공합니다.

이러한 옵션은 상호 보완적입니다. 다음은 데이터 통합 서비스에 대한 자세한 비교입니다.

현재 BYOD 또는 데이터 레이크로 내보내기 기능을 사용하는 금융 및 운영 앱 고객인 경우 Azure Synapse Link 또는 Fabric 링크로 업그레이드하면 간소화된 데이터 통합 아키텍처의 이점을 활용하여 운영 비용을 절감할 수 있습니다.

Power Apps(make.powerapps.com)를 통해 쉽게 구성하고 유지 관리할 수 있습니다. Azure Synapse 및 Fabric과의 기본 통합.
Azure Synapse Link 및 Fabric 링크는 완전 관리형 서비스입니다. 각각에는 최소한의 지속적인 관리 오버헤드가 필요합니다.
새로운 서비스는 이전 서비스와 동일한 데이터 형태를 제공합니다. 기존 다운스트림 통합 파이프라인은 그대로 유지될 수 있습니다.
운영 워크로드에 미치는 영향이 최소화되므로 워크로드를 관리하고 데이터 내보내기를 예약할 필요가 없습니다.

안전한 엔드투엔드 데이터 통합 파이프라인:

Fabric 링크를 사용하면 데이터가 Dataverse 거버넌스 경계를 벗어나지 않는 반면 권한 있는 Fabric 사용자는 Dataverse 내에 있는 데이터에 안전하게 액세스할 수 있습니다.
Azure Synapse Link 서비스를 사용하면 방화벽을 사용하여 스토리지 계정에 대한 액세스를 제한하는 동시에 Dataverse가 Microsoft Entra에 기본 제공되는 보안 기능인 Azure용 관리 ID를 사용하여 데이터를 내보낼 수 있습니다.

CSV 형식의 데이터 내보내기와 함께 데이터 내보내기 서비스 또는 클래식 Azure Synapse Link를 사용하는 Dynamics 365 Customer Engagement 고객인 경우 업계 표준 Delta 또는 Parquet 데이터 형식으로 활성화된 효율적인 보고의 이점을 누릴 수 있습니다.

내장형 Delta Lake 또는 Parquet 변환 옵션을 사용하면 분석 및 운영 보고를 위해 자체 파이프라인을 구축할 필요성이 줄어듭니다.
Delta Lake 또는 Parquet 형식을 사용하면 더 빠르고 응답성이 뛰어난 쿼리 및 보고서를 사용할 수 있으며 모든 크기의 더 큰 데이터 세트로 확장할 수 있습니다.
레이크의 데이터는 원래 크기의 1/3~1/8로 압축되어 파일 크기가 작아져 데이터 쿼리 및 운반 비용이 줄어듭니다.

Fabric에 연결	Azure Synapse Link
복사가 필요 없으며 ETL이 Fabric과 직접 통합되지 않습니다.	사용자 고유의 스토리지 계정으로 데이터를 내보내고 Azure Synapse, Fabric 및 기타 도구와 통합합니다.
데이터는 Dataverse에 유지됩니다. 사용자는 Microsoft Fabric에서 안전하게 액세스할 수 있습니다.	데이터는 귀하의 자체 스토리지에 유지됩니다. 사용자에 대한 액세스를 관리합니다.
기본적으로 모든 테이블이 선택됩니다.	시스템 관리자는 필수 테이블을 선택할 수 있습니다.
추가 Dataverse 스토리지를 사용합니다.	자체 스토리지와 기타 컴퓨팅 및 통합 도구를 사용합니다.

어떤 옵션을 사용해야 하나요?

조직에서 이미 Fabric을 사용하고 있거나 앞으로 몇 달 안에 전환할 계획이라면 Fabric 링크 기능을 사용하는 것이 좋습니다. 현재 서비스에서 업그레이드하는 데 즉각적인 초점을 맞추는 경우 Azure Synapse Link 서비스를 계속 사용할 수 있습니다.

Fabric 링크를 통한 단순화

Power BI를 사용하거나, 데이터 웨어하우스를 사용하거나, 데이터 흐름 및 노트북을 사용하여 데이터를 변환하는 경우 Fabric 기능에 대한 링크는 즉각적인 가치를 제공합니다. Dataverse 데이터에 대한 자체 스토리지 계정 또는 Synapse 서비스가 필요하지 않도록 하여 데이터 통합 아키텍처를 간소화할 수 있습니다. 스토리지 및 컴퓨팅과 같은 Azure 리소스에 대한 비용을 지불하는 대신 Dataverse 스토리지의 증가에 대한 비용을 지불합니다. 실시간에 가까운 데이터 업데이트 및 관리 오버헤드와 같은 컴퓨팅 비용도 Dataverse 스토리지에 반영됩니다. Fabric 링크 옵션은 인사이트를 위해 최적화된 데이터의 거의 실시간 읽기 전용 복제본을 갖는 것과 같습니다.

T-SQL, Apache Spark, Python 및 Fabric의 다른 워크로드를 사용하여 이 복제본을 쿼리합니다. T-SQL을 사용하거나 Azure Data Lake Storage의 데이터를 사용할 수 있는 도구를 사용하여 이 데이터에 액세스할 수도 있습니다.

Dynamics 또는 Power Apps 고객은 구매한 라이선스 수에 따라 Dataverse 스토리지 할당량을 받습니다. Fabric 링크 기능은 이 데이터베이스 할당량을 사용합니다. 데이터 볼륨이 할당량을 초과하는 경우 추가 스토리지 추가 기능을 구입할 수 있습니다.

Databricks 및 SQL Database와 같은 Azure PaaS(Platform as a Service) 서비스를 자체 구독에서 계속 유지할 수 있습니다. 데이터 미러링 및 바로 가기와 같은 최근 발표된 Fabric 기능은 데이터 통합을 더욱 단순화하는 데 도움이 될 수 있습니다.

Fabric 통합 기능을 통해 얻은 단순성을 통해 달성한 비용 절감의 예가 여기에 설명되어 있습니다.

Azure Synapse Link로 업그레이드

Azure Synapse Link로 업그레이드하고 Delta 또는 Parquet 변환을 사용하도록 설정하면 솔루션에서 Dataverse 데이터 준비 파이프라인을 제거할 수 있습니다. Azure Synapse Link 서비스는 동일한 데이터 셰이프를 보다 성능이 뛰어난 Delta 또는 Parquet 형식으로 스토리지 계정으로 내보냅니다. 프로덕션 환경에 대한 중단을 최소화하면서 스토리지 및 Azure Synapse Analytics 쿼리와 같은 기존 도구 및 Azure 서비스를 계속 사용할 수 있습니다.

이점 및 비용 절감 이해

Fabric 링크 및 Azure Synapse Link를 사용하여 달성한 단순성은 엔드투엔드 비용을 절감합니다. 프리뷰 고객 환경을 기반으로 하는 다음 예를 고려하십시오.

예 1: BYOD 또는 데이터 레이크로 내보내기에서 Fabric 링크로 전환

데이터 레이크로 내보내기에서 Fabric 링크로 전환하는 경우를 고려하십시오.

위의 이전 및 이후 다이어그램에 표시된 대로 고객은 Fabric 링크를 사용하여 데이터 레이크로 내보내기 서비스(1)와 스테이징 데이터 저장소(2)를 중단했습니다. Operational Insights(4)의 경우 Power BI에서 직접 OneLake의 데이터를 사용했습니다. 일부 인사이트에는 데이터 병합, 변환 및 집계(3)가 필요합니다. 서로 다른 Azure 서비스를 사용하는 대신 Fabric에 기본 제공되는 동일한 도구를 표준화했습니다.

Dataverse 및 Fabric의 혁신으로 단순화 및 비용 절감이 가능해졌습니다.

Dataverse에는 OneLake 저장소가 내장되어 있습니다. Dynamics 365 및 Power Apps의 운영 데이터는 거의 실시간으로 내장된 레이크 저장소에 복제되고(운영 워크로드에 영향을 주지 않기 위해) 바로가기를 통해 Fabric에 안전하게 연결됩니다. 내보낸 Azure Storage 및 보안 데이터를 가져올 필요가 없습니다. 데이터는 Dataverse 거버넌스 경계를 벗어나지 않으며 Fabric의 권한 있는 사용자는 모든 Fabric 워크로드를 사용하여 데이터에 대해 작업할 수 있습니다.
데이터 레이크로 내보내기 및 데이터 내보내기 서비스는 데이터를 CSV 형식으로 내보냅니다. CSV 파일은 낮은 쿼리 성능과 간헐적인 읽기/쓰기 경합 문제로 인해 직접 사용하기에 적합하지 않습니다. 전환 전 솔루션 Azure Data Factory를 사용하여 원시 데이터를 주기적으로 수집하고 Azure SQL Database 또는 Azure 데이터 웨어하우스로 변환합니다. 이 레이어는 전환 후 솔루션에는 필요하지 않습니다. Dataverse 기본 제공 OneLake 데이터는 Microsoft Fabric의 기본 형식과 동일한 개방형 형식인 Delta 또는 Parquet 형식으로 유지 관리되기 때문입니다. Delta 또는 Parquet 형식은 Fabric의 최적화와 함께 캐싱을 위한 추가 데이터 저장소를 유지 관리하고 쿼리 성능을 향상시키는 동시에 읽기/쓰기 경합을 제거할 필요가 없습니다. 추가 데이터 단계 없이 OneLake의 데이터에 대해 Direct Lake를 사용하여 Power BI 보고서를 만들 수 있습니다.
OneLake에서 이미 사용 가능한 데이터를 사용하여 Operational Insights를 수행할 수 있지만 다른 시스템의 추가 데이터가 있을 수도 있습니다. 이 데이터는 Dataverse 데이터와 결합, 재구성 및 집계되어야 할 수도 있습니다. Fabric은 데이터 흐름, Azure Data Factory 및 Spark와 같은 최고의 도구를 제공하는 통합 환경을 제공합니다. 원하는 도구를 채택하는 독립 실행형 도구를 구성 및 프로비저닝하는 대신 이러한 도구를 사용하십시오. 통합된 청구, 소스 제어 및 보안을 통해 관리 및 거버넌스가 더욱 간편해졌습니다.
보고를 위해 Power BI 서비스를 계속 사용할 수 있지만, Fabric은 Delta 또는 Parquet 형식으로 기본 제공되는 메모리 내 인덱스를 활용하는 Direct Lake 모드 보고를 도입하여 Power BI 가져오기 모드 보고서를 사용할 필요가 없습니다.

이러한 혁신을 통해 앞서 설명한 이점에 더해 전체적인 비용 절감 효과도 얻을 수 있습니다. 여기 표에는 솔루션 전후 비교와 함께 비용 항목이 간략하게 설명되어 있습니다. 이 표를 지침으로 사용하여 예상되는 비용 절감액을 추정할 수 있습니다.

비용 절감 항목	비용 전 - 데이터 레이크로 내보내기	비용 후 - Fabric 링크
설정 및 구성	여러 도구를 사용해야 합니다. - 여러 소프트웨어 라이선스 및 구독 비용을 지불합니다. - 시스템 구성 노력. - 데이터 파이프라인을 구축하고 검증하기 위한 작업. - 지속적인 거버넌스, 관리 및 모니터링. - 사용자 교육.	Power Platform의 더 간단한 구성 환경. Fabric 용량을 구매하고 모든 서비스에 대한 사용료를 지불하세요. 사용한 만큼만 비용을 지불하면 됩니다. 어떤 경우에는 초 단위로 비용이 청구됩니다. Dataverse 데이터에는 ETL 파이프라인이 필요하지 않습니다.
데이터 스테이징(1, 2)	Azure 서비스에 대해 발생하는 비용입니다. - IO 비용을 포함한 Azure 스토리지 비용입니다. - Synapse Analytics(SQL 서버리스 쿼리). - 데이터를 복사하는 Azure Data Factory 작업입니다. - Azure SQL Database와 같은 스테이징 데이터 저장소.	Dataverse 스토리지의 비용 증가 예를 들어 Dynamics 365에서 500GB의 데이터를 동기화하는 경우 Dataverse 저장소는 약 100GB 증가할 수 있습니다(데이터 압축률이 5배에서 8배까지 가정).
운영 비용 - 데이터 준비 (3)	- Azure 스토리지 준비 영역. - 데이터 파이프라인. - Azure SQL 또는 데이터 웨어하우스로 데이터 수집. - 유지 관리 데이터 개발.	지출은 공유 용량으로 소비에 대한 비용을 지불하는 Fabric으로 전환됩니다.
운영 비용 – 보고 (4) - Power BI 데이터 세트. - 보고.	Synapse Analytics(SQL 쿼리). 가져오기 모드 보고서에 대한 Power BI 용량 및 스토리지.	데이터가 압축되면(예: 원래 크기의 1/3에서 1/6로) 보고 및 쿼리 비용이 그에 따라 감소합니다. Direct Lake 보고와 같은 새로운 기능은 Power BI 스토리지 사용량을 줄입니다.

참고

이러한 추정치는 전환 후 지출을 추정할 수 있도록 제공됩니다. 이러한 추정치는 프리뷰 고객의 환경을 기반으로 하지만 사용자 환경에서 발생하는 실제 비용과 데이터 압축은 데이터의 볼륨과 구성에 따라 달라질 수 있습니다.

예제 2: Azure Synapse Link로 업그레이드

Azure Synapse Link로 업그레이드하는 것은 현재 Fabric을 사용하고 있지 않거나 앞으로 몇 달 안에 전환할 계획이 없는 경우 고려할 수 있는 옵션입니다.

이 이전 및 이후 다이어그램에 표시된 대로 고객은 Azure Synapse Link를 사용하여 데이터 레이크로 내보내기 서비스(1)와 스테이징 데이터 저장소(2)를 중단했습니다. 중간 Azure SQL Database와 같이 데이터 스테이징에 사용되는 데이터 저장소는 Dataverse 데이터가 성능이 더 뛰어나고 압축된 데이터 형식인 델타 또는 Parquet 형식으로 저장되므로 사용 중지됩니다. 데이터 병합, 변환 및 집계에 사용되는 다운스트림 파이프라인(3)과 프레젠테이션 도구(4)(예: Power BI)는 변경되지 않은 상태로 유지됩니다.

Azure Synapse Link는 최소한의 변경으로 기존 투자를 확장하려는 고객에게 쉬운 업그레이드 경로를 제공합니다. 여기에서 논의한 바와 같이 Dataverse의 혁신을 통해 데이터 레이크로 내보내기 및 BYOD와 같은 금융 및 운영 앱 서비스에서 쉽게 전환할 수 있습니다.

Azure Synapse Link를 사용하면 Power Apps(make.powerapps.com) 내에서 Azure Storage 및 Synapse 서비스를 쉽게 구성할 수 있습니다. 데이터 레이크로 내보내기에 대한 몇 가지 제한 사항이 제거되었습니다.
1. 통일된 환경을 통해 금융 및 운영, 고객 참여 앱을 포함한 모든 Dynamics 365 앱에서 데이터를 선택할 수 있습니다. 단일 서비스를 유지 관리하여 모든 Dynamics 365 및 Power Apps에서 데이터를 내보낼 수 있습니다.
2. 데이터 레이크로 내보내기에 존재하는 테이블 제한 사항이 사라집니다. 단일 스토리지 계정 내에서 각 Azure Synapse Link 프로필에 대해 최대 1,000개의 테이블을 선택할 수 있습니다. 각각 최대 1,000개의 테이블이 포함된 여러 프로필(내보내기 파이프라인)을 생성할 수 있습니다.
3. Azure Synapse Link는 방화벽 제한 스토리지 계정을 사용하여 데이터를 내보내기 위한 기본 제공 지원을 제공합니다.
4. Azure 리소스를 구성할 필요가 없습니다. Azure Synapse Link는 사용자를 대신하여 Azure 리소스를 프로비전하고 구성합니다.
5. Azure Synapse Link는 데이터 레이크로 내보내기 또는 BYOD와 동일한 형식으로 데이터를 내보내므로 기존 파이프라인을 유지할 수 있습니다.
데이터 레이크로 내보내기 및 데이터 내보내기 서비스는 모두 데이터를 CSV 형식으로 내보냅니다. CSV 파일은 쿼리 성능 저하와 간헐적인 읽기/쓰기 경합 문제로 인해 직접 사용하기에 적합하지 않습니다. 전환 전은 Azure Data Factory를 사용하여 원시 데이터를 주기적으로 수집하고 SQL Azure Database 또는 Azure 데이터 웨어하우스로 변환합니다. Azure Synapse Link는 Delta 또는 Parquet에서 데이터를 내보내므로 '전환 후에는 이 계층이 필요하지 않으므로 읽기/쓰기 경합을 제거하면서 캐싱 및 쿼리 성능 향상을 위해 추가 데이터 저장소를 유지 관리할 필요가 없습니다.
다른 시스템의 추가 데이터를 결합, 재구성 및 집계하기 위해 기존 데이터 파이프라인을 계속 사용합니다.
보고를 위해 Power BI 서비스를 계속 사용합니다. Fabric은 Delta 또는 Parquet 형식으로 기본 제공되는 메모리 내 인덱스를 활용하는 Direct Lake 모드 보고를 도입하여 Power BI 가져오기 모드 보고서를 사용할 필요가 없습니다.

이러한 혁신을 통해 앞서 설명한 이점에 더해 전체적인 비용 절감 효과도 얻을 수 있습니다. 여기 표에는 솔루션 전후 비교와 함께 비용 항목이 간략하게 설명되어 있습니다. 이 표를 지침으로 사용하여 예상 비용 절감액을 추정합니다.

비용 절감 항목	비용 전 - 데이터 레이크로 내보내기	비용 후 - Azure Synapse Link
설정 및 구성	여러 도구를 사용해야 합니다. - 여러 소프트웨어 라이선스 및 구독 비용을 지불합니다. - 시스템 구성 노력. - 데이터 파이프라인을 구축하고 검증하기 위한 작업. - 지속적인 거버넌스, 관리 및 모니터링. - 사용자 교육.	Power Platform의 더 간단한 구성 환경. Dataverse 데이터에는 ETL 파이프라인이 필요하지 않습니다.
데이터 스테이징(1, 2)	Azure 서비스에 대해 발생하는 비용입니다. - IO 비용을 포함한 Azure 스토리지 비용입니다. - Synapse Analytics(SQL 서버리스 쿼리). - 데이터를 복사하는 Azure Data Factory 작업입니다. - Azure SQL Database와 같은 스테이징 데이터 저장소.	Azure Synapse Link를 사용하려면 데이터를 Parquet 형식으로 변환하는 Spark 풀을 제공해야 합니다. 데이터 동기화 빈도와 데이터 변경량에 따라 Spark 풀 비용이 달라질 수 있습니다. 중소 규모의 데이터 변경(월별): - 매시간 새로 고침의 경우 $600에서 $2,000. - 15분 새로 고침의 경우 $1,200에서 $4,100. 중대형 규모의 데이터 변경(월별): - 매시간 새로 고침의 경우 $1,200에서 $2,500. - 15분 새로 고침의 경우 $2,500에서 $8,300.
운영 비용 - 데이터 준비 (3)	- Azure 스토리지 준비 영역. - 데이터 파이프라인. - Azure SQL Database 또는 데이터 웨어하우스로 데이터 수집. - 개발 및 유지 관리 데이터.	그러나 위에 표시된 것과 동일한 비용으로 Parquet 변환으로 인해 Dataverse 데이터를 집계할 필요가 없을 수 있습니다.
운영 비용 - 보고 (4): - Power BI 데이터 세트. - 보고.	Synapse Analytics(SQL 쿼리). Power BI 용량.	데이터가 압축되면(예: 원래 크기의 1/3에서 1/6로) 보고 및 쿼리 비용이 그에 따라 감소합니다.

중요

예시 3: 데이터 웨어하우스에 데이터를 증분적으로 수집

현재 다운스트림 데이터 파이프라인을 채우기 위해 데이터 레이크로 내보내기 기능의 증분 데이터를 사용하고 있는 경우 동일한 파이프라인을 계속 사용할 수 있습니다. 여기에 표시된 것처럼 Azure Synapse Link 서비스는 변경 내용이 데이터 레이크로 내보내기에 피드되는 것과 동일한 형식으로 증분 데이터 변경 내용을 내보낼 수 있습니다.

Azure Synapse Link 서비스는 증분 데이터 변경을 위해 데이터 레이크로 내보내기에 대한 몇 가지 향상된 기능을 제공합니다.

초기 데이터 로드는 변경 폴더 내에 포함됩니다. 이를 통해 동일한 파이프라인에서 초기 로드와 증분 업데이트를 모두 쉽게 사용할 수 있습니다.
테이블을 다시 초기화하는 경우 변경 데이터가 삭제되지 않습니다.
시스템은 시간순으로 변경 사항을 읽는 데 도움이 되는 타임스탬프가 표시된 폴더 구조와 메타데이터를 생성합니다. 변경 데이터는 한번 작성되면 업데이트되지 않습니다. 이 접근 방식은 Azure Data Factory와 같은 빅 데이터 수집 도구를 사용하여 변경 사항을 처리하는 데 더 적합합니다.
Azure Synapse Link를 사용하여 폴더에서 변경 피드를 업데이트할 빈도를 최소 5분까지 구성할 수 있습니다.

Fabric 또는 Azure Synapse Link으로 전환하면 증분 데이터 변경에 따른 비용 변화가 최소화됩니다.

이점 이해 – 보다 실시간 보고

Fabric은 데이터 통합 아키텍처를 단순화할 뿐만 아니라 데이터 복사 또는 복제의 필요성도 줄여줍니다. 업계 표준 Delta 또는 Parquet 형식인 Fabric의 기본 데이터 형식은 Power BI, 데이터 흐름, 노트북 및 기타 워크로드에서 직접 사용할 수 있으므로 캐싱 및 스테이징 영역이 필요하지 않습니다.

Azure Synapse Link로 업그레이드하고 계속해서 데이터를 내보내면 데이터가 Delta 또는 Parquet 형식으로 저장되므로 운영 보고를 위한 자체 데이터 파이프라인의 단계가 줄어들 수 있습니다.

재고 분석이나 월말 재무 분석과 같은 운영 보고서를 새로 고치는 데 걸리는 시간을 고려하십시오. 이러한 보고서에는 Dynamics 365 Finance의 여러 테이블에서 수백만 행의 데이터 집계가 필요할 수 있습니다. 데이터 레이크로 내보내기 서비스를 이용하면 10분 이내에 CSV 데이터를 내보낼 수 있습니다. 더 나은 응답 시간을 제공하기 위해 이 데이터를 Power BI 보고서로 가져와야 할 수 있습니다. Power BI 새로 고침은 하루에 최대 24회(30분마다) 수행할 수 있습니다. 보고서 디자인 방식에 따라 새로 고침을 완료하는 데 몇 분이 걸릴 수 있습니다. 이 접근 방식을 사용하면 사용자는 업데이트 후 60분 이내에 데이터를 볼 수 있습니다.

데이터 레이크로 내보내기로 인한 데이터 비활성

Fabric 링크를 사용하는 원본 데이터는 Delta 또는 Parquet 파일에 내장된 인 메모리 인덱스를 활용하는 Fabric의 DirectQuery 모드 또는 Direct Lake 모드를 활용할 수 있다는 운영 보고서가 있습니다. 이러한 모드에서는 보고서에 항상 Fabric에서 업데이트된 최신 Dataverse 데이터가 표시되므로 Power BI 보고서의 새로 고침을 예약할 필요가 없습니다.

Fabric 링크 후 데이터 비활성

Fabric 링크 서비스는 이 시점을 기준으로 한 시간 내에 Dataverse OneLake의 데이터를 업데이트합니다. Dataverse는 15분마다 데이터 업데이트 작업을 트리거하며 데이터 변경 볼륨에 따라 30분에서 60분 이내에 업데이트된 Parquet 파일을 볼 수 있습니다.

거의 실시간 데이터 통합 시나리오를 위해 데이터 레이크로 내보내기 서비스를 통해 Dynamics 365의 증분 데이터 피드를 사용하는 경우(예 3) Azure Synapse Link로 업그레이드하면 동일한 데이터 파이프라인을 실행할 수 있습니다.

알려진 문제 및 해결 방법

현재 제품팀에서 해결하고 있는 몇 가지 제한 사항이 있습니다. 이러한 제한 사항을 해결할 때까지 제안된 해결 방법을 사용하세요. 예정된 로드맵에 대해 자세히 알아보고 제품 팀과 계속 연락하려면 프리뷰 Viva Engage 그룹에 가입하세요.

알려진 문제	수정 사항 및 해결 방법
한 번에 많은 수의 테이블을 추가할 때 시스템은 데이터의 초기 복사본을 만듭니다. 드물지만, 특히 소규모 환경과 Tier-2 샌드박스에서는 운영 워크로드가 느려지고 초기화 시간이 훨씬 길어질 수 있습니다.	이는 AOS(Application Object Server) 서버(컴퓨팅 리소스) 수가 더 적은 소규모 환경에 영향을 미칠 수 있습니다. Azure Synapse Link Fabric 연결에서 쉼표로 구분된 테이블 목록을 붙여넣어 여러 테이블을 한 번에 추가할 수 있습니다. 시스템은 AOS당 약 2개의 동시 테이블에서 사용 가능한 컴퓨팅 리소스에 따라 초기화 워크로드를 확장하거나 축소합니다. 예를 들어, 환경에 5개의 AOS 서버가 있는 경우 시스템은 최대 10개의 테이블을 동시에 초기화합니다. 금융 및 운영 환경을 다음 중 하나로 업데이트합니다. - PU 63 누적 업데이트 7.0.7198.95 -PU 62 누적 업데이트 7.0.7120.155. 이 업데이트는 Azure Synapse Link 및 Fabric 링크에 추가된 테이블에서 `varBinary` 필드 및 `varBinary` 첨부 파일을 수정하여 운영 워크로드에 미치는 영향을 줄입니다.
테이블을 추가할 때 시스템은 데이터의 초기 복사본을 만듭니다. 경우에 따라, 특히 매우 큰 테이블의 경우 초기화가 더 오래 걸리거나 며칠 동안 중단된 것처럼 보일 수 있습니다.	금융 및 운영 앱 환경을 다음 중 하나로 업데이트합니다. - PU 63 누적 업데이트 7.0.7198.91 - PU 62 누적 업데이트 7.0.7120.152 이 업데이트를 통해 대규모 테이블(행 2억 개 이상)을 더 빠르게 초기화할 수 있습니다. 더 빠른 데이터 동기화를 위해 인덱스를 활성화했습니다. 운영 데이터베이스에 진행 중인 트랜잭션이 있는 경우 인덱스 생성은 트랜잭션이 완료될 때까지 기다려야 합니다. 대기 시간이 길어지면(때때로 휴면 트랜잭션으로 인해) 초기화 프로세스가 지연될 수 있습니다. 이러한 경우 시스템 관리자는 인덱스 생성을 감지하고 강제할 수 있습니다.
Dataverse 환경이 Fabric 용량이 있는 지역과 다른 Azure 지역에 있는 경우 Link to Fabric 기능을 사용할 수 없습니다.	2024년 4월 30일부터 미국과 같은 동일한 지리적 경계 내에 위치한 Fabric 용량에 연결할 수 있습니다. Azure 지역 간의 데이터 전송으로 인해 Fabric에서 네트워킹 요금이 발생할 수 있습니다.
Dataverse 환경이 데이터 레이크 또는 Synapse 작업 영역이 있는 지역과 다른 Azure 지역에 있는 경우 Azure Synapse Link 기능을 사용할 수 없습니다.	2024년 4월 30일부터 미국과 같은 동일한 지리적 경계 내에 위치한 스토리지 계정에 연결할 수 있습니다. 데이터 레이크와 같은 Azure 리소스가 동일한 Azure 지역 내에 있지 않으면 네트워킹 요금이 발생할 수 있습니다.
AOS 인증은 데이터 반출 시나리오로부터 금융 및 운영 앱의 중요한 데이터 필드를 보호하는 방법입니다. 선택한 테이블에 AOS 인증을 통해 보호되는 데이터 열이 포함되어 있는 경우 해당 열은 무시되고 내보낸 데이터에는 해당 열이 포함되지 않습니다. 예를 들어 사용자 지정 테이블 열 TaxLicenseNum에는 예로 설정된 메타데이터 속성 `AOS Authorization`이 있습니다. 이 열은 무시됩니다.	금융 및 운영 환경을 다음 버전 이상으로 업데이트하십시오. - PU 63:7.0.7198.105 - PU 62:7.0.7120.159 이번 업데이트를 통해 AOS 인증 필드가 테이블에 추가되었습니다. - 증분 업데이트에는 이 열이 포함됩니다. - 수정된 레코드에는 이러한 열과 값이 표시됩니다. - 전체 새로 고침에는 이러한 필드와 모든 값이 포함됩니다.
선택한 테이블에 배열 유형의 데이터 열이 포함된 경우 해당 열은 무시되고 내보낸 데이터에는 해당 열이 포함되지 않습니다. 예를 들어, WHSInventTable이라는 사용자 지정 테이블에서 `FilterCode` 및 `FilterGroup` 열은 배열 유형입니다. 이러한 열은 Azure Synapse Link를 사용하여 내보내지지 않습니다.	금융 및 운영 환경을 다음 버전 이상으로 업데이트하십시오. - PU 65 7.0.7367.0 - PU 64:7.0.7279.115 - PU 63:7.0.7198.186 이 업데이트를 적용하면 배열 유형 필드가 테이블에 추가되었습니다. - 증분 업데이트에는 이 열이 포함됩니다. - 수정된 레코드에는 이러한 열과 값이 표시됩니다. - 전체 새로 고침에는 이러한 필드와 모든 값이 포함됩니다.
유효한 타임스탬프 동작을 나타내는 금융 및 운영 앱 테이블의 경우 현재 유효한 데이터 행만 Azure Synapse Link를 사용하여 내보냅니다. 예를 들어, `ExchangeRate` 테이블에는 현재 환율과 이전 환율이 모두 포함되어 있습니다. 현재 유효한 환율만 Azure Synapse Link로 내보내집니다.	재무 및 운영을 업데이트하세요 환경 - 버전 10.0.38(PU62) 플랫폼 업데이트 7.0.7120.179 - 버전 10.0.39(PU63) 플랫폼 업데이트 7.0.7198.143 - 버전 10.0.40(PU64) 플랫폼 업데이트 7.0.7279.58 이번 업데이트를 통해 만료된 데이터 행이 테이블에 추가되었습니다. 이전 행을 포함하려면 전체 새로 고침을 수행해야 합니다.
테이블 상속 및 파생 테이블은 금융 및 운영 앱의 개념입니다. 금융 및 운영 앱에서 파생 테이블을 선택할 때 현재 해당 기본 테이블의 열은 포함되지 않습니다.	이러한 열에 액세스해야 하는 경우 파생 테이블 외에 기본 테이블도 선택해야 합니다. GitHub를 통해 제공되는 FastTrack 솔루션을 사용할 수 있습니다. 이 솔루션은 기본 테이블의 열을 포함하는 뷰를 생성합니다.
Azure Synapse Link를 통해 1,000개 이상의 테이블을 내보내거나 Fabric 링크에 1,000개 이상의 테이블을 추가하세요.	Azure Synapse Link를 사용하는 경우 1,000개 미만의 테이블을 포함하는 프로필을 두 개 이상 만들어 이 문제를 해결합니다. 향후 업데이트에서는 Fabric 연결와 Azure Synapse Link 프로필에서 1,000개 이상의 테이블을 선택할 수 있을 것으로 예상됩니다.
Azure Synapse Link 프로필에 포함된 금융 및 운영 앱 테이블은 Azure Synapse Link의 프로필 가져오기 및 내보내기 기능을 사용하여 다른 환경으로 마이그레이션할 수 없습니다.	이 문제가 해결될 때까지 동일한 테이블을 새 환경에 추가하십시오. 테이블 목록을 한 번에 선택하려면 테이블 관리 옵션 내 검색창에 쉼표로 구분된 테이블 목록을 복사하여 붙여넣으세요.
Azure Synapse Link 또는 Fabric 링크를 사용하면 변경 내용 추적 속성을 사용할 수 있는 테이블을 사용할 수 있습니다. 현재 모든 금융 및 운영 엔터티에 대해 변경 내용 추적을 활성화할 수 없습니다. 이전에 데이터 마이그레이션을 위해 금융 및 운영 부문에서 생성된 엔터티에는 변경 내용 추적 옵션을 사용할 수 없습니다. 일부 엔터티에서는 선택한 엔터티가 유효성 검사 규칙을 통과하지 못했습니다라는 오류 메시지와 함께 변경 내용 추적 활성화가 실패하거나 변경 내용 추적 확인란이 일부 엔터티에 대해 비활성화되어 있습니다. 엔터티 유효성 검사 규칙 및 이를 수정하는 방법에 대한 자세한 내용은 데이터 엔터티에 대한 행 버전 변경 내용 추적 활성화를 참고하세요. 단계를 완료하려면 개발자 지원이 필요할 수 있습니다.	변경 내용 추적 제한으로 인해 선택한 엔터티를 사용할 수 없는 경우 해당 엔터티의 데이터를 구성하는 테이블을 선택합니다. FastTrack 팀에서 제공하는 EntityUtil 솔루션을 사용하면 테이블을 사용하여 엔터티 모양을 만들 수 있습니다.
Dataverse에서 데이터베이스 복원 작업을 수행하는 경우 Azure Synapse Link에서 활성화된 금융 및 운영 엔터티가 제거됩니다.	엔터티를 다시 활성화하려면 선택한 모든 엔터티에 대해 해당 Virtual Tables를 다시 활성화하고, 변경 내용 추적을 다시 활성화하고 Azure Synapse Link에서 테이블을 다시 선택하세요. 테이블 목록을 한 번에 선택하려면 테이블 관리 옵션 내 검색창에 쉼표로 구분된 테이블 목록을 복사하여 붙여넣을 수 있습니다.
Azure Synapse Link 프로필에 추가된 금융 및 운영 앱 테이블은 Dataverse에서 백업이 복원되면 제거될 수 있습니다.	데이터베이스 복원 작업 후에는 금융 및 운영 테이블을 프로필에 추가해야 합니다. 데이터베이스 복원 작업 후 테이블을 다시 활성화하는 방법에 대한 자세한 내용은 금융 및 운영 테이블의 알려진 제한 사항을 참조하세요.

자주 묻는 질문

BYOD와 데이터 레이크로 내보내기 서비스가 우리에게 큰 도움이 되고 있습니다. 왜 이 서비스를 중단하셨나요?

Dynamics 365 플랫폼 통합 프로젝트의 일환으로, Dynamics 365 애플리케이션에서 "데이터를 내보내는" 여러 서비스를 Synapse 연결라는 브랜드 이름으로 서비스로 통합했습니다 Dataverse. 저희는 배운 내용을 활용하여 Synapse 연결의 기존 서비스의 많은 단점을 해결하면서도 동일한 데이터 형식을 유지했습니다. 이를 통해 최소한의 중단으로 투자를 업그레이드할 수 있습니다. Fabric 연결 서비스는 데이터 파이프라인에 투자하지 않고도 Fabric의 혁신을 활용할 수 있는 새로운 복사 및 ETL 없는 솔루션입니다. 이는 Fabric의 승인된 사용자를 위한 데이터의 "읽기 복제본"입니다.

앞으로 Synapse 연결를 폐기할 예정인가요?

플랫폼 통합 프로젝트의 일환으로 Dynamics 365 애플리케이션에서 "데이터를 내보내는" 여러 서비스를 Synapse 연결라는 브랜드 이름으로 서비스로 통합했습니다 Dataverse. 또한 데이터 파이프라인에 투자하지 않고도 Fabric의 혁신을 활용할 수 있는 복사 및 ETL 없는 솔루션인 Fabric 연결도 출시했습니다. 이는 Fabric의 승인된 사용자를 위한 데이터의 "읽기 복제본"입니다.

많은 고객이 Fabric을 도입하게 되어 기쁘지만, 일부 고객은 계속해서 데이터를 내보내고 자체 통합 파이프라인을 구축하기를 원한다는 사실도 알고 있습니다. 우리는 그들이 장래에도 데이터를 내보낼 수 있도록 하고 싶습니다.

데이터 레이크로 내보내기 서비스는 2024년 11월 1일 이후에 중단되나요?

데이터 레이크로 내보내기 서비스는 서비스 중단 날짜 이후에도 연휴 기간 동안 계속 운영됩니다. 그러나 우리의 지원은 제한적일 것입니다. 지금 전환 과정을 시작하면 위험을 줄일 수 있습니다. 고객이 Synapse 연결 및 Fabric 연결 서비스로 전환함에 따라 2025년 3월 25일부터 데이터 레이크로 내보내기 서비스를 중단할 계획입니다. 여러분은 커뮤니티에 가입하여 주간 업무시간을 통해 피드백을 제공할 수 있습니다 aka.ms/SynapseLinkforDynamics.

전환이 지원 중단 날짜를 넘어갈 수도 있는데, 연장을 위한 절차가 있나요?

데이터 레이크로 내보내기 서비스는 서비스 중단 날짜 이후에도 연휴 기간 동안 계속 운영됩니다. 그러나 우리의 지원은 제한적일 것입니다. 지금 전환 과정을 시작하면 위험을 줄일 수 있습니다. 전환을 완료하는 데 더 많은 시간이 필요할 수 있는 고객을 돕기 위해, 우리는 앞으로 몇 주 안에 제품 내에서 증거 기반 자체 업그레이드 옵션을 도입할 계획입니다.

참조 항목

Azure Synapse Link for Dataverse란?

Dataverse 환경을 Microsoft Fabric에 연결하고 심층적인 인사이트 확보

다음을 통해 공유