Chuyển đổi từ các dịch vụ tích hợp dữ liệu cũ
Dịch vụ Xuất dữ liệu, mang cơ sở dữ liệu của riêng bạn (BYOD) và Xuất sang kho dữ liệu là các tính năng được giới thiệu trong ứng dụng Dynamics 365 để xuất dữ liệu cho các tình huống phân tích và tích hợp dữ liệu. Các dịch vụ này cho phép quản trị viên và chuyên gia CNTT xuất dữ liệu vào cơ sở dữ liệu bên ngoài hoặc hồ dữ liệu và xây dựng đường ống tích hợp dữ liệu. Trong khi chúng tôi cải thiện các dịch vụ này qua nhiều năm thông qua các bản cập nhật như một phần của quá trình hợp nhất Dynamics 365 với nền tảng Power, chúng tôi đã thiết kế lại các khả năng tương tự của các dịch vụ riêng biệt này thành những trải nghiệm thống nhất, đơn giản hơn được tích hợp vào Power Apps (make.powerapps.com). Với quá trình chuyển đổi sang Microsoft Fabric liên kết hoặc nâng cấp lên Azure Synapse Link, các dịch vụ được thiết kế lại sẽ cung cấp cho bạn một bước đệm dễ dàng để hưởng lợi từ các khoản đầu tư AI và Copilot vào Microsoft Dataverse và Fabric.
Nếu bạn là khách hàng sử dụng bất kỳ dịch vụ thế hệ trước nào, bài viết này sẽ hướng dẫn bạn cách nâng cấp lên trải nghiệm mới, hưởng lợi từ những cải tiến cũng như giảm chi phí và công sức đầu cuối.
Dựa trên các cuộc khảo sát khách hàng bản xem trước, chúng tôi cũng đã biên soạn một ước tính chi phí và lợi ích ở mức cao để giúp bạn chuyển đổi. Các liên kết tới nhiều thông tin và video hơn, liên kết tham gia diễn đàn và các buổi họp hàng tuần để tương tác với nhóm sản phẩm, các chuyên gia của Microsoft và những người dùng khác cũng được cung cấp tại đây. Chúng tôi nỗ lực nâng cao các dịch vụ này thông qua sự tham gia của cộng đồng.
Trước khi chuyển đổi
Nếu bạn là khách hàng sử dụng các dịch vụ cũ BYOD, dịch vụ Xuất dữ liệu hoặc Xuất sang kho dữ liệu, bạn có thể có kiến trúc tích hợp dữ liệu tương tự như kiến trúc được hiển thị ở đây. Hộp được tô sáng cho biết các đường ống dữ liệu mà tổ chức của bạn có thể đã xây dựng để tận dụng dữ liệu được xuất từ Dynamics 365 và Dataverse. Bạn có thể sử dụng một số công cụ từ Microsoft cũng như các công cụ khác để sao chép và tích hợp dữ liệu Dynamics với dữ liệu của riêng bạn. Bạn cũng có thể chuyển đổi và tổng hợp dữ liệu bằng cách sao chép vào nhiều kho lưu trữ – được hiển thị trong hộp chuẩn bị dữ liệu của sơ đồ. Bạn có thể sử dụng Power BI hoặc một công cụ khác để trực quan hóa dữ liệu và tạo ra những thông tin chi tiết có thể hành động được. Bạn có thể xây dựng các đường ống để xuất dữ liệu sang hệ thống tại chỗ và các đám mây khác.
Sau khi chuyển đổi
Có hai mẫu tích hợp dữ liệu được kích hoạt trong Power Apps:
- Azure Synapse Link cho phép xuất dữ liệu liên tục tương tự như dịch vụ BYOD, Xuất sang kho dữ liệu hoặc Xuất dữ liệu. Tùy chọn này được bật cho quản trị viên CNTT và chuyên gia tích hợp dữ liệu.
- Tính năng liên kết trong Fabric cung cấp khả năng tích hợp phần mềm dưới dạng dịch vụ (SaaS) được quản lý hoàn toàn, không cần sao chép, không cần trích xuất, chuyển đổi và tải (ETL).
Các lựa chọn này bổ sung cho nhau. Sau đây là so sánh chi tiết về các dịch vụ tích hợp dữ liệu.
Nếu bạn là khách hàng ứng dụng tài chính và hoạt động hiện đang sử dụng tính năng BYOD hoặc Xuất sang kho dữ liệu, bằng cách nâng cấp lên Azure Synapse Link hoặc Fabric liên kết, bạn có thể hưởng lợi từ kiến trúc tích hợp dữ liệu đơn giản hóa giúp giảm chi phí vận hành:
- Dễ dàng cấu hình và bảo trì thông qua Power Apps (make.powerapps.com). Tích hợp sẵn với Azure Synapse và Fabric.
- Azure Synapse Link và Fabric liên kết là các dịch vụ được quản lý hoàn toàn. Mỗi phương pháp đều đòi hỏi chi phí quản lý liên tục tối thiểu.
- Các dịch vụ mới cung cấp cùng dạng dữ liệu như các dịch vụ trước đó. Các đường ống tích hợp hạ nguồn hiện tại của bạn có thể vẫn giữ nguyên.
- Tác động tối thiểu đến khối lượng công việc vận hành, bạn không cần phải quản lý khối lượng công việc và lên lịch xuất dữ liệu.
Đường ống tích hợp dữ liệu an toàn, toàn diện:
- Với Fabric liên kết, dữ liệu của bạn sẽ không vượt ra khỏi ranh giới quản lý trong khi người dùng Fabric được ủy quyền có thể truy cập an toàn vào dữ liệu nằm trong ranh giới quản lý đó. Dataverse Dataverse
- Azure Synapse Link dịch vụ cho phép bạn hạn chế quyền truy cập vào tài khoản lưu trữ của mình bằng tường lửa trong khi cho phép Dataverse xuất dữ liệu với danh tính được quản lý cho Azure, một tính năng bảo mật được tích hợp sẵn Microsoft Entra.
Nếu bạn là khách hàng tương tác với khách hàng Dynamics 365 sử dụng dịch vụ Xuất dữ liệu hoặc phiên bản cổ điển Azure Synapse Link với dữ liệu xuất ở định dạng CSV, bạn có thể hưởng lợi từ báo cáo hiệu quả được hỗ trợ với định dạng dữ liệu Delta hoặc Parquet theo tiêu chuẩn công nghiệp:
- Tùy chọn chuyển đổi Delta Lake hoặc Parquet tích hợp giúp giảm nhu cầu xây dựng đường ống riêng để phân tích và báo cáo hoạt động.
- Định dạng Delta Lake hoặc Parquet cho phép truy vấn và báo cáo nhanh hơn, phản hồi tốt hơn và mở rộng sang các tập dữ liệu lớn hơn ở mọi quy mô.
- Dữ liệu trong lake được nén xuống còn 1/3 đến 1/8 kích thước ban đầu, tạo ra các tệp nhỏ hơn giúp giảm chi phí truy vấn dữ liệu và lưu trữ.
Liên kết đến Vải | Azure Synapse Link |
---|---|
Không sao chép, không tích hợp ETL trực tiếp với Fabric. | Xuất dữ liệu vào tài khoản lưu trữ của riêng bạn và tích hợp với Azure Synapse, Fabric và các công cụ khác. |
Dữ liệu được lưu trong Dataverse. Người dùng có quyền truy cập an toàn vào Microsoft Fabric. | Dữ liệu được lưu trữ trong bộ nhớ của bạn. Bạn quản lý quyền truy cập của người dùng. |
Tất cả các bảng được chọn theo mặc định. | Người quản trị hệ thống có thể chọn các bảng cần thiết. |
Tiêu thụ thêm dung lượng lưu trữ. Dataverse | Tiêu tốn dung lượng lưu trữ của riêng bạn và các công cụ tính toán và tích hợp khác. |
Tôi nên sử dụng tùy chọn nào?
Nếu tổ chức của bạn đang sử dụng Fabric hoặc có kế hoạch chuyển đổi trong những tháng tới, chúng tôi khuyên bạn nên sử dụng tính năng Fabric liên kết. Bạn có thể tiếp tục sử dụng dịch vụ nếu mục tiêu trước mắt của bạn là nâng cấp từ dịch vụ hiện tại. Azure Synapse Link
Đơn giản hóa với Fabric liên kết
Nếu bạn đang sử dụng dữ liệu bằng Power BI, sử dụng kho dữ liệu hoặc sử dụng luồng dữ liệu và sổ ghi chép để chuyển đổi dữ liệu, tính năng liên kết sang Fabric sẽ mang lại giá trị ngay lập tức. Bạn có thể đơn giản hóa kiến trúc tích hợp dữ liệu của mình bằng cách loại bỏ nhu cầu phải có tài khoản lưu trữ riêng hoặc dịch vụ Synapse cho dữ liệu. Dataverse Thay vì trả tiền cho các tài nguyên Azure như lưu trữ và tính toán, bạn sẽ trả tiền cho việc tăng thêm dung lượng lưu trữ. Dataverse Các chi phí tính toán như cập nhật dữ liệu gần thời gian thực và chi phí quản lý cũng được tính vào Dataverse lưu trữ. Tùy chọn Fabric liên kết giống như có một bản sao chỉ đọc gần như theo thời gian thực của dữ liệu được tối ưu hóa để có thông tin chi tiết.
Truy vấn bản sao này bằng T-SQL, Apache Spark, Python cũng như các khối lượng công việc khác trong Fabric. Bạn cũng có thể truy cập dữ liệu này bằng bất kỳ công cụ nào có thể sử dụng T-SQL hoặc có thể sử dụng dữ liệu từ đó Azure Data Lake Storage.
Với tư cách là khách hàng của Dynamics, bạn sẽ nhận được hạn ngạch lưu trữ dựa trên số lượng giấy phép bạn đã mua. Power Apps Dataverse Tính năng Fabric liên kết sử dụng hạn ngạch cơ sở dữ liệu này. Bạn có thể mua thêm dung lượng lưu trữ nếu dung lượng dữ liệu vượt quá hạn mức.
Bạn có thể tiếp tục duy trì các dịch vụ nền tảng Azure dưới dạng dịch vụ (PaaS), như Databricks và SQL Database, trong gói đăng ký của riêng bạn. Các tính năng Fabric mới được công bố gần đây như sao chép dữ liệu và phím tắt có thể giúp bạn đơn giản hóa quá trình tích hợp dữ liệu.
Các ví dụ về việc giảm chi phí đạt được nhờ tính đơn giản có được từ tính năng tích hợp Fabric được mô tả tại đây.
Nâng cấp lên Azure Synapse Link
Bằng cách nâng cấp lên Azure Synapse Link và bật chuyển đổi Delta hoặc Parquet, bạn có thể loại bỏ Dataverse các quy trình chuẩn bị dữ liệu trong giải pháp của mình. Azure Synapse Link dịch vụ xuất cùng một dạng dữ liệu vào tài khoản lưu trữ của bạn theo định dạng Delta hoặc Parquet hiệu suất cao hơn. Bạn có thể tiếp tục sử dụng các công cụ và dịch vụ Azure hiện có như lưu trữ và truy vấn với sự gián đoạn tối thiểu đối với môi trường sản xuất của bạn. Azure Synapse Analytics
Hiểu được lợi ích và giảm chi phí
Sự đơn giản đạt được với Fabric liên kết và Azure Synapse Link giúp giảm chi phí đầu cuối. Hãy xem xét những ví dụ sau đây dựa trên trải nghiệm của khách hàng bản xem trước.
Ví dụ 1: Chuyển đổi từ BYOD hoặc Xuất sang kho dữ liệu sang Fabric liên kết
Hãy xem xét trường hợp bạn chuyển đổi từ Xuất sang kho dữ liệu sang Fabric liên kết.
Như đã chỉ ra trong sơ đồ trước và sau ở trên, khách hàng đã ngừng dịch vụ Xuất sang kho dữ liệu (1) cũng như kho dữ liệu dàn dựng (2) với Fabric liên kết. Đối với thông tin chi tiết về hoạt động, (4), họ đã sử dụng dữ liệu trong OneLake trực tiếp trong Power BI. Một số thông tin chi tiết yêu cầu hợp nhất, chuyển đổi và tổng hợp dữ liệu (3). Thay vì sử dụng các dịch vụ Azure riêng biệt, họ đã chuẩn hóa trên cùng một công cụ được tích hợp trong Fabric.
Những cải tiến trong Dataverse và Fabric cho phép đơn giản hóa và giảm chi phí:
- Dataverse có tích hợp sẵn cửa hàng OneLake. Dữ liệu hoạt động từ Dynamics 365 và Power Apps được sao chép vào kho lưu trữ tích hợp gần thời gian thực (để tránh ảnh hưởng đến khối lượng công việc hoạt động) và được liên kết an toàn với Fabric thông qua các phím tắt. Không cần phải mang theo bộ lưu trữ Azure và dữ liệu an toàn được xuất ra. Dữ liệu của bạn không rời khỏi ranh giới quản lý và người dùng được ủy quyền trong Fabric có thể làm việc với dữ liệu bằng tất cả khối lượng công việc của Fabric. Dataverse
- Dịch vụ Xuất sang kho dữ liệu và Xuất dữ liệu xuất dữ liệu theo định dạng CSV. Tệp CSV không phù hợp để sử dụng trực tiếp do hiệu suất truy vấn kém cũng như các vấn đề tranh chấp đọc/ghi thỉnh thoảng xảy ra. Giải pháp trước khi chuyển đổi sử dụng Azure Data Factory để định kỳ thu thập và chuyển đổi dữ liệu thô thành Cơ sở dữ liệu SQL Azure hoặc kho dữ liệu Azure. Tầng này không cần thiết trong giải pháp sau khi chuyển đổi vì dữ liệu OneLake tích hợp được duy trì ở định dạng Delta hoặc Parquet – cùng định dạng mở gốc của Dataverse . Microsoft Fabric Định dạng Delta hoặc Parquet, cùng với các tối ưu hóa trong Fabric giúp loại bỏ nhu cầu duy trì kho dữ liệu bổ sung để lưu trữ đệm và cải thiện hiệu suất truy vấn đồng thời loại bỏ tranh chấp đọc/ghi. Bạn có thể tạo Power BI báo cáo bằng Direct Lake trên dữ liệu trong OneLake mà không cần bất kỳ giai đoạn dữ liệu bổ sung nào.
- Mặc dù thông tin chi tiết về hoạt động có thể được thực hiện bằng cách sử dụng dữ liệu có sẵn trong OneLake, bạn vẫn có thể có thêm dữ liệu từ các hệ thống khác. Dữ liệu này có thể cần được kết hợp, định hình lại và tổng hợp với dữ liệu. Dataverse Fabric cung cấp một môi trường tích hợp, cung cấp các công cụ tốt nhất như luồng dữ liệu, Azure Data Factory và Spark. Sử dụng các công cụ này thay vì cấu hình và cung cấp các công cụ độc lập, nơi bạn sử dụng các công cụ theo lựa chọn của mình. Thanh toán tích hợp, kiểm soát nguồn và bảo mật cho phép quản lý và điều hành đơn giản hơn.
- Trong khi bạn có thể tiếp tục sử dụng dịch vụ Power BI cho mục đích báo cáo, Fabric giới thiệu chế độ báo cáo Direct Lake, tận dụng các chỉ mục trong bộ nhớ được tích hợp vào định dạng Delta hoặc Parquet, do đó loại bỏ nhu cầu sử dụng Power BI báo cáo chế độ nhập.
Những cải tiến này mang lại khả năng tiết kiệm chi phí toàn diện bên cạnh những lợi ích đã thảo luận trước đó. Bảng ở đây phác thảo các mục chi phí cùng với sự so sánh các giải pháp trước và sau. Bạn có thể sử dụng bảng này làm hướng dẫn để ước tính chi phí tiết kiệm dự kiến.
Mục tiết kiệm chi phí | Trước chi phí - Xuất sang kho dữ liệu | Sau khi tính giá thành - Vải liên kết |
---|---|---|
Thiết lập và cấu hình | Cần sử dụng nhiều công cụ. - Thanh toán cho nhiều giấy phép phần mềm và đăng ký. - Nỗ lực cấu hình hệ thống. - Nỗ lực xây dựng và xác thực đường ống dữ liệu. - Tiếp tục quản lý, điều hành và giám sát. - Đào tạo người sử dụng. |
Trải nghiệm cấu hình đơn giản hơn Power Platform. Mua dung lượng Fabric và thanh toán để sử dụng tất cả các dịch vụ. Bạn chỉ trả tiền cho những gì bạn sử dụng. Trong một số trường hợp, bạn sẽ được tính tiền theo giây. Không cần đường ống ETL cho dữ liệu. Dataverse |
Phân loại dữ liệu (1, 2) | Chi phí phát sinh cho các dịch vụ Azure. - Chi phí lưu trữ Azure bao gồm chi phí IO. - Synapse Analytics (truy vấn không cần máy chủ SQL). - Công việc Azure Data Factory để sao chép dữ liệu. - Lưu trữ dữ liệu dàn dựng, chẳng hạn như Cơ sở dữ liệu Azure SQL. |
Tăng chi phí lưu trữ Dataverse Ví dụ: nếu bạn đồng bộ 500 GB dữ liệu từ Dynamics 365, Dataverse dung lượng lưu trữ có thể tăng thêm khoảng 100 GB (giả sử dữ liệu được nén từ năm đến tám lần). |
Chi phí hoạt động - chuẩn bị dữ liệu (3) | - Khu vực lưu trữ Azure. - Đường ống dữ liệu. - Nhập dữ liệu vào Azure SQL hoặc kho dữ liệu. - Phát triển dữ liệu bảo trì. |
Việc chi tiêu chuyển sang Fabric, nơi bạn trả tiền cho mức tiêu thụ theo dung lượng chia sẻ. |
Chi phí hoạt động – báo cáo (4) - Power BI bộ dữ liệu. - Báo cáo. |
Phân tích Synapse (truy vấn SQL). Power BI dung lượng và lưu trữ cho báo cáo chế độ nhập khẩu. |
Khi dữ liệu của bạn được nén (ví dụ: 1/3 đến 1/6 kích thước ban đầu), chi phí báo cáo và truy vấn của bạn cũng giảm theo. Các tính năng mới, như báo cáo Direct Lake, giúp giảm mức tiêu thụ dung lượng lưu trữ. Power BI |
Lưu ý
Những ước tính này được cung cấp để có thể ước tính chi tiêu sau khi chuyển đổi. Mặc dù những ước tính này dựa trên kinh nghiệm từ khách hàng bản xem trước, chi phí thực tế phát sinh trong môi trường của bạn cũng như việc nén dữ liệu có thể thay đổi tùy thuộc vào khối lượng và thành phần dữ liệu.
Ví dụ 2: Nâng cấp lên Azure Synapse Link
Nâng cấp lên Azure Synapse Link là một lựa chọn đáng cân nhắc nếu hiện tại bạn không sử dụng Fabric – hoặc không có kế hoạch chuyển đổi trong những tháng tới.
Như đã chỉ ra trong sơ đồ trước và sau tại đây, khách hàng đã ngừng dịch vụ Xuất sang kho dữ liệu (1) cũng như kho dữ liệu dàn dựng (2) bằng Azure Synapse Link. Các kho lưu trữ dữ liệu được sử dụng để phân đoạn dữ liệu, chẳng hạn như Cơ sở dữ liệu Azure SQL trung gian, sẽ ngừng hoạt động vì dữ liệu được lưu ở định dạng Delta hoặc Parquet – một định dạng dữ liệu nén và hiệu suất cao hơn. Dataverse Các đường ống hạ lưu được sử dụng để hợp nhất, chuyển đổi và tổng hợp dữ liệu (3), cũng như các công cụ trình bày (4), chẳng hạn như Power BI, vẫn không thay đổi.
Azure Synapse Link cung cấp lộ trình nâng cấp dễ dàng cho khách hàng muốn mở rộng khoản đầu tư hiện tại của mình với những thay đổi tối thiểu. Như chúng ta thảo luận ở đây, những cải tiến trong Dataverse cho phép chuyển đổi dễ dàng từ các dịch vụ ứng dụng tài chính và hoạt động như Xuất sang kho dữ liệu và BYOD.
Azure Synapse Link cho phép cấu hình dễ dàng dịch vụ lưu trữ Azure và Synapse trong Power Apps (make.powerapps.com). Một số hạn chế của Xuất sang kho dữ liệu đã bị loại bỏ:
- Trải nghiệm thống nhất cho phép lựa chọn dữ liệu từ tất cả các ứng dụng Dynamics 365 bao gồm cả ứng dụng tài chính, vận hành và tương tác với khách hàng. Bạn có thể duy trì một dịch vụ duy nhất để xuất dữ liệu từ tất cả Dynamics 365 và Power Apps.
- Các hạn chế về bảng hiện có với Xuất sang kho dữ liệu sẽ không còn nữa. Bạn có thể chọn tối đa 1.000 bảng cho mỗi Azure Synapse Link hồ sơ trong một tài khoản lưu trữ duy nhất. Bạn có thể tạo nhiều hồ sơ (quy trình xuất dữ liệu), mỗi hồ sơ có tối đa 1.000 bảng.
- Azure Synapse Link cung cấp hỗ trợ tích hợp cho việc sử dụng tài khoản lưu trữ bị tường lửa hạn chế để xuất dữ liệu.
- Không cần phải cấu hình tài nguyên Azure. Azure Synapse Link cung cấp và cấu hình tài nguyên Azure thay mặt bạn.
- Azure Synapse Link xuất dữ liệu theo cùng định dạng như Xuất sang kho dữ liệu hoặc BYOD cho phép bạn giữ nguyên các đường dẫn hiện có.
Cả Xuất sang kho dữ liệu và Xuất dữ liệu đều xuất dữ liệu dịch vụ theo định dạng CSV. Tệp CSV không phù hợp để sử dụng trực tiếp do hiệu suất truy vấn kém cũng như các vấn đề tranh chấp đọc/ghi thỉnh thoảng xảy ra. Trước khi chuyển đổi sử dụng Azure Data Factory để định kỳ thu thập và chuyển đổi dữ liệu thô thành Cơ sở dữ liệu SQL Azure hoặc kho dữ liệu Azure. Tầng này không cần thiết trong 'sau khi chuyển đổi vì Azure Synapse Link xuất dữ liệu trong Delta hoặc Parquet, điều này loại bỏ nhu cầu duy trì kho dữ liệu bổ sung để lưu vào bộ nhớ đệm và cải thiện hiệu suất truy vấn đồng thời loại bỏ tranh chấp đọc/ghi.
Tiếp tục sử dụng đường ống dữ liệu hiện có để kết hợp, định hình lại và tổng hợp dữ liệu bổ sung từ các hệ thống khác.
Tiếp tục sử dụng dịch vụ Power BI cho mục đích báo cáo. Fabric giới thiệu chế độ báo cáo Direct Lake tận dụng các chỉ mục trong bộ nhớ được tích hợp vào định dạng Delta hoặc Parquet, giúp loại bỏ nhu cầu sử dụng báo cáo chế độ nhập. Power BI
Những cải tiến này mang lại khả năng tiết kiệm chi phí toàn diện bên cạnh những lợi ích đã thảo luận trước đó. Bảng ở đây phác thảo các mục chi phí cùng với sự so sánh các giải pháp trước và sau. Sử dụng bảng này làm hướng dẫn để ước tính chi phí tiết kiệm dự kiến.
Mục tiết kiệm chi phí | Trước chi phí - Xuất sang kho dữ liệu | Sau khi chi phí - Azure Synapse Link |
---|---|---|
Thiết lập và cấu hình | Phải sử dụng nhiều công cụ. - Thanh toán cho nhiều giấy phép phần mềm và đăng ký. - Nỗ lực cấu hình hệ thống. - Nỗ lực xây dựng và xác thực đường ống dữ liệu. - Tiếp tục quản lý, điều hành và giám sát. - Đào tạo người sử dụng. |
Trải nghiệm cấu hình đơn giản hơn Power Platform. Không cần đường ống ETL cho dữ liệu. Dataverse |
Phân loại dữ liệu (1, 2) | Chi phí phát sinh cho các dịch vụ Azure. - Chi phí lưu trữ Azure bao gồm chi phí IO. - Synapse Analytics (truy vấn không cần máy chủ SQL). - Công việc Azure Data Factory để sao chép dữ liệu. - Lưu trữ dữ liệu dàn dựng, chẳng hạn như Cơ sở dữ liệu Azure SQL. |
Azure Synapse Link yêu cầu bạn cung cấp một nhóm Spark để chuyển đổi dữ liệu sang định dạng Parquet. Chi phí Spark pool có thể khác nhau tùy thuộc vào tần suất đồng bộ dữ liệu cũng như khối lượng dữ liệu thay đổi. Thay đổi dữ liệu từ nhỏ đến trung bình (mỗi tháng): - $600 đến $2,000 để làm mới hàng giờ. - $1,200 đến $4,100 để làm mới trong 15 phút. Thay đổi dữ liệu trung bình đến lớn (mỗi tháng): - $1,200 đến $2,500 để làm mới hàng giờ. - $2,500 đến $8,300 để làm mới trong 15 phút. |
Chi phí hoạt động - chuẩn bị dữ liệu (3) | - Khu vực lưu trữ Azure. - Đường ống dữ liệu. - Nhập dữ liệu vào cơ sở dữ liệu Azure SQL hoặc kho dữ liệu. - Dữ liệu phát triển và bảo trì. |
Chi phí tương tự như đã nêu ở trên, tuy nhiên, bạn có thể không cần tổng hợp Dataverse dữ liệu do chuyển đổi Parquet. |
Chi phí hoạt động - báo cáo (4): - Power BI bộ dữ liệu. - Báo cáo. |
Synapse Analytics (truy vấn SQL). Power BI dung tích. |
Khi dữ liệu của bạn được nén, ví dụ như giảm từ 1/3 xuống 1/6 kích thước ban đầu, chi phí báo cáo và truy vấn của bạn cũng giảm theo. |
Quan trọng
Những ước tính này được cung cấp để có thể ước tính chi tiêu sau khi chuyển đổi. Mặc dù những ước tính này dựa trên kinh nghiệm từ khách hàng bản xem trước, chi phí thực tế phát sinh trong môi trường của bạn cũng như việc nén dữ liệu có thể thay đổi tùy thuộc vào khối lượng và thành phần dữ liệu.
Ví dụ 3: Tăng dần lượng dữ liệu thu thập được vào kho dữ liệu
Nếu hiện tại bạn đang sử dụng dữ liệu gia tăng từ tính năng Xuất sang kho dữ liệu để điền vào đường ống dữ liệu hạ lưu, bạn có thể tiếp tục sử dụng đường ống đó. Như được hiển thị ở đây, Azure Synapse Link dịch vụ có thể xuất dữ liệu thay đổi gia tăng theo cùng định dạng với dữ liệu thay đổi được đưa vào Xuất sang kho dữ liệu.
Azure Synapse Link dịch vụ cung cấp một số cải tiến so với Xuất sang kho dữ liệu để thay đổi dữ liệu gia tăng:
- Tải dữ liệu ban đầu được bao gồm trong các thư mục thay đổi. Điều này giúp cho cùng một đường ống có thể dễ dàng xử lý cả tải ban đầu cũng như các bản cập nhật gia tăng.
- Dữ liệu thay đổi sẽ không bị xóa trong trường hợp khởi tạo lại bảng.
- Hệ thống tạo cấu trúc thư mục có dấu thời gian và siêu dữ liệu giúp bạn đọc các thay đổi theo thứ tự thời gian. Dữ liệu đã thay đổi một khi được ghi sẽ không bao giờ được cập nhật. Cách tiếp cận này phù hợp hơn với việc xử lý những thay đổi bằng cách sử dụng các công cụ thu thập dữ liệu lớn như Azure Data Factory.
- Bạn có thể cấu hình tần suất cập nhật nguồn cấp dữ liệu thay đổi trong các thư mục với Azure Synapse Link, tối thiểu là năm phút.
Khi bạn chuyển sang Fabric hoặc Azure Synapse Link, chi phí thay đổi là tối thiểu đối với những thay đổi dữ liệu gia tăng.
Hiểu được lợi ích – báo cáo thời gian thực nhiều hơn
Fabric không chỉ đơn giản hóa kiến trúc tích hợp dữ liệu của bạn mà còn giảm nhu cầu sao chép hoặc sao chép dữ liệu. Định dạng dữ liệu cơ bản trong Fabric, định dạng Delta hoặc Parquet tiêu chuẩn công nghiệp, có thể được sử dụng trực tiếp bởi Power BI, luồng dữ liệu, sổ ghi chép và các khối lượng công việc khác, loại bỏ nhu cầu lưu trữ đệm và các vùng dàn dựng.
Nếu bạn nâng cấp lên Azure Synapse Link và tiếp tục xuất dữ liệu, dữ liệu của bạn sẽ được lưu ở định dạng Delta hoặc Parquet, có thể giảm các bước trong đường ống dữ liệu của riêng bạn để báo cáo hoạt động.
Hãy xem xét thời gian cần thiết để làm mới báo cáo hoạt động, chẳng hạn như phân tích hàng tồn kho hoặc phân tích tài chính cuối tháng. Các báo cáo này có thể yêu cầu tổng hợp dữ liệu của hàng triệu hàng dữ liệu từ nhiều bảng trong Dynamics 365 Finance. Khi sử dụng dịch vụ Xuất sang kho dữ liệu, dữ liệu CSV sẽ được xuất trong vòng 10 phút. Dữ liệu này có thể cần phải được nhập vào Power BI báo cáo để cung cấp thời gian phản hồi tốt hơn. Power BI có thể thực hiện làm mới tới 24 lần một ngày (mỗi 30 phút). Tùy thuộc vào cách thiết kế báo cáo, việc làm mới có thể mất vài phút để hoàn tất. Khi sử dụng phương pháp này, người dùng có thể xem dữ liệu trong vòng 60 phút sau khi cập nhật.
Báo cáo hoạt động có nguồn dữ liệu sử dụng Fabric liên kết có thể tận dụng chế độ Direct Lake hoặc chế độ DirectQuery trong Fabric, chế độ này tận dụng chỉ mục trong bộ nhớ được tích hợp sẵn trong các tệp Delta hoặc Parquet. Ở những chế độ này, bạn không cần phải lên lịch làm mới Power BI báo cáo vì báo cáo luôn hiển thị Dataverse dữ liệu mới nhất được cập nhật trong Fabric.
Dịch vụ Fabric liên kết cập nhật dữ liệu trong Dataverse OneLake trong vòng một giờ kể từ thời điểm này. Dataverse kích hoạt các công việc cập nhật dữ liệu sau mỗi 15 phút và tùy thuộc vào khối lượng dữ liệu thay đổi, bạn có thể thấy các tệp Parquet được cập nhật trong vòng 30 đến 60 phút.
Nếu bạn đang sử dụng nguồn cấp dữ liệu gia tăng từ Dynamics 365 với dịch vụ Xuất sang kho dữ liệu cho các tình huống tích hợp dữ liệu gần như thời gian thực (ví dụ 3). Nâng cấp lên Azure Synapse Link cho phép bạn chạy cùng một đường ống dữ liệu.
Các vấn đề và giải pháp đã biết
Hiện tại, nhóm sản phẩm đang giải quyết một số hạn chế. Cho đến khi chúng tôi khắc phục được những hạn chế này, hãy sử dụng giải pháp thay thế được đề xuất. Để tìm hiểu thêm về lộ trình sắp tới và giữ liên lạc với nhóm sản phẩm, hãy tham gia nhóm bản xem trước Viva Engage .
Sự cố đã biết | Sửa lỗi và giải pháp thay thế |
---|---|
Khi thêm một số lượng lớn bảng cùng một lúc, hệ thống sẽ tạo một bản sao dữ liệu ban đầu. Có những trường hợp hiếm hoi, đặc biệt là trong các môi trường nhỏ hơn và hộp cát Tier-2, khi khối lượng công việc vận hành có thể chậm lại và thời gian khởi tạo có thể trở nên dài hơn nhiều. |
Điều này có thể ảnh hưởng đến các môi trường nhỏ hơn với ít máy chủ Application Object Server (AOS) (tài nguyên tính toán) hơn. Trong Azure Synapse Link và Fabric liên kết, bạn có thể thêm nhiều bảng cùng lúc bằng cách dán danh sách các bảng được phân tách bằng dấu phẩy. Hệ thống tăng hoặc giảm khối lượng công việc khởi tạo theo tài nguyên tính toán khả dụng ở mức khoảng hai bảng đồng thời trên mỗi AOS. |
Khi thêm bảng, hệ thống sẽ tạo bản sao dữ liệu ban đầu. Trong một số trường hợp, đặc biệt là với các bảng rất lớn, quá trình khởi tạo có thể mất nhiều thời gian hơn hoặc có vẻ bị kẹt trong vài ngày | Cập nhật môi trường ứng dụng tài chính và vận hành thành: - Cập nhật tích lũy PU 63 7.0.7198.91 -PU 62 cập nhật tích lũy 7.0.7120.152 Bản cập nhật này cho phép khởi tạo nhanh hơn các bảng lớn (hơn 200 triệu hàng). Chúng tôi đã bật chỉ mục để đồng bộ hóa dữ liệu nhanh hơn. Trong trường hợp có giao dịch đang diễn ra trong cơ sở dữ liệu hoạt động, việc tạo chỉ mục cần phải đợi giao dịch hoàn tất. Thời gian chờ kéo dài, đôi khi do các giao dịch không hoạt động, có thể làm chậm quá trình khởi tạo. Trong những trường hợp như vậy, người quản trị hệ thống có thể phát hiện và buộc tạo chỉ mục. |
Trong trường hợp môi trường Dataverse của bạn nằm trong vùng Azure khác với vùng chứa dung lượng Fabric của bạn, bạn không thể sử dụng tính năng liên kết cho Fabric . | Tính đến ngày 30 tháng 4 năm 2024, bạn có thể liên kết đến một sức chứa Fabric nằm trong cùng ranh giới địa lý, chẳng hạn như Hoa Kỳ. Lưu ý rằng bạn có thể phải chịu phí mạng trong Fabric do dữ liệu chuyến hàng giữa các vùng Azure. |
Trong trường hợp môi trường Dataverse của bạn nằm trong vùng Azure khác với vùng lưu trữ dữ liệu hoặc không gian làm việc Synapse của bạn, bạn không thể sử dụng tính năng Azure Synapse Link . | Tính đến ngày 30 tháng 4 năm 2024, bạn có thể liên kết vào một tài khoản lưu trữ nằm trong cùng ranh giới địa lý, chẳng hạn như Hoa Kỳ. Lưu ý rằng bạn có thể phải chịu phí mạng trong các tài nguyên Azure như hồ dữ liệu nếu chúng không nằm trong cùng một vùng Azure. |
Xác thực AOS là một cách bảo vệ các trường dữ liệu nhạy cảm trong các ứng dụng tài chính và vận hành trước các tình huống đánh cắp dữ liệu. Nếu bảng được chọn chứa các cột dữ liệu được bảo mật thông qua xác thực AOS, các cột đó sẽ bị bỏ qua và dữ liệu được xuất sẽ không chứa cột đó. Ví dụ: cột bảng tùy chỉnh TaxLicenseNum có thuộc tính siêu dữ liệu AOS Authorization được đặt thành Yes. Cột này bị bỏ qua |
Cập nhật môi trường tài chính và hoạt động của bạn lên các phiên bản sau hoặc mới hơn: - PU 63:7.0.7198.105 - PU 62:7.0.7120.159 Với bản cập nhật này, các trường ủy quyền AOS được thêm vào bảng. - Các bản cập nhật gia tăng bao gồm cột này. - Các bản ghi đã sửa đổi hiển thị các cột và giá trị này. - Làm mới hoàn toàn bao gồm các trường này và tất cả các giá trị. |
Nếu bảng được chọn chứa các cột dữ liệu có kiểu Mảng , các cột đó sẽ bị bỏ qua và dữ liệu được xuất sẽ không chứa cột đó. Ví dụ, trong bảng tùy chỉnh có tên WHSInventTable, các cột FilterCode và FilterGroup có kiểu là mảng. Các cột này không được xuất bằng Azure Synapse Link. |
Cập nhật môi trường tài chính và hoạt động của bạn lên các phiên bản sau hoặc mới hơn: - PU 65 7.0.7367.0 - PU 64:7.0.7279.115 - PU 63:7.0.7198.186 Với bản cập nhật này, các trường kiểu Mảng được thêm vào bảng. - Các bản cập nhật gia tăng bao gồm cột này. - Các bản ghi đã sửa đổi hiển thị các cột và giá trị này. - Làm mới đầy đủ bao gồm các trường này và tất cả các giá trị. - Các trường mảng kiểu Enumerated hiện bị loại trừ khỏi các tính năng Synapse liên kết và Fabric liên kết. |
Trong trường hợp các bảng ứng dụng tài chính và hoạt động thể hiện hành vi dấu thời gian hợp lệ, chỉ những hàng dữ liệu hiện đang hợp lệ mới được xuất bằng Azure Synapse Link. Ví dụ, bảng ExchangeRate chứa cả tỷ giá hối đoái hiện tại và trước đó. Chỉ tỷ giá hối đoái hiện hành mới được xuất sang Azure Synapse Link. |
Cập nhật môi trường tài chính và hoạt động của bạn để - Phiên bản 10.0.38 (PU62) cập nhật nền tảng 7.0.7120.179 - Phiên bản 10.0.39 (PU63) cập nhật nền tảng 7.0.7198.143 - Phiên bản 10.0.40 (PU64) cập nhật nền tảng 7.0.7279.58 Với bản cập nhật này, các hàng dữ liệu đã hết hạn sẽ được thêm vào bảng. Bạn cần phải làm mới hoàn toàn để bao gồm các hàng trước đó. |
Kế thừa bảng và bảng dẫn xuất là các khái niệm trong ứng dụng tài chính và hoạt động. Khi chọn bảng được rút ra từ ứng dụng tài chính và hoạt động, các cột từ bảng cơ sở tương ứng hiện không được bao gồm. Ví dụ, nếu bạn chọn DirPerson bảng, (một bảng bắt nguồn từ DirPartyTable còn được gọi là bảng cơ sở), dữ liệu được xuất ra chứa các trường từ bảng cơ sở DirPartyTable . |
Bạn cần chọn bảng cơ sở ngoài bảng được lấy ra nếu bạn cần truy cập vào các cột này. Bạn có thể sử dụng giải pháp FastTrack này được cung cấp thông qua GitHub. Giải pháp này tạo ra các chế độ xem bao gồm các cột từ các bảng cơ sở. |
Xuất hơn 1.000 bảng thông qua Azure Synapse Link hoặc thêm hơn 1.000 bảng vào Fabric liên kết. | Nếu bạn đang sử dụng Azure Synapse Link, hãy giải quyết vấn đề này bằng cách tạo hai hoặc nhiều hồ sơ có chứa ít hơn 1.000 bảng. Dự kiến sẽ chọn hơn 1.000 bảng trong Fabric liên kết và trong Azure Synapse Link hồ sơ trong bản cập nhật trong tương lai. |
Các bảng ứng dụng tài chính và hoạt động được bao gồm trong Azure Synapse Link hồ sơ không thể được di chuyển sang môi trường khác bằng tính năng nhập và xuất hồ sơ trong Azure Synapse Link. | Cho đến khi vấn đề này được giải quyết, hãy thêm các bảng tương tự vào môi trường mới. Sao chép và dán danh sách bảng được phân cách bằng dấu phẩy vào hộp tìm kiếm trong tùy chọn quản lý bảng để chọn danh sách bảng cùng một lúc. |
Azure Synapse Link hoặc Fabric liên kết kích hoạt các bảng có thuộc tính theo dõi thay đổi được bật. Hiện tại, tính năng theo dõi thay đổi không thể được bật cho tất cả các đơn vị tài chính và hoạt động. Tùy chọn Theo dõi thay đổi không khả dụng đối với các thực thể được tạo trong tài chính và hoạt động trước đây để di chuyển dữ liệu. Trong một số thực thể, việc bật theo dõi thay đổi có thể không thành công với thông báo lỗi thực thể đã chọn không vượt qua các quy tắc xác thực hoặc hộp kiểm Theo dõi thay đổi bị vô hiệu hóa đối với một số thực thể. Để biết thêm thông tin về các quy tắc xác thực thực thể và cách bạn có thể sửa chúng, hãy truy cập Bật theo dõi thay đổi phiên bản hàng cho các thực thể dữ liệu. Bạn có thể cần sự trợ giúp của nhà phát triển để hoàn tất các bước. |
Nếu thực thể đã chọn không khả dụng do giới hạn theo dõi thay đổi, hãy chọn các bảng bao gồm dữ liệu từ thực thể đó. Bạn có thể sử dụng giải pháp EntityUtil do nhóm FastTrack cung cấp để tạo hình dạng thực thể bằng cách sử dụng bảng. |
Trong trường hợp thực hiện thao tác khôi phục cơ sở dữ liệu trong Dataverse, các thực thể tài chính và hoạt động được kích hoạt trong Azure Synapse Link sẽ bị xóa. | Để bật lại các thực thể, hãy bật lại các bảng ảo tương ứng cho tất cả các thực thể đã chọn, bật lại theo dõi thay đổi và chọn lại các bảng trong Azure Synapse Link. Bạn có thể sao chép và dán danh sách bảng được phân tách bằng dấu phẩy vào hộp tìm kiếm trong tùy chọn quản lý bảng để chọn danh sách bảng cùng một lúc. |
Các bảng ứng dụng tài chính và hoạt động được thêm vào Azure Synapse Link hồ sơ có thể bị xóa khi bản sao lưu được khôi phục trong Dataverse. | Bạn phải thêm bảng tài chính và hoạt động vào hồ sơ sau khi khôi phục cơ sở dữ liệu. Truy cập Những hạn chế đã biết với bảng tài chính và hoạt động để biết thông tin chi tiết về cách bật lại bảng sau thao tác khôi phục cơ sở dữ liệu. |
Chia sẻ dữ liệu công ty chính là tính năng bản xem trước trong ứng dụng tài chính và hoạt động. Các bảng tham gia vào tính năng chia sẻ dữ liệu công ty chính hiện không được hỗ trợ bằng các tính năng Synapse liên kết hoặc Fabric liên kết. Mặc dù có thể chọn các bảng này, dữ liệu được xuất có thể liên quan đến các vùng dữ liệu không hợp lệ. | Hiện tại vẫn chưa có giải pháp nào giải quyết được vấn đề này. |
Các câu hỏi thường gặp
Dịch vụ Xuất sang kho dữ liệu đang hoạt động tốt với chúng tôi. Tại sao bạn lại ngừng cung cấp những dịch vụ này?
Là một phần của dự án hợp nhất nền tảng Dynamics 365, chúng tôi đã hợp nhất một số dịch vụ "xuất dữ liệu" trong các ứng dụng Dynamics 365 thành một dịch vụ duy nhất có tên thương hiệu là Synapse liên kết cho Dataverse. Sử dụng những bài học kinh nghiệm của mình, chúng tôi đã giải quyết được nhiều điểm yếu của các dịch vụ hiện có trong Synapse liên kết trong khi vẫn duy trì cùng một định dạng dữ liệu – để bạn có thể nâng cấp khoản đầu tư của mình với ít gián đoạn nhất. Dịch vụ Fabric liên kết là giải pháp mới, không sao chép, không ETL, cho phép bạn tận dụng những cải tiến trong Fabric mà không cần phải đầu tư vào đường ống dữ liệu. Đây là "bản sao đọc" dữ liệu của bạn dành cho người dùng được ủy quyền trong Fabric.
Dịch vụ BYOD đã ngừng hoạt động chưa? Có ngày nghỉ hưu không?
Là một phần của dự án hợp nhất nền tảng Dynamics 365, chúng tôi đã hợp nhất một số dịch vụ "xuất dữ liệu" trong các ứng dụng Dynamics 365. BYOD là dịch vụ xuất dữ liệu thực thể vào cơ sở dữ liệu Azure SQL của khách hàng. Mặc dù chúng tôi vẫn chưa công bố ngày ngừng cung cấp dịch vụ BYOD, nhưng theo hướng dẫn của chúng tôi, bạn nên chuyển sang dịch vụ Synapse liên kết hoặc Fabric liên kết. Dịch vụ Fabric liên kết là giải pháp mới, không sao chép, không ETL, cho phép bạn truy vấn dữ liệu của mình bằng SQL tương tự như "bản sao đọc" dữ liệu của bạn trong Fabric.
Bạn có ngừng sử dụng Synapse liên kết trong tương lai không?
Là một phần của dự án hợp nhất nền tảng, chúng tôi đã hợp nhất một số dịch vụ "xuất dữ liệu" trong các ứng dụng Dynamics 365 thành một dịch vụ có tên thương hiệu là Synapse liên kết cho Dataverse. Chúng tôi cũng đã giới thiệu Fabric liên kết, một giải pháp không sao chép, không ETL, cho phép bạn tận dụng các cải tiến trong Fabric mà không cần phải đầu tư vào đường ống dữ liệu. Đây là "bản sao đọc" dữ liệu của bạn dành cho người dùng được ủy quyền trong Fabric.
Trong khi nhiều khách hàng hào hứng áp dụng Fabric, chúng tôi cũng hiểu rằng một số khách hàng muốn tiếp tục xuất dữ liệu và xây dựng quy trình tích hợp của riêng họ. Chúng tôi muốn cho phép họ xuất dữ liệu trong tương lai.
Dịch vụ Xuất sang kho dữ liệu có dừng lại sau ngày 1 tháng 11 năm 2024 không?
Dịch vụ Xuất sang kho dữ liệu sẽ tiếp tục hoạt động sau ngày ngừng hoạt động trong mùa lễ. Tuy nhiên, sự hỗ trợ của chúng tôi sẽ có hạn. Bạn có thể giảm thiểu rủi ro bằng cách bắt đầu quá trình chuyển đổi ngay bây giờ. Chúng tôi có kế hoạch ngừng cung cấp dịch vụ Xuất sang kho dữ liệu bắt đầu từ ngày 25 tháng 3 năm 2025 khi khách hàng chuyển sang dịch vụ Synapse liên kết và Fabric liên kết. Bạn có thể tham gia cộng đồng và cung cấp phản hồi thông qua giờ làm việc hàng tuần tại aka.ms/SynapseLinkforDynamics.
Quá trình chuyển đổi của tôi có thể kéo dài sau ngày hết hạn, có quy trình nào để gia hạn không?
Dịch vụ Xuất sang kho dữ liệu sẽ tiếp tục hoạt động sau ngày ngừng hoạt động trong mùa lễ. Tuy nhiên, sự hỗ trợ của chúng tôi sẽ có hạn. Bạn có thể giảm thiểu rủi ro bằng cách bắt đầu quá trình chuyển đổi ngay bây giờ. Để giúp những khách hàng có thể cần nhiều thời gian hơn để hoàn tất quá trình chuyển đổi, chúng tôi đã giới thiệu tùy chọn tự gia hạn trong sản phẩm. Bạn có thể nộp đơn xin gia hạn một lần cho đến ngày 15 tháng 2 năm 2025. Để tự mở rộng, hãy đến khu vực Azure Synapse Link trong Power Apps (make.powerapps.com). Tùy chọn này áp dụng cho từng môi trường và hiển thị cho các môi trường liên quan đến tài chính và hoạt động.
Xem thêm
Là gì Azure Synapse Link for Dataverse?
liên kết môi trường của bạn Dataverse để Microsoft Fabric và mở khóa những hiểu biết sâu sắc