Microsoft Fabric 中有什么新增功能?
本页将持续更新 Microsoft Fabric 的最新回顾。
- 要关注 Fabric 新闻和功能中的最新信息,请参阅 Microsoft Fabric 更新博客。
- 有关社区、营销、案例研究和行业新闻的信息,请参阅 Microsoft Fabric 博客。
- 要关注 Power BI 中的最新信息,请参阅 Power BI 中有哪些新增功能?
- 有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
不熟悉 Microsoft Fabric?
当前处于预览状态的功能
下表列出了当前作为预览版提供的 Microsoft Fabric 功能。 预览版功能按字母顺序排序。
注意
功能目前根据补充使用条款以公共预览版提供。 查看适用于测试版、预览版或尚未正式发布的 Azure 功能的法律条款。 Microsoft Fabric 提供预览版,让你有机会在预览功能正式发布 (GA) 之前对其进行评估并与产品组分享反馈。
功能 | 了解详细信息 |
---|---|
Azure 数据工厂项目 | 现在可以将现有的 Azure 数据工厂 (ADF) 带到 Fabric 工作区。 通过此新的预览功能,可以从 Fabric 工作区连接到现有的 Azure 数据工厂。 在 Fabric 数据工厂工作区中选择“创建 Azure 数据工厂”,然后可以直接从 Fabric 工作区管理 Azure 数据工厂。 |
容量池预览 | 容量管理员现在可以根据工作负载要求创建自定义池(预览版),从而对计算资源进行精细控制。 可在工作区 Spark 设置和环境项中将用于数据工程师和数据科学的自定义池设置为 Spark 池选项。 |
Code-First AutoML 预览版 | 在 Synapse 数据科学中,新的 AutoML 功能可实现机器学习工作流自动化。 AutoML(或自动化机器学习)是一组技术和工具,可针对任何给定数据和任务类型自动训练和优化机器学习模型。 |
Code-First 超参数优化预览版 | 在 Synapse 数据科学中,FLAML 现已集成用于超参数优化,目前是预览功能。 Fabric 的 flaml.tune 功能简化了此过程,提供了一种经济高效且有效的超参数优化方法。 |
Fabric 中的 Copilot 在全球范围推出 | Fabric 中的 Copilot 现已面向所有客户推出,其包括 Copilot for Power BI、数据工厂、数据科学和数据工程以及实时智能。 有关更多信息,请参阅 Fabric 中的 Copilot 概述。 |
Data Activator 预览版 | 我们很高兴地宣布,Data Activator 现提供预览版,并且已为所有现有的 Microsoft Fabric 用户启用。 |
数据工厂中的 Apache Airflow 作业(预览版) | 数据工厂中的 Apache Airflow 作业(预览版)由 Apache Airflow 提供支持,为定义为有向无环图 (DAG) 的基于 Python 的数据流程提供无缝的创作、调度和监控体验。 有关详细信息,请参阅快速入门:创建数据工作流。 |
适用于 Spark 数据帧的数据整理器(预览版) | Data Wrangler 现在支持 Spark DataFrame(预览版),用户现在除了可以使用 Data Wrangler 编辑 pandas DataFrame 外,还可以使用它来编辑 Spark DataFrame。 |
复制作业 | 复制作业(预览版)优于传统的复制活动。 有关详细信息,请参阅预览版发布:Microsoft Fabric 中的复制作业。 有关教程,请参阅了解如何在 Microsoft Fabric 的数据工厂中创建复制作业(预览版)。 |
Data Activator 预览版 | Data Activator 提供预览版,并且已为所有现有的 Microsoft Fabric 用户启用。 |
数据科学 AI 技能(预览版) | 现在,可以使用 AI 技能在 Fabric 中基于数据构建自己的生成式 AI 体验(预览版)! 可以在湖屋和仓库上构建问答 AI 系统。 有关详细信息,请参阅 Microsoft Fabric 中的 AI 技能简介:现已推出预览版。 首先,请试用 AdventureWorks 数据集的 AI 技能示例。 |
SQL 分析终结点中的 Delta 列映射 | SQL 分析终结点现在支持已启用列映射的 Delta 表。 有关详细信息,请参阅 Delta 列映射和 SQL 分析终结点的限制。 此功能目前以预览版提供。 |
OneLake 中的域(预览版) | OneLake 中的域有助将数据组织为逻辑数据网格,从而方便联合身份治理并根据业务需求进行优化。 现在可以为用户创建子域、默认域,并在域之间移动工作区。 有关详细信息,请参阅 Fabric 域。 |
管道中笔记本的高并发模式(预览版) | 管道中笔记本的高并发模式使用户能够在管道内的多个笔记本之间共享 Spark 会话。 使用高并发模式,用户可以触发管道作业,这些作业会自动打包到现有的高并发会话中。 |
外部数据共享简介(预览版) | 外部数据共享(预览版)是一项新功能,使 Fabric 用户可与另一 Fabric 租户中的用户共享其 Fabric 租户中的数据。 |
Fabric 网关允许 OneLake 快捷方式访问本地数据 | 使用环境中计算机上的 Fabric 本地数据网关连接到本地数据源,可联网查看 S3 兼容或 Google 云存储数据源。 然后,创建快捷方式并选择该网关。 有关详细信息,请参阅创建本地数据的快捷方式。 |
Spark 运行时中用于 Fabric Synapse 数据仓库的 Fabric Spark 连接器(预览版) | 用于 Synapse 数据仓库的 Fabric Spark 连接器(预览版)使 Spark 开发人员或数据科学家能够使用简化的 Spark API 从仓库或湖屋的 SQL 分析端点(从同一工作区或跨工作区)访问和处理数据。 |
Fabric Spark 诊断发射器(预览版) | Fabric Apache Spark 诊断发射器(预览版)使 Apache Spark 用户能够从 Spark 应用程序中收集日志、事件日志和指标,并将它们发送到各种目标,包括 Azure 事件中心、Azure 存储和 Azure 日志分析。 |
Fabric 工作负载开发工具包(预览版) | Microsoft Fabric 工作负载开发工具包可扩展到其他工作负载,并提供强大的开发人员工具包,用于使用前端 SDK 和后端 REST API 设计、开发以及与 Microsoft Fabric 互操作。 |
工作区中的文件夹预览版 | 作为工作区中的组织单位,文件夹通过提供用于组织和管理项的分层结构来解决此难点。 有关详细信息,请参阅在工作区内创建文件夹(预览版)。 |
Microsoft Fabric 中的 GraphQL API(预览版) | 新的 API for GraphQL 是一个数据访问层,允许我们在 Fabric 中快速高效地查询多个数据源。 有关详细信息,请参阅什么是 Microsoft Fabric API for GraphQL? |
Dataflow Gen2 的增量刷新(预览版) | Fabric 数据工厂中 Dataflows Gen2 的增量刷新旨在优化数据引入和转换,尤其是在数据不断扩展的情况下。 有关详细信息,请参阅预览版发布:Dataflow Gen2 中的增量刷新。 |
在数据管道中调用远程管道(预览版) | 现在可以使用调用管道(预览版)活动从 Azure Data Factory 或 Synapse Analytics 管道调用管道。 此功能让你可以通过此新的“调用管道”活动,以内联方式调用 Fabric 管道中的现有 ADF 或 Synapse 管道,从而利用该管道。 |
Kusto 缓存消耗预览版 | Kusto 缓存消耗预览版意味着你将看到来自 KQL 数据库和 Eventhouse 项目的 OneLake 缓存数据存储计量的计费消耗量。 有关详细信息,请参阅 KQL 数据库消耗。 |
Lakehouse 架构功能 | Lakehouse 架构功能(预览版)引入了数据管道支持,可从 Lakehouse 表读取架构信息,并支持将数据写入指定架构下的表。 Lakehouse 架构允许将表组合在一起,以便更好地发现数据、进行访问控制等操作。 |
对 git 集成和部署管道的湖屋支持(预览版) | 湖屋现与 Microsoft Fabric 中的生命周期管理功能集成,可在产品的整个生命周期内实现所有开发团队成员之间的标准化协作。 生命周期管理会持续向多个环境提供功能和 bug 修复,从而促进有效的产品版本控制和发布过程。 |
托管虚拟网络(预览) | 托管虚拟网络是 Microsoft Fabric 为每个 Fabric 工作区创建和管理的虚拟网络。 |
Microsoft 365 连接器现在支持将数据引入湖屋(预览版) | Microsoft 365 连接器现在支持将数据引入湖屋表。 |
Microsoft Fabric 管理员 API | Fabric 管理员 API 旨在简化管理任务。 Fabric 管理员 API 的初始设置旨在简化工作区、Fabric 项目和用户访问详细信息的发现。 |
Microsoft Fabric 中的镜像(预览版) | 借助 Fabric 中的数据库镜像,可以轻松地将数据库引入 Microsoft Fabric 中的 OneLake,以便获得无缝的零 ETL、有关数据的准实时见解,以及解锁仓库、BI、AI 等。 有关详细信息,请参阅Fabric 中的镜像是什么?。 |
运行时 1.3 上的本机执行引擎(预览版) | Fabric Runtime 1.3 的本机执行引擎现已推出预览版,可在数据处理、ETL、数据科学和交互式查询中提供卓越的查询性能。 无需更改代码,即可加快使用本机执行引擎时,Apache Spark 作业的执行速度。 |
嵌套公共表表达式 (CTE)(预览版) | Fabric Warehouse 和 SQL 分析终结点都支持标准、顺序和嵌套 CTE。 尽管 CTE 已在 Microsoft Fabric 中正式可用,但 Fabric 数据仓库中的嵌套公共表表达式 (CTE) 目前是预览功能。 |
vscode.dev 中的笔记本调试(预览版) | 现在可以在 vscode.dev 中使用 Synapse VS Code - Remote 扩展放置断点并调试笔记本代码。 此更新首先从 Fabric Runtime 1.3 开始。 |
OneLake 数据访问角色 | 适用于湖屋的 OneLake 数据访问角色为预览版。 可以通过新的文件夹安全用户界面轻松更新角色权限和用户/组分配。 |
OneLake SAS(预览版) | 对短暂的、用户委托的 OneLake SAS 的支持现已处于预览阶段。 此功能允许应用程序请求由 Microsoft Entra ID 支持的用户委托密钥,然后使用此密钥构造 OneLake SAS 令牌。 可以移交此令牌,以向另一个工具、节点或用户提供委托访问权限,从而确保安全且受控的访问。 |
Fabric 中预生成的 Azure AI 服务预览版 | Fabric 中预生成的 AI 服务预览版与 Azure AI 服务(以前称为 Azure 认知服务)集成。 预生成的 Azure AI 服务 允许使用预生成的 AI 模型轻松增强数据,而无需任何先决条件。 目前,预生成的 AI 服务处于预览状态,包含对 Microsoft Azure OpenAI 服务、Azure AI 语言和 Azure AI 翻译的支持。 |
Purview 数据丢失预防策略已扩展到 Fabric 湖屋 | 将 Microsoft Purview 的数据丢失预防 (DLP) 策略扩展到 Fabric 湖屋的功能现已处于预览阶段。 |
实时仪表板和底层 KQL 数据库访问分离(预览版) | 通过为仪表板和底层数据提供单独的权限,管理员现在具有灵活性,使用户能够在未被授予对原始数据的访问权限的情况下查看仪表板。 |
实时中心 | 实时中心是单一的、租户范围的、统一的、逻辑的位置,用于流式传输动态数据。 它使你能够轻松发现、引入、管理和使用来自各种来源的动态数据。 它列出了可以直接执行操作的所有流和 Kusto 查询语言 (KQL) 表。 它还提供了一种从 Microsoft 产品和 Fabric 事件引入流数据的简单方法。 有关详细信息,请参阅实时中心概述。 |
为作业保留最大核心(预览版) | 新的工作区级别设置让你可以为 Spark 工作负载的活动作业保留最大核心。 有关详细信息,请参阅 Apache Spark for Fabric 中的高并发模式。 |
适用于 Fabric 数据工厂管道的 REST API 预览版 | 适用于 Fabric 数据工厂管道的 REST API 现在推出预览版。 适用于数据工厂管道的 REST API 使你能够扩展 Fabric 中的内置功能,以创建、读取、更新、删除和列出管道。 |
使用 Eventstream 中的托管专用终结点保护数据流(预览版) | 通过创建 Fabric 托管专用终结点,现在可以安全地将 Eventstream 连接到专用网络内或防火墙后面的 Azure 服务(例如 Azure 事件中心或 IoT Hub)。 有关详细信息,请参阅使用 Eventstream 中的托管专用终结点保护数据流(预览版)。 |
工作区设置中用于笔记本交互式运行的会话到期控制(预览版) | 数据工程/科学工作区设置中的新会话到期控制可设置笔记本交互式会话的最大到期时间限制。 默认情况下,会话会在 20 分钟后到期,但是现在可以自定义最大到期时间。 |
Fabric AI 技能的共享功能(预览版) | Fabric AI 技能的“共享”功能(预览版)让你可以使用各种权限模型与他人共享 AI 技能。 |
共享 Fabric AI 技能(预览版) | Fabric AI 技能的共享功能(预览版)让你可以使用各种权限模型与他人共享 AI 技能。 |
Spark 运行系列分析预览 | 使用 Spark 监视运行系列分析功能,可以分析管道 Spark 活动定期运行实例的运行持续时间趋势和性能比较,以及来自同一笔记本或 Spark 作业定义的重复 Spark 运行活动。 |
Splunk 加载项预览版 | 适用于 Splunk 的 Microsoft Fabric 加载项允许用户使用 Kusto python SDK 将来自 Splunk 平台的日志引入 Fabric KQL DB。 |
标记 | 标记(预览版)可帮助管理员对数据进行分类和整理,从而增强数据的可搜索性并提高最终用户的成功率和效率。 |
Microsoft Fabric 中的任务流(预览版) | Microsoft Fabric 中任务流的预览版已为所有 Microsoft Fabric 用户启用。 凭借 Fabric 任务流,在设计数据项目时,不再需要使用白板来绘制项目的不同部分及其相互关系。 相反,可以使用任务流构建此关键信息并将其引入项目本身。 |
varchar(max) 和 varbinary(max) 支持处于预览阶段 | 对仓库中 varchar(max) 和 varbinary(max) 数据类型的支持现已处于预览阶段。 有关详细信息,请参阅公告:Fabric 数据仓库中的 VARCHAR(MAX) 和 VARBINARY(MAX) 类型推出公开预览版。 |
适用于 Fabric 的 Terraform 提供程序(预览版) | 适用于 Microsoft Fabric 的 Terraform 提供程序现已处于预览阶段。 适用于 Microsoft Fabric 的 Terraform 提供程序支持创建和管理多种 Fabric 资源。 有关详细信息,请参阅公告:推出新的适用于 Microsoft Fabric 的 Terraform 提供程序。 |
Fabric 笔记本中的 T-SQL 支持(预览版) | Microsoft Fabric 中的 T-SQL 笔记本功能(预览版)支持在笔记本中编写和运行 T-SQL 代码。 可以使用它们来管理复杂查询并编写更好的 markdown 文档。 它还允许在连接的仓库或 SQL 分析终结点上直接执行 T-SQL。 若要了解详细信息,请参阅创作和运行 T-SQL 笔记本。 |
仓库还原点和就地还原 | 现在可以创建还原点并将仓库就地还原到某个过去的时间点。 就地还原是数据仓库恢复的重要组成部分,它通过替换或覆盖创建还原点的现有数据仓库,将数据仓库还原到之前已知的可靠状态。 |
仓库源代码管理(预览版) | 使用 Git 集成和/或部署管道与仓库,可以管理版本控制仓库对象的开发和部署。 您可以使用 Azure Data Studio 和 Visual Studio Code 中提供的 SQL 数据库项目扩展。 有关仓库源代码管理的详细信息,请参阅 Microsoft Fabric 中具有仓库的 CI/CD。 |
正式版功能
下表列出了近期已从预览版过渡到正式版 (GA) 的 Microsoft Fabric 功能。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 笔记本 Git 集成 | 笔记本 Git 集成现在支持在同步到新工作区时保留附加环境的映射关系。 有关详细信息,请参阅笔记本源代码管理和部署 |
2024 年 10 月 | 部署管道中的笔记本 | 现在,还可以使用笔记本跨不同环境(例如开发、测试和生产)部署代码。 还可以使用部署规则来自定义部署笔记本时的行为,例如更改笔记本的默认湖屋。 开始使用部署管道,笔记本将自动在部署内容中显示。 |
2024 年 9 月 | Snowflake 镜像 | 借助 Fabric 中的 Snowflake 镜像,可以轻松地将 Snowflake 数据导入 Microsoft Fabric 中的 OneLake。 有关详细信息,请参阅镜像 Snowflake。 |
2024 年 9 月 | 适用于数据工厂的 Copilot | 适用于数据工厂的 Copilot 现已正式发布,并包含在 Dataflow Gen2 体验中。 有关详细信息,请参阅面向数据工厂的 Copilot。 |
2024 年 9 月 | Dataflow Gen2 中的快速复制功能 | 快速复制功能现已正式发布。 有关详细信息,请阅读公告:Dataflows Gen2 中的快速复制功能正式发布。 |
2024 年 9 月 | 本地数据网关中的 Fabric 管道集成 GA | Microsoft Fabric 中数据管道的本地连接现已正式发布。 了解如何在 Microsoft Fabric 的数据工厂中访问本地数据源。 |
2024 年 9 月 | 适用于 Spark DataFrames 的数据整理器 | 数据整理器现已正式发布。 数据整理器是一种基于笔记本的探索性数据分析工具,适用于 pandas DataFrames 和 Spark DataFrames,该工具现已正式发布,并提供新的可用性改进。 |
2024 年 9 月 | Fabric 运行时 1.3 | Fabric 运行时 1.3 包括 Apache Spark 3.5、Delta Lake 3.1、R 4.4.1、Python 3.11、对 Starter Pools 的支持、与 Environment 的集成以及库管理功能。 有关详细信息,请参阅 Fabric 运行时 1.3 正式发布!。 |
2024 年 9 月 | OneLake 快捷方式 API | 适用于 OneLake 快捷方式的 REST API 能够以编程方式创建和管理快捷方式,现已正式发布。 现在能够以编程方式创建、读取和删除 OneLake 快捷方式。 相关示例请参阅使用 OneLake 快捷方式 REST API。 |
2024 年 9 月 | 源代码管理的 GitHub 集成 | Fabric 开发人员现在可以选择 GitHub 或 GitHub Enterprise 作为其源代码管理工具,并在那里对 Fabric 项进行版本控制。 有关详细信息,请参阅 Git 集成简介。 |
2024 年 9 月 | Google 云存储的 OneLake 快捷方式 | 创建 Google Cloud Storage 快捷方式,以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。 有关详细信息,请参阅 Google 云存储快捷方式正式发布。 |
2024 年 9 月 | S3 兼容数据源的 OneLake 快捷方式 | 创建 S3 兼容的快捷方式,以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。 有关详细信息,请参阅 S3 兼容的快捷方式正式发布。 |
2024 年 7 月 | 更新 KQL 数据库中的记录(预览版) | .update 命令现已正式发布。 详细了解如何更新 Kusto 数据库中的记录。 |
2024 年 7 月 | 具有时间旅行的仓库查询 (GA) | Microsoft Fabric 中的仓库提供了在语句级别查询过去存在的历史数据的功能,现已正式发布。 从特定时间戳查询数据的能力在数据仓库行业被称为时间旅行。 |
有关较早的 GA 公告,请查看 Microsoft Fabric 新增功能存档。
Community
本部分总结了 Microsoft Fabric 社区为潜在和现有的影响者和 MVP 提供的新机会。
- 注册 Fabric 社区通讯。
- 加入本地 Fabric 用户组或加入本地活动。
- 若要了解 Microsoft MVP 奖并查找 MVP,请参阅 mvp.microsoft.com。
- 你是不是学生? 详细了解 Microsoft Learn 学生大使计划。
- 投票并提出 Microsoft Fabric 想法。
- 访问 Microsoft Fabric 职业中心,了解认证旅程所需的一切,包括 50% 的考试折扣。
- 观看并订阅 YouTube 上的 Microsoft Fabric 视频。
- 在 Microsoft Fabric 社区中提出和回答问题。
注意
Microsoft Fabric 和 AI Learning Hackathon 的截止日期为 2024 年 11 月 12 日。 无论是 AI 爱好者、云计算专家还是数据库专家,这次黑客马拉松都是展示技能和创造力的理想平台。 完成 Microsoft Learn AI 技能挑战赛 (Microsoft Fabric) 并构建一个利用 Azure OpenAI 服务并属于以下黑客马拉松类别之一的新 Fabric 解决方案。 查看 Microsoft Fabric 和 AI Learning Hackathon 的直播活动。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | Fabric 影响者聚焦,2024 年 10 月 | 查看 Microsoft MVP 和 Fabric 超级用户在 2024 年 10 月就 Microsoft Fabric 各个方面做出的出色工作。 |
2024 年 10 月 | Microsoft Fabric 和 AI 学习黑客马拉松:Fabric 中的 Copilot | 作为 Microsoft Fabric 和 AI Learning Hackathon 的一部分,请阅读此指南,其中介绍了 Copilot 在 Microsoft Fabric 中提供的各种功能,它可以帮助你提高工作效率并简化工作流程。 |
2024 年 10 月 | 免费获得 Microsoft Fabric 认证! | 在限定时间内,Microsoft Fabric 社区团队将向符合条件的 Fabric 社区成员提供 5,000 张免费 DP-600 考试券。 年底前完成考试,加入认证专家的行列。 |
2024 年 10 月 | DP-700:使用 Microsoft Fabric 实现数据工程解决方案(beta 版) | 新的 Microsoft 认证:Fabric 数据工程师关联认证有助于展示在 Fabric 中进行数据引入、转换、管理、监控和性能优化的技能。 要了解更多信息,请参阅 DP-700:使用 Microsoft Fabric(beta 版)实施数据工程解决方案。 |
2024 年 10 月 | FabCon Europe 2024 | 阅读欧洲首届 Fabric 社区会议回顾和数据工厂公告回顾。 |
2024 年 10 月 | Fabric 影响者聚焦,2024 年 9 月 | Fabric 影响者聚焦,2024 年 9 月重点介绍了互联网上 Microsoft MVP 和 Fabric 超级用户在 Microsoft Fabric 各个方面做出的出色工作。 |
2024 年 9 月 | 公告:推出 Microsoft Fabric 和 AI 学习黑客马拉松 | 为 Microsoft Fabric 和 AI 学习黑客马拉松做准备! 我们呼吁所有数据/AI 爱好者和数据/AI 从业者加入我们,获得另一个激动人心的机会,使用 Microsoft Fabric 提升技能并构建下一代数据 + AI 解决方案! 黑客马拉松开放 7 周的提交期,并提供总计 10,000 美元的奖金! |
2024 年 8 月 | Fabric 影响者聚焦,2024 年 8 月 | Fabric 影响者聚焦,2024 年 8 月重点介绍并详述了来自 Fabric 社区的 Microsoft MVP 和 Fabric 超级用户成员发布的与 Microsoft Fabric 相关的博客文章、视频、演示文稿和其他内容。 |
2024 年 8 月 | Fabric 社区贴纸挑战赛获胜者 | 祝贺 Fabric 社区贴纸挑战赛的获胜者! |
2024 年 7 月 | Fabric 影响者聚焦 | 推出新的 Fabric 影响者聚焦系列文章,重点介绍和推广与 Microsoft Fabric 相关的博客文章、视频、演示文稿和其他内容。 阅读来自 Fabric 社区的 Microsoft MVP 和 Fabric 超级用户博客。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
Power BI
重要
如果在低于 Chrome 94、Edge 94、Safari 16.4、Firefox 93 或等效版本的 Web 浏览器版本上访问 Power BI,则需要在 2024 年 8 月 31 日之前将 Web 浏览器升级到较新版本。 在此日期之后使用过时的浏览器版本可能会阻止访问 Power BI 中的功能。
Power BI Desktop 和 Power BI 服务的更新在“Power BI 有什么新功能?”中得到了汇总。
Microsoft Fabric 中的 Microsoft Copilot
通过预览版 Copilot 和其他生成式 AI 功能,Microsoft Fabric 带来了一种转换和分析数据、生成见解以及创建可视化效果和报表的新方法。 有关详细信息,请参阅 Fabric 中的 Copilot。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | Microsoft Fabric 和 AI 学习黑客马拉松:Fabric 中的 Copilot | 作为 Microsoft Fabric 和 AI Learning Hackathon 的一部分,请阅读此指南,其中介绍了 Copilot 在 Microsoft Fabric 中提供的各种功能,它可以帮助你提高工作效率并简化工作流程。 |
2024 年 10 月 | 使用 Azure OpenAI 将白板草图转换为数据管道 | 阅读此博客,了解如何通过 Azure OpenAI 服务使用 GPT-4o 模型将白板草图转换为数据管道。 |
2024 年 9 月 | 通过 Copilot 创建实时仪表板 | Copilot 可以查看表格并自动创建包含见解和数据配置文件的仪表板(带有示例)。 |
2024 年 9 月 | Dataflow Gen2 中的 Copilot GA | 适用于数据工厂的 Copilot 现已正式发布,并包含在 Dataflow Gen2 体验中。 有关详细信息,请参阅面向数据工厂的 Copilot。 |
2024 年 9 月 | Copilot用于数据仓库 | Copilot 数据仓库(预览版)现已推出,提供 Copilot 聊天窗格、快速操作和代码补全。 有关详细信息和示例应用场景,请参阅公告:Microsoft Fabric 中适用于数据仓库的 Copilot 推出预览版。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
Microsoft Fabric 中的数据工厂
本部分汇总了 Microsoft Fabric 中的数据工厂的最新特性和功能。 通过数据工厂社区论坛关注问题和反馈。
Month | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 虚拟网络数据网关的新功能和增强功能 | 我们很高兴地宣布虚拟网络 (VNET) 数据网关的多项强大更新,旨在进一步提高性能并改善整体用户体验。 |
2024 年 10 月 | 回顾欧洲 Fabric 社区大会上关于数据工厂的公告 | 阅读回顾 2024 年欧洲 Fabric 社区大会上关于数据工厂的公告。 |
2024 年 9 月 | Dataflow Gen2 中的 Copilot GA | 适用于数据工厂的 Copilot 现已正式发布,并包含在 Dataflow Gen2 体验中。 有关详细信息,请参阅面向数据工厂的 Copilot。 |
2024 年 9 月 | Dataflow Gen2 中的快速复制功能 GA | 快速复制功能现已正式发布。 有关详细信息,请阅读公告:Dataflows Gen2 中的快速复制功能正式发布。 |
2024 年 9 月 | Dataflow Gen2 的增量刷新(预览版) | Fabric 数据工厂中 Dataflows Gen2 的增量刷新旨在优化数据引入和转换,尤其是在数据不断扩展的情况下。 有关详细信息,请参阅预览版发布:Dataflow Gen2 中的增量刷新。 |
2024 年 9 月 | 认证连接器更新 | 更新后的 Dataflow Gen2 连接器已发布,同时发布了更新后的适用于 Salesforce 和 Vertica 的数据管道连接器。 有关详细信息,请参阅认证连接器更新。 |
2024 年 9 月 | 本地数据网关中的 Fabric 管道集成 GA | Microsoft Fabric 中数据管道的本地连接现已正式发布。 了解如何在 Microsoft Fabric 的数据工厂中访问本地数据源。 |
2024 年 9 月 | 在数据管道中调用远程管道(预览版) | 现在可以使用调用管道(预览版)活动从 Azure Data Factory 或 Synapse Analytics 管道调用管道。 此功能让你可以通过此新的“调用管道”活动,以内联方式调用 Fabric 管道中的现有 ADF 或 Synapse 管道,从而利用该管道。 |
2024 年 9 月 | Spark 作业环境参数 | 现在可以通过会话标记重复使用现有的 Spark 会话。 在 Fabric Spark 笔记本活动中,标记 Spark 会话,然后使用相同的标记重用现有会话。 |
2024 年 9 月 | Fabric 中的 Azure 数据工厂项目(预览版) | 现在可以将现有的 Azure 数据工厂 (ADF) 带到 Fabric 工作区。 通过此新的预览功能,可以从 Fabric 工作区连接到现有的 Azure 数据工厂。 在 Fabric 数据工厂工作区中选择“创建 Azure 数据工厂”,然后可以直接从 Fabric 工作区管理 Azure 数据工厂。 |
2024 年 9 月 | 复制作业(预览版) | 复制作业(预览版)优于传统的复制活动。 有关详细信息,请参阅预览版发布:Microsoft Fabric 中的复制作业。 有关教程,请参阅了解如何在 Microsoft Fabric 的数据工厂中创建复制作业(预览版)。 |
2024 年 9 月 | Fabric 数据工厂中的湖屋连接器引入了架构支持 | Fabric 湖屋支持创建自定义架构。现在,使用 Fabric 数据工厂中的湖屋连接器从湖屋表读取数据时,会自动包含自定义架构信息。 |
2024 年 9 月 | 适用于 Fabric 数据工厂的 Snowflake 连接器中的存储集成支持 | 现在可以使用安全的集中式方法将 Snowflake 与外部存储解决方案(例如 Azure Blob 存储)连接起来。 有关详细信息,请参阅 Snowflake SQL 存储集成。 |
2024 年 9 月 | 2024 年第三季度发布新的数据工厂连接器 | 新的数据工厂连接器包括 Salesforce、Azure MySQL 数据库和 Azure Cosmos DB for MongoDB。 |
2024 年 8 月 | 认证连接器更新 | 更新后的 Dataflow Gen2 连接器已发布,同时发布了两个新的适用于 Salesforce 和 Vertica 的数据管道连接器。 有关详细信息,请参阅 2024 年 8 月认证的连接器更新。 |
2024 年 8 月 | 数据仓库连接器支持 TLS 1.3 | 数据仓库连接器现在支持 TLS 1.3,即传输层安全协议的最新版本。 |
2024 年 8 月 | 通过数据管道中的现代获取数据体验连接到 Azure 资源 | 可以轻松利用数据管道的现代数据体验自动浏览并连接到 Azure 资源。 |
2024 年 7 月 | 使用 OneLake Datahub 集成中的现有连接 | 现在可以从 OneLake Datahub 中选择任何现有连接,而不仅仅是最近和收藏的连接。 这样,从数据管道中的新式获取数据主页可更轻松地访问数据源。 有关详细信息,请参阅新式获取数据体验。 |
2024 年 7 月 | Snowflake 存储集成 | 连接并集成 Snowflake 的存储集成,以简化数据工作流并优化所有暂存应用场景的性能,而无需让外部存储暂存数据集。 有关详细信息,请参阅 Snowflake 连接器。 |
2024 年 7 月 | 编辑数据管道的 JSON 代码 | 现在可以在 Fabric 中编辑数据工厂管道后面的 JSON。 设计低代码管道工作流时,直接编辑可视化管道画布后面的 JSON 代码可提高灵活性并缩短市场时间。 |
2024 年 7 月 | Dataflow Gen2 认证的连接器更新 | 已发布新的和更新的 Dataflow Gen2 连接器,包括 Fabric 数据工厂数据管道中的两个新连接器:Azure My SQL 数据库连接器和 Azure Cosmos DB for MongoDB 连接器。 有关详细信息,请参阅 2024 年 7 月认证的连接器更新。 |
2024 年 7 月 | 支持编辑导航步骤 | 在“查询设置”窗格的“已应用步骤”部分中引入一种在数据流中编辑导航步骤的新体验,以连接到其他对象。 有关详细信息,请参阅编辑导航步骤。 |
2024 年 7 月 | “管理连接”中的全局视图 | 使用“管理连接”中新的全局视图,可以查看 Fabric 环境中的所有可用连接,以便无需离开数据流体验即可对其进行修改或删除。 有关详细信息,请参阅“管理连接”中的全局视图。 |
2024 年 7 月 | 在 Dataflow Gen2 中使用本地数据网关支持快速复制 | Dataflow Gen2 中的快速复制功能(预览版)现在支持使用网关访问本地数据存储,可使用 Dataflow Gen2 中的快速复制功能访问 SQL Server 等本地存储。 |
2024 年 7 月 | Fabric API for GraphQL(预览版)定价 | Fabric 中的 API for GraphQL 将于 2024 年 7 月 12 日作为现有 Power BI Premium 或 Fabric 容量的一部分开始计费。 使用 Fabric 容量指标应用以名称“Query”跟踪 API for GraphQL 操作的容量使用情况。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
Microsoft Fabric 中的数据工厂示例和指南
Month | 功能 | 了解详细信息 |
---|---|---|
2024 年 9 月 | 将 SAP 数据集成到 Microsoft Fabric 中 | 详细了解 Microsoft Fabric 中的 SAP 数据选项概述,以及有关相应用例的一些指导。 |
2024 年 7 月 | 使用数据管道新式“获取数据”体验从 Fabric 连接到 Azure 资源 | 了解如何使用数据管道的新式“获取数据”体验自动连接到 Azure 资源。 |
2024 年 7 月 | Fabric 数据管道 - 高级计划技术(第 2 部分:在特定日期运行管道) | 此博客提供了一个教程,介绍如何在每月的特定日期安排管道,包括月份的开始时间以及月份的最后一天。 |
Microsoft Fabric 中的 Synapse 数据工程
本节总结了 Microsoft Fabric 中的数据工程工作负载的最新特性和功能。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 无需额外付费即可使用本机执行引擎 | 本机执行引擎现在无需额外付费即可使用。 本机执行引擎现支持 Fabric Runtime 1.3,其中包括 Apache Spark 3.5 和 Delta Lake 3.2。 此次升级增强了 Microsoft Fabric 的数据工程和数据科学工作流程,提高了性能和灵活性。 |
2024 年 10 月 | 使用 OneLake 快捷方式访问跨容量数据:即使生产容量已暂停 | 了解通过快捷方式访问(尤其是跨容量访问)数据时,OneLake 容量消耗的工作原理。 |
2024 年 10 月 | Purview 数据丢失预防策略已扩展到 Fabric 湖屋 | 将 Microsoft Purview 的数据丢失预防 (DLP) 策略扩展到 Fabric 湖屋的功能现已处于预览阶段。 |
2024 年 10 月 | 对服务主体名称 (SPN) 的 API for GraphQL 支持 | 服务主体名称 (SPN) 对 API for GraphQL 的支持使希望将其应用与 Microsoft Fabric 中的 API for GraphQL 集成的组织能够与其企业身份和访问管理系统无缝结合。 有关详细信息,请参阅 Fabric API for GraphQL 中的服务主体名称 (SPN)。 |
2024 年 10 月 | API for GraphQL 中的自动代码生成 | Fabric API for GraphQL 现在添加了基于在 API Explorer 中测试的 GraphQL 查询自动生成 Python 和 Node.js 代码的功能。 |
2024 年 10 月 | 笔记本 Git 集成 GA | 笔记本 Git 集成现在支持在同步到新工作区时保留附加环境的映射关系。 有关详细信息,请参阅笔记本源代码管理和部署 |
2024 年 10 月 | 部署管道中的笔记本 GA | 现在,还可以使用笔记本跨不同环境(例如开发、测试和生产)部署代码。 还可以使用部署规则来自定义部署笔记本时的行为,例如更改笔记本的默认湖屋。 开始使用部署管道,笔记本将自动在部署内容中显示。 |
2024 年 10 月 | Org APP 中的笔记本 | Org APP 现在支持笔记本功能。 可以轻松地在 OrgAPP 中嵌入笔记本代码和 markdown 单元格、视觉效果、表格、图表和小部件,作为一种实用的故事讲述工具。 |
2024 年 10 月 | 笔记本登录教程 | 新的笔记本登录教程现已推出。 此导览旨在帮助你开始使用基本的笔记本功能并了解新功能。 |
2024 年 10 月 | 笔记本模式切换器 | 笔记本模式切换器为笔记本提供了灵活的访问模式(开发、仅运行、编辑、查看),有助于轻松管理对笔记本和相应视图的权限。 |
2024 年 10 月 | display() 表视图上的自由选择支持 | 笔记本中丰富的数据帧预览上的自由选择功能可以改善数据分析体验。 若要查看新功能,请阅读 display() 表格视图上的自由选择支持。 |
2024 年 10 月 | 筛选、排序和搜索湖屋对象 | 排序、筛选和搜索功能可以在湖屋环境中根据特定条件快速检索所需信息,从而使数据探索和分析更加高效。 |
2024 年 9 月 | Fabric 运行时 1.3 GA | Fabric 运行时 1.3(现已正式发布)包括 Apache Spark 3.5、Delta Lake 3.1、R 4.4.1、Python 3.11、对 Starter Pools 的支持、与 Environment 的集成以及库管理功能。 有关详细信息,请参阅 Fabric 运行时 1.3 正式发布!。 |
2024 年 9 月 | 运行时 1.3 上的本机执行引擎(预览版) | Fabric Runtime 1.3 的本机执行引擎现已推出预览版,可在数据处理、ETL、数据科学和交互式查询中提供卓越的查询性能。 无需更改代码,即可加快使用本机执行引擎时,Apache Spark 作业的执行速度。 |
2024 年 9 月 | 管道中笔记本的高并发模式(预览版) | 管道中笔记本的高并发模式使用户能够在管道内的多个笔记本之间共享 Spark 会话。 使用高并发模式,用户可以触发管道作业,这些作业会自动打包到现有的高并发会话中。 |
2024 年 9 月 | 为作业保留最大核心(预览版) | 新的工作区级别设置让你可以为 Spark 工作负载的活动作业保留最大核心。 有关详细信息,请参阅 Apache Spark for Fabric 中的高并发模式。 |
2024 年 9 月 | 工作区设置中用于笔记本交互式运行的会话到期控制(预览版) | 数据工程/科学工作区设置中的新会话到期控制可设置笔记本交互式会话的最大到期时间限制。 默认情况下,会话会在 20 分钟后到期,但是现在可以自定义最大到期时间。 |
2024 年 9 月 | Fabric Spark 诊断发射器(预览版) | Fabric Apache Spark 诊断发射器(预览版)使 Apache Spark 用户能够从 Spark 应用程序中收集日志、事件日志和指标,并将它们发送到各种目标,包括 Azure 事件中心、Azure 存储和 Azure 日志分析。 |
2024 年 9 月 | 与 Synapse VS Code 扩展的环境集成 | 现在,可以借助 Synapse VS Code 扩展在 VS Code 的 Fabric 中创建、配置和使用环境。 |
2024 年 9 月 | vscode.dev 中的笔记本调试(预览版) | 现在可以在 vscode.dev 中使用 Synapse VS Code - Remote 扩展放置断点并调试笔记本代码。 此更新首先从 Fabric Runtime 1.3 开始。 |
2024 年 9 月 | 在笔记本中调用 Fabric 用户数据函数 | 现在可以直接从 Microsoft Fabric 笔记本或 Spark 作业调用 PySpark 代码中的用户定义函数 (UDF)。 通过 NotebookUtils 集成,调用 UDF 就像编写几行代码一样简单。 |
2024 年 9 月 | 函数中心 | 新的函数中心让你可以在一个位置集中查看、访问和管理用户数据函数。 |
2024 年 9 月 | 支持湖屋 Delta 表名中使用空格 | 现在可以创建和查询名称中带有空格的 Delta 表,例如“按地区销售”或“客户反馈”。 所有 Fabric 运行时和 Spark 创作体验都支持带空格的表名。 |
2024 年 9 月 | 在 API 中启用/禁用 GraphQL 功能 | GraphQL API 中针对查询和突变的启用/禁用功能为管理员和开发人员提供了对 API 访问和使用的精细控制。 |
2024 年 9 月 | Livy 终结点的公共 REST API | Fabric Livy 终结点允许用户在指定 Fabric 工作区内的 Spark 计算上提交和执行其 Spark 代码,而无需创建任何笔记本或 Spark 作业定义。 |
2024 年 9 月 | OneLake SAS(预览版) | 对 OneLake SAS 的支持现在处于预览阶段。 此功能允许应用程序请求由 Microsoft Entra ID 支持的用户委托密钥,然后使用此密钥构造一个短暂的、用户委托的 OneLake SAS 令牌。 可以移交此令牌,以向另一个工具、节点或用户提供委托访问权限,从而确保安全且受控的访问。 |
2024 年 9 月 | 从 Fabric 访问 Databricks Unity Catalog 表(预览版) | Fabric 中的镜像 Azure Databricks Unity Catalog 支持从湖屋的 Fabric 工作负载中读取由 Unity Catalog 管理的数据。 现在,你可以在 Fabric 中创建一个名为“镜像 Azure Databricks Catalog”的新数据项。 有关详细信息,请参阅 Microsoft Fabric 中提供的 Databricks Unity Catalog 表。 |
2024 年 9 月 | Fabric 笔记本中的 T-SQL 支持 | Microsoft Fabric 中的 T-SQL 笔记本功能支持在笔记本中编写和运行 T-SQL 代码。 可以使用它们来管理复杂查询并编写更好的 markdown 文档。 它还允许在连接的仓库或 SQL 分析终结点上直接执行 T-SQL。 若要了解详细信息,请参阅创作和运行 T-SQL 笔记本。 |
2024 年 9 月 | Google 云存储的 OneLake 快捷方式 | 创建 Google 云存储的快捷方式功能现已正式发布,该功能可以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。 |
2024 年 9 月 | S3 兼容数据源的 OneLake 快捷方式 | 创建 S3 兼容快捷方式功能现已正式发布,该功能可以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。 |
2024 年 8 月 | MsSparkUtils 升级到 NotebookUtils | MsSparkUtils 库已更名为 NotebookUtils。 尽管 NotebookUtils 与 MsSparkUtils 向后兼容,但新功能只会添加到 NotebookUtils 命名空间。 有关更多信息,请参阅用于 Fabric 的 NotebookUtils(前身为 MSSparkUtils)。 |
2024 年 8 月 | 导入笔记本 UX 改进 | 导入笔记本功能用户界面已得到增强 - 现在可以使用工作区工具栏中的统一条目轻松导入笔记本、报告或分页报表。 |
2024 年 8 月 | Fabric 中的 Apache Spark 运行时的生命周期 | Apache Spark 运行时的生命周期文档详细介绍了基于 Azure Spark 的 Azure 集成平台的发布节奏和版本控制。 有关详细信息,请参阅“Fabric 运行时生命周期”博客文章。 |
2024 年 7 月 | MSSparkUtils API | mssparkutils.runtime.context 是一个新 API,它提供当前实时会话的上下文信息,包括笔记本名称、默认湖屋、工作区信息、是否是管道运行等。有关详细信息,请参阅适用于 Fabric 的 Microsoft Spark 实用程序 (MSSparkUtils)。 |
2024 年 7 月 | 环境资源文件夹 | 新的环境资源文件夹是一个共享存储库,旨在简化跨多个笔记本的协作。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
Synapse 数据工程示例和指南
Month | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 在 Microsoft Fabric 中优化适用于 Medallion 架构的 Spark Compute | 了解如何优化适用于 Medallion 架构的 Spark Compute:一种强调模块化的流行数据工程方法。 它将数据平台组织为三个不同的层:青铜、白银和黄金。 |
2024 年 8 月 | 构建自定义 Sparklens JAR | 在此博客中,你将学习如何为 Spark 3.X 构建可在 Microsoft Fabric 中使用的 sparklens JAR。 |
2024 年 7 月 | 创建指向受 VPC 保护的 S3 存储桶的快捷方式 | 了解如何使用本地数据网关和 AWS 虚拟私有云 (VPC) 创建受 VPC 保护的 S3 存储桶的快捷方式。 |
2024 年 7 月 | 使用 Fabric 数据管道的新式“获取数据”跨工作区移动数据 | 数据管道新的新式“获取数据”体验现在支持在具有直观体验的不同工作区之间复制到 Lakehouse 和仓库。 |
Microsoft Fabric 中的 Synapse 数据科学
本节总结了 Microsoft Fabric 中数据科学的最新改进和功能。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 增强开放源代码:Fabric 对 FLAML 可扩展 AutoML 的贡献 | 我们专注于增强 FLAML 对 Spark 工作负载的功能。 我们为 FLAML 项目贡献了几个新的 Spark 和非 Spark 估算器。 使用 Fabric 中的 AutoML(预览版)试用一下。 |
2024 年 9 月 | 适用于 Spark DataFrames 的数据整理器正式版 | 数据整理器现已正式发布。 数据整理器是一种基于笔记本的探索性数据分析工具,适用于 pandas DataFrames 和 Spark DataFrames,该工具现已正式发布,并提供新的可用性改进。 |
2024 年 9 月 | Fabric AI 技能的共享功能(预览版) | Fabric AI 技能的“共享”功能(预览版)让你可以使用各种权限模型与他人共享 AI 技能。 |
2024 年 9 月 | 工作区设置中用于笔记本交互式运行的会话到期控制(预览版) | 数据工程/科学工作区设置中的新会话到期控制可设置笔记本交互式会话的最大到期时间限制。 默认情况下,会话会在 20 分钟后到期,但是现在可以自定义最大到期时间。 |
2024 年 9 月 | 笔记本中的文件编辑器 | Fabric 笔记本中的文件编辑器功能允许用户直接在笔记本的资源文件夹和环境资源文件夹中查看和编辑文件。 支持的文件类型包括 CSV、TXT、HTML、YML、PY、SQL 等。 |
2024 年 8 月 | 在 ML 实验运行和模型版本上应用 MLFlow 标记 | 现在可以从用户界面直接在 ML 实验运行和 ML 模型版本上应用 MLflow 标记。 |
2024 年 8 月 | 在 Spark 应用程序中跟踪相关的 ML 实验运行 | 现在可以 使用监控中心的增强功能来跟踪 Spark 应用程序中 的相关 ML 试验运行。 还可以将试验项目集成到监控中心。 |
2024 年 8 月 | 将 PREDICT 与 Fabric AutoML 模型结合使用 | 现在可以从使用 AutoML 进行训练转变为使用内置的 Fabric PREDICT UI 和代码优先 API 进行批量预测。 有关详细信息,请参阅使用 Microsoft Fabric 中的 PREDICT 进行机器学习模型评分。 |
2024 年 8 月 | 数据科学 AI 技能(预览版) | 现在,可以使用 AI 技能在 Fabric 中基于数据构建自己的生成式 AI 体验(预览版)! 可以在湖屋和仓库上构建问答 AI 系统。 有关详细信息,请参阅 Microsoft Fabric 中的 AI 技能简介:现已推出预览版。 首先,请试用 AdventureWorks 数据集的 AI 技能示例。 |
2024 年 7 月 | 预安装的语义链接 | 语义链接现在包含在默认运行时中。 如果将 Fabric 与 Spark 3.4 或更高版本配合使用,则语义链接已在默认运行时中,无需安装它。 |
2024 年 7 月 | 语义链接实验室 | 语义链接实验室是一个有用的 python 解决方案库,可用于 Microsoft Fabric 笔记本。 语义链接实验室可帮助 Power BI 开发人员和管理员轻松自动执行以前复杂的任务,并使语义模型优化工具在 Fabric 生态系统中更容易访问。 有关语义链接实验室文档,请参阅 semantic-link-labs 文档。 如需了解更多信息并查看其实际效果,请阅读语义链接实验室公告博客。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
Synapse 数据科学示例和指南
Month | 功能 | 了解详细信息 |
---|---|---|
2024 年 9 月 | 使用 Microsoft Fabric 进行生成式 AI:构建和改进 RAG 系统的指南 | 本教程包含三个主要笔记本,每个笔记本都涵盖在 Microsoft Fabric 中构建和优化 RAG 系统的一个重要方面。 |
2024 年 9 月 | 利用 Microsoft Fabric AI 技能从数据中解锁丰富的上下文见解 | 这篇文章演示了如何扩展 Microsoft Fabric 笔记本中 Fabric AI 技能的功能,以使用额外的大型语言模型 (LLM) 查询提供更丰富、更全面的响应。 |
Microsoft Fabric 中的 Synapse 数据仓库
本部分汇总了 Microsoft Fabric 中的 Synapse Data Warehouse 的最新改进和功能。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 支持不区分大小写的排序规则 | 默认情况下,仓库的排序规则区分大小写 (CS),使用“Latin1_General_100_BIN2_UTF8”。 现在可以创建具有不区分大小写 (CI) 排序规则的仓库。 |
2024 年 10 月 | varchar(max) 和 varbinary(max) 支持处于预览阶段 | 对仓库中 varchar(max) 和 varbinary(max) 数据类型的支持现已处于预览阶段。 有关详细信息,请参阅公告:Fabric 数据仓库中的 VARCHAR(MAX) 和 VARBINARY(MAX) 类型推出公开预览版。 |
2024 年 10 月 | 并发性能改进 | 我们最近优化了分布式查询处理引擎 (DQP) 中的任务调度算法,以减少工作区处于中度到重度并发时的争用。 在测试中,我们观察到这种优化显著提高了查询工作负载的性能。 |
2024 年 10 月 | JSON 支持增强 | 湖屋和镜像数据库的仓库和 SQL 分析终结点中的 JSON 功能已得到改进。 有关详细信息,请参阅 JSON 支持增强。 |
2024 年 10 月 | 嵌套公共表表达式 (CTE)(预览版) | Fabric Warehouse 和 SQL 分析终结点都支持标准、顺序和嵌套 CTE。 尽管 CTE 已在 Microsoft Fabric 中正式可用,但 Fabric 数据仓库 (Transact-SQL) 中的嵌套公共表表达式 (CTE) 目前是预览功能。 |
2024 年 9 月 | Snowflake 镜像 GA | 借助 Fabric 中的 Snowflake 镜像,可以轻松地将 Snowflake 数据导入 Microsoft Fabric 中的 OneLake。 有关详细信息,请参阅镜像 Snowflake。 |
2024 年 9 月 | Copilot用于数据仓库 | 适用于数据仓库的 Copilot(预览版)现已更新并作为预览功能提供,提供 Copilot 聊天窗格、快速操作和代码补全。 |
2024 年 9 月 | SQL 分析终结点中的 Delta 列映射 | SQL 分析终结点现在支持已启用列映射的 Delta 表。 有关详细信息,请参阅 Delta 列映射和 SQL 分析终结点的限制。 此功能目前以预览版提供。 |
2024 年 9 月 | SQL 分析终结点钟的湖屋架构 | 湖屋架构允许在 SQL 分析终结点中查询架构中的 Delta 表。 有关详细信息,请参阅湖屋架构功能(预览版)。 |
2024 年 9 月 | 适用于 Fabric 数据仓库的 Fabric Spark 连接器的新功能(预览版) | 适用于 Fabric 数据仓库的 Fabric Spark 连接器(预览版)现在支持自定义或传递查询、PySpark 和 Fabric Runtime 1.3 (Spark 3.5)。 |
2024 年 9 月 | 新的编辑器改进 | 仓库和 SQL 分析终结点项目的编辑器改进提高了一致性和效率。 有关详细信息,请参阅新的编辑器改进。 |
2024 年 9 月 | Fabric 笔记本中的 T-SQL 支持(预览版) | Microsoft Fabric 中的 T-SQL 笔记本功能(预览版)支持在笔记本中编写和运行 T-SQL 代码。 可以使用它们来管理复杂查询并编写更好的 markdown 文档。 它还允许在连接的仓库或 SQL 分析终结点上直接执行 T-SQL。 若要了解详细信息,请参阅创作和运行 T-SQL 笔记本。 |
2024 年 9 月 | 嵌套公共表表达式 (CTE)(预览版) | Fabric Warehouse 和 SQL 分析终结点都支持标准、顺序和嵌套 CTE。 尽管 CTE 已在 Microsoft Fabric 中正式可用,但仓库中的嵌套公共表表达式 (CTE) 目前是预览功能。 |
2024 年 9 月 | 镜像 Azure Databricks(预览版) | Fabric 中的镜像 Azure Databricks Unity Catalog 支持从湖屋的 Fabric 工作负载中读取由 Unity Catalog 管理的数据。 有关详细信息,请参阅 Microsoft Fabric 中提供的 Databricks Unity Catalog 表。 |
2024 年 8 月 | 与新式获取数据体验的镜像集成 | 现在可以使用新式获取数据体验从 OneLake 数据中心中所有可用的镜像数据库中进行选择。 |
2024 年 8 月 | Azure SQL 数据库镜像数据库中的 T-SQL DDL 支持 | 现在可以在 Azure SQL 数据库镜像数据库上运行 DDL 操作,例如删除表、重命名表和重命名列。 |
2024 年 8 月 | 暂停和恢复 Delta Lake 日志发布 | 现在可以暂停和恢复仓库的 Delta Lake 日志发布。 有关详细信息,请参阅 Microsoft Fabric 仓库中的 Delta Lake 日志。 |
2024 年 8 月 | 管理 Fabric 仓库的 V 顺序行为 | 现在可以在仓库级别管理 V 顺序行为。 有关详细信息,请参阅了解 Microsoft Fabric 仓库的 V 顺序。 |
2024 年 8 月 | TRUNCATE T-SQL 支持 | Warehouse 表中现在支持 TRUNCATE T-SQL 命令。 |
2024 年 7 月 | ALTER TABLE 和可为 null 的列支持 | 我们对某些操作添加了 T-SQL ALTER TABLE 支持,并为仓库中的表添加了可为 null 的列支持。 有关详细信息,请参阅 ALTER TABLE (Transact-SQL)。 |
2024 年 7 月 | 具有时间旅行的仓库查询 (GA) | Microsoft Fabric 中的仓库提供了在语句级别查询过去存在的历史数据的功能,现已正式发布。 从特定时间戳查询数据的能力在数据仓库行业被称为时间旅行。 |
2024 年 7 月 | Fabric 门户中的还原仓库体验 | 现在,可以创建还原点并执行就地还原仓库项目。 有关详细信息,请参阅通过仓库还原实现无缝数据恢复。 |
2024 年 7 月 | 仓库源代码管理(预览版) | 使用 Git 集成和/或部署管道与仓库,可以管理版本控制仓库对象的开发和部署。 您可以使用 Azure Data Studio 和 Visual Studio Code 中提供的 SQL 数据库项目扩展。 有关仓库源代码管理的详细信息,请参阅 Microsoft Fabric 中具有仓库的 CI/CD。 |
2024 年 7 月 | 扩展了时间旅行和克隆表保留窗口 | 时间旅行查询和克隆表的保留期现在为 30 天。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
Synapse 数据仓库示例和指南
Month | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 确保 Fabric 仓库中的数据连续性:适用于每种场景的最佳实践 | 深入了解有助于实现无缝端到端数据恢复的常见恢复场景和功能,并讨论确保数据弹性的最佳实践。 |
2024 年 8 月 | 将 SQL Server 数据库镜像到 Fabric | 尽管 SQL Server 目前不支持 Fabric 镜像数据库,但请了解如何使用 SQL Server 事务复制和 Fabric 镜像的组合将 Fabric 镜像扩展到本地 SQL Server 数据库作为源。 |
2024 年 7 月 | Fabric Synapse 数据仓库的 Microsoft Entra 身份验证 | 若要获取使用 Microsoft Entra 作为 SQL 身份验证的替代方法的示例连接字符串和详细信息,请参阅 Microsoft Entra 身份验证作为 SQL 身份验证的替代方法。 |
Microsoft Fabric 中的实时智能
本部分汇总了 Microsoft Fabric 中实时智能的最新改进和功能。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 使用 Eventstream 中的托管专用终结点保护数据流(预览版) | 通过创建 Fabric 托管专用终结点,现在可以安全地将 Eventstream 连接到专用网络内或防火墙后面的 Azure 服务(例如 Azure 事件中心或 IoT Hub)。 有关详细信息,请参阅使用 Eventstream 中的托管专用终结点保护数据流(预览版)。 |
2024 年 10 月 | Data Activator 的使用情况报告现已上线 | Data Activator 团队推出了使用情况报告,以帮助你更好地了解容量消耗和未来费用。 查看容量指标应用时,现在会看到针对所含反射项的操作。 |
2024 年 10 月 | 实时仪表板和底层 KQL 数据库访问分离(预览版) | 通过为仪表板和底层数据提供单独的权限,管理员现在具有灵活性,使用户能够在未被授予对原始数据的访问权限的情况下查看仪表板。 |
2024 年 10 月 | 实时仪表板与 GitHub 的集成 | Fabric 的 Git 集成现已可用于实时仪表板。 有关详细信息,请参阅什么是 Microsoft Fabric Git 集成?。 |
2024 年 10 月 | 快速可视化 KQL 查询集中的查询结果 | 现在可以即时且轻松地以图形方式可视化 KQL 查询集结果并控制格式,而无需重新运行查询 — 所有这些都可使用熟悉的 UI 完成。 |
2024 年 10 月 | 将查询固定到仪表板 | 现在可以将用 KQL 查询集编写的任何查询的结果直接保存到新的或现有的实时仪表板。 |
2024 年 9 月 | 通过 Copilot 创建实时仪表板 | Copilot 可以查看表格并自动创建包含见解和数据配置文件的仪表板(带有示例)。 |
2024 年 9 月 | 新的实时中心和 KQL 数据库用户体验 | 新的用户体验包括新的实时中心导航、“我的流”页面、增强的数据库页面体验等。 |
2024 年 9 月 | Eventhouse 作为 Eventstream 中的新目标 | 配备 KQL 数据库的 Eventhouses 可以处理和分析大量数据。 借助 Eventstream 中的 Eventhouse 目标,可以高效地处理数据流并将其路由到 Eventhouse,并使用 KQL 近乎实时地分析数据。 |
2024 年 9 月 | Eventstream 的托管专用终结点 | 使用 Fabric 托管的专用终结点,现在可以在 Azure 服务(例如 Azure 事件中心)和 Fabric Eventstream 之间建立专用连接。 有关详细信息,请参阅 Eventstream 与托管专用终结点的集成。 |
2024 年 9 月 | KQL 查询集上的 Data Activator 警报 | 现在,可以直接在 KQL 查询集中的 KQL 查询上设置 Data Activator(预览版)警报。 有关详细信息和示例,请参阅从 KQL 查询集创建 Data Activator 警报(预览版)。 |
2024 年 9 月 | 实时仪表板连续或 10 秒刷新率 | 除了现有选项外,仪表板自动刷新功能现在还支持连续和 10 秒刷新率。 此升级可满足常见的客户请求,使编辑者和查看者可以设置近实时和实时数据更新。 |
2024 年 9 月 | 多变量异常情况检测 | 一种用于时间序列数据多变量异常检测的全新工作流程,基于 AI 异常检测器服务(即将作为独立服务停用)中使用的算法。 有关教程,请参阅多变量异常检测。 |
2024 年 9 月 | 实时智能 Copilot 对话模式 | 可将自然语言翻译成 KQL 的 Copilot 助手现在支持对话模式,允许你在聊天中提出基于先前查询的后续问题。 |
2024 年 9 月 | 实时中心的新连接器和 UI | 2024 年 9 月 24 日发布了四个新连接器:Apache Kafka、Amazon Managed Streaming for Apache Kafka、Azure SQL 托管实例 CDC、SQL Server on VM DB CDC。 实时中心主页中的选项卡将替换为左侧导航菜单上的菜单项。 有关详细信息,请参阅开始使用 Fabric 实时中心。 现在可以使用专用终结点连接到 Azure 流式处理源。 |
2024 年 9 月 | 公告:Eventhouse 标准存储计费 | 从 9 月 16 日当周开始,你将开始看到来自 Eventhouse 和 KQL 数据库项目的 OneLake 存储数据存储计量的可计费消耗。 |
2024 年 8 月 | Fabric 实时中心教学气泡 | 新的教学气泡提供了其主要功能的分步指南。 借助这些交互式指南,你可以无缝导航实时中心的每个选项卡。 有关详细信息,请参阅 Fabric 实时中心教学气泡。 |
2024 年 8 月 | KQL 查询集 REST API 支持 | 新的 Fabric 查询集 REST API 允许你在 Fabric 中创建/更新/删除 KQL 查询集,并以编程方式管理它们,而无需手动干预。 有关详细信息,请参阅 KQL 查询集 REST API 支持。 |
2024 年 7 月 | 更新 KQL 数据库中的记录(预览版) | .update 命令现已正式发布。 详细了解如何更新 Kusto 数据库中的记录。 |
2024 年 7 月 | 实时仪表板 1 秒和 10 秒刷新频率 | 实时仪表板现在仅支持 1 秒或 10 秒的超低刷新频率。 有关详细信息,请参阅创建实时仪表板(预览版)。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
实时智能示例和指南
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 8 月 | Fabric 中的高级时序异常检测器 | 阅读使用 Fabric 中的时序异常检测器的示例,包括将股票变化表上传到 Fabric,使用 Spark 引擎在 Python 笔记本中训练多元异常检测模型,以及通过使用 Eventhouse (Kusto) 引擎将训练好的模型应用于新数据来预测异常。 |
2024 年 8 月 | 使用 Data Activator 通过自定义操作对实时数据执行操作 | 了解如何监视和处理数据的方法是使用 Data Activator,它是 Microsoft Fabric 中的一种无代码体验,用于在数据中检测到包装温度条件时自动执行操作。 |
2024 年 7 月 | 使用 Eventstream 的 CDC 连接器生成实时订单通知 | 阅读一个真实示例,了解在线商店如何使用 Azure SQL 数据库中的 Eventstream CDC 连接器。 |
2024 年 7 月 | 使用 PowerShell 自动执行实时智能 Eventhouse 部署 | 我们来构建一个 PowerShell 脚本,以自动将 Eventhouse、KQL 数据库、表、函数和具体化视图部署到 Microsoft Fabric 中的工作区。 |
Microsoft Fabric 核心功能
Microsoft Fabric 体验的核心新闻和功能公告。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 10 月 | 工作区中的“新建项”面板 | 以前,通过在工作区中选择“+新建”,可以访问一个下拉菜单,其中包含一些预定义的项目类型以开始使用。 现在,“+新建项目”按钮将按任务分类,显示面板中列出的项目类型。 |
2024 年 10 月 | 增强的出口控制租户设置委派 | 现在可以通过域将导出设置委派给工作区。 此新功能可以更精细地控制数据导出权限,满足租户、域和工作区管理员的特定需求。 |
2024 年 10 月 | 托管专用终结点的 API 现已可用 | 托管专用终结点的 REST API 现已可用。 现在可以通过 API 创建、删除、获取和列出托管专用终结点。 |
2024 年 10 月 | Fabric 中的 Copilot 和 AI 即将推出重要的计费更新 | 即将推出定价和计费更新Copilot,使 Fabric 中的 Copilot 和 AI 功能更易于访问且更具成本效益。 |
2024 年 9 月 | 适用于 Fabric 的 Terraform 提供程序(预览版) | 适用于 Microsoft Fabric 的 Terraform 提供程序现已处于预览阶段。 适用于 Microsoft Fabric 的 Terraform 提供程序支持创建和管理多种 Fabric 资源。 有关详细信息,请参阅公告:推出新的适用于 Microsoft Fabric 的 Terraform 提供程序。 |
2024 年 9 月 | 宣布对 Fabric API 的服务主体支持 | 现在可以使用服务主体访问 Fabric API。 服务主体是一种安全标识,可以在 Microsoft Entra 中创建它,并在 Microsoft Entra 和其他 Microsoft 服务(例如 Microsoft Fabric)中为其分配权限。 |
2024 年 9 月 | 标记数据以扩充项目策展和发现 | 标记(预览版)可帮助管理员对数据进行分类和整理,从而增强数据的可搜索性并提高最终用户的成功率和效率。 |
2024 年 9 月 | 任何 Fabric 容量中的受信任工作区访问和托管专用终结点 | 受信任工作区访问和托管专用终结点在任何 Fabric 容量中均可用。 以前,受信任工作区访问和托管专用终结点仅在 F64 或更高容量中可用。 托管专用终结点现在以试用容量提供。 |
2024 年 9 月 | 多租户组织 (MTO)(预览版) | Fabric 现在支持 Microsoft Entra ID 多租户组织 (MTO)。 Microsoft Entra ID 中的多租户组织功能可跨多个租户同步用户,并将他们添加为外部成员类型的用户。 有关详细信息,请参阅使用 Microsoft Entra B2B 将 Power BI 内容分发给外部来宾用户。 |
2024 年 9 月 | Microsoft Fabric 获得 HITRUST CSF 认证 | Microsoft Fabric 现已获得 HITRUST 常见安全框架 (CSF) v11.0.1 认证。 |
2024 年 8 月 | OneLake 数据访问角色改进 | 根据关键反馈,我们通过重新设计用户界面更新了数据访问角色。 有关详细信息,请参阅开始使用 OneLake 数据访问角色(预览版)。 |
2024 年 8 月 | 改进工作区筛选器以支持嵌套文件夹 | 我们已升级筛选器体验,以支持对整个工作区或特定文件夹及其所有嵌套文件夹进行筛选。 |
2024 年 8 月 | 宣布在任何 Fabric 容量中提供受信任的工作区访问和托管专用终结点 | 在具有任何 F 容量的 Fabric 中使用受信任的工作区访问和托管专用终结点,享受安全且经过优化的数据访问和连接的好处。 |
2024 年 7 月 | SOC 认证合规性 | 我们很高兴地宣布,我们面向企业的一体式分析解决方案 Microsoft Fabric 现在符合系统和组织控制 (SOC) 1 类型 II、SOC 2 类型 II 和 SOC 3。 |
2024 年 7 月 | Microsoft Fabric .NET SDK | 我们很高兴地宣布 Microsoft Fabric .NET SDK 的第一个版本! 有关 REST API 文档的详细信息,请参阅 Microsoft Fabric REST API 文档。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
Microsoft Fabric 中的持续集成/持续交付 (CI/CD)
本部分包括有关 Microsoft Fabric 工作区中开发过程、工具、源控件和版本控制的指导和文档更新。
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 9 月 | 源代码管理的 GitHub 集成 | Fabric 开发人员现在可以选择 GitHub 或 GitHub Enterprise(现已正式发布)作为其源代码管理工具,并在其中对 Fabric 项进行版本控制。 有关详细信息,请参阅 Git 集成简介。 |
2024 年 9 月 | 新的部署管道设计 | 部署管道的全新改进设计引入了一系列变化、添加和改进,旨在提升部署流程。 详细了解部署管道中更改的内容。 |
2024 年 7 月 | 源代码管理的 Git 集成(预览版) | Fabric 开发人员现在可以选择 GitHub 或 GitHub Enterprise 作为其源代码管理工具,并在那里对 Fabric 项进行版本控制。 有关详细信息,请参阅 Git 集成入门(预览版)。 |
2024 年 7 月 | Microsoft Fabric .NET SDK | 我们很高兴地宣布 Microsoft Fabric .NET SDK 的第一个版本! 有关 REST API 文档的详细信息,请参阅 Microsoft Fabric REST API 文档。 |
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。
持续集成/持续交付 (CI/CD) 示例
月 | 功能 | 了解详细信息 |
---|---|---|
2024 年 8 月 | 探索 Microsoft Fabric 的 CI/CD 功能 | Microsoft Fabric 的 CI/CD 功能导览,涵盖数据管道、湖屋、笔记本、报告和语义模型。 |
存档
有关较旧的更新,请查看 Microsoft Fabric 新增功能存档。