Microsoft Fabric 中的数据工程文档

Microsoft Fabric 中的数据工程使用户能够设计、构建和维护基础结构和系统，使组织能够收集、存储、处理和分析大量数据。

关于数据工程

概述

• 什么是数据工程？
• 什么是湖屋？
• 工作区角色和权限

湖屋入门

开始使用

• 创建湖屋
• 浏览湖屋资源管理器

操作指南

• 使用笔记本将数据导入湖屋

笔记本入门

开始使用

• Microsoft Fabric 笔记本

操作指南

• 生成和管理笔记本
• 使用笔记本浏览湖屋数据
• 可视化笔记本
• 笔记本源代码管理和部署
• 在笔记本中使用 NotebookUtils
• 创作和运行 T-SQL 笔记本

GraphQL 的 API

概述

• 什么是 Fabric API for GraphQL？

开始使用

• 为 GraphQL 创建 API 并添加数据

操作指南

• 管理关系
• 连接应用程序
• 查询多个数据源

Delta Lake

概念

• 湖屋和增量表

操作指南

• 增量优化和 V 顺序
• 加载到表

湖屋端到端教程

概念

• 湖屋方案概述

教程

• 步骤 1 - 创建工作区
• 步骤 2 - 创建湖屋
• 步骤 3 - 将数据引入湖屋
• 步骤 4 - 将数据转换为增量表
• 步骤 5 - 生成报表
• 步骤 6–清理资源

Apache Spark

概念

• Apache Spark 作业定义
• Spark 监视概述
• Apache Spark 顾问

开始使用

• 创建 Spark 作业定义
• 使用 Fabric API 创建 Spark 作业定义
• Spark 作业定义 Git 集成

操作指南

• 计划和运行 Spark 作业定义
• 监视 Spark 应用程序
• 管理 Apache Spark 库
• 如何使用 Fabric MSSparkUtils
• 配置容量设置

VS Code 集成

操作指南

• 使用 VS Code 中的笔记本
• 使用 VS Code 中的容器映像
• 将 VS Code 中的笔记本与资源一起使用
• 使用 VS Code 中的 Spark 作业定义
• 从 VS Code 探索湖屋
• 从 VS Code Web 体验开发笔记本

环境入门

开始使用

• Microsoft Fabric 环境

操作指南

• 在环境中管理 Spark 计算
• 在环境中管理库
• 环境 Git 集成和部署管道
• 通过公共 API 管理环境
• 管理 Fabric 环境中的资源
• 将现有工作区库和 Spark 属性迁移到环境