Новые возможности Microsoft Fabric? архив
Эта страница архива периодически обновляется с помощью архивирования содержимого из новых версий Microsoft Fabric?
Сведения о последних новостях и функциях Fabric см. в блоге Microsoft Fabric. Кроме того, следуйте последним сведениям в Power BI в статье "Новые возможности Power BI "?
Новые возможности Microsoft Fabric?
В этом разделе содержатся последние статьи и объявления, которые полезны пользователям, новым для Microsoft Fabric.
- Схемы обучения для Fabric
- Начало работы с Microsoft Fabric
- Комплексные учебники в Microsoft Fabric
- Определения терминов, используемых в Microsoft Fabric
| Month | Компонент | Подробнее |
|---|---|---|
| Март 2024 г. | Microsoft Fabric теперь соответствует HIPAA | Мы рады сообщить о том, что Microsoft Fabric, наше решение для аналитики по одному для предприятий, достигло новых сертификатов для HIPAA и ISO 27017, ISO 27018, ISO 27001, ISO 27701, ISO 27701. |
| Март 2024 г. | Экзамен DP-600 теперь доступен | Экзамен DP-600 теперь доступен, что приводит к сертификации Microsoft Certified: Fabric Analytics Engineer Associate. Центр карьеры Fabric поможет вам быстро научиться и получить сертификацию. |
| Март 2024 г. | Ценовая Copilot структура: пример сквозного примера | Copilot В Fabric начинается выставление счетов 1 марта 2024 г. в рамках существующей емкости Power BI Premium или Fabric. Узнайте, как вычисляется использование FabricCopilot. |
| 2024 января | Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных | Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас? |
| Декабрь 2023 г. | Основы безопасности платформы Fabric | Узнайте больше о перспективе архитектуры безопасности Microsoft Fabric, описывая, как основные потоки безопасности в системе работают. |
| Ноябрь 2023 г. | Microsoft Fabric, описанная для существующих пользователей Synapse | Основное внимание уделяется тому, какие клиенты могут ожидать с помощью текущей версии Synapse с использованием текущей версии Platform-as-Service (PaaS). Мы объясним, что означает общая доступность Fabric для ваших текущих инвестиций (спойлер: мы полностью поддерживаем их), но и как думать о будущем. |
| Ноябрь 2023 г. | Microsoft Fabric теперь общедоступен | Microsoft Fabric теперь общедоступен для покупки. Microsoft Fabric может изменить способ работы команд с данными, объединив всех пользователей на одной платформе, на основе ИИ, созданной для эпохи искусственного интеллекта. К ним относятся: Power BI, Фабрика данных, Инжиниринг данных, Обработка и анализ данных, аналитика в режиме реального времени, хранилище данных и общая платформа Fabric. |
| Ноябрь 2023 г. | Рабочие нагрузки Fabric теперь общедоступны! | Microsoft Fabric теперь общедоступен! Хранилище данных Microsoft Fabric Synapse, Инжиниринг данных и Обработка и анализ данных, аналитика в реальном времени, фабрика данных, OneLake и общая платформа Fabric теперь общедоступна. |
| Ноябрь 2023 г. | Реализация архитектуры medallion lakehouse в Microsoft Fabric | Общие сведения о архитектуре озера медальона и о том, как можно реализовать lakehouse в Microsoft Fabric. |
| Октябрь 2023 | Объявление о стратегии структуры | Объявление о стратегии структуры. В одном месте вы можете увидеть, над чем мы работаем, и когда вы можете ожидать, что он будет доступен. |
| Октябрь 2023 | Начало работы с семантической ссылкой | Узнайте, как семантическая связь легко подключает семантические модели Power BI с помощью Synapse Обработка и анализ данных в Microsoft Fabric. Дополнительные сведения см. в разделе "Семантическая ссылка" в Microsoft Fabric: объединение бизнес-аналитики и Обработка и анализ данных. Вы также можете ознакомиться с примерами семантических записных книжек, которые теперь доступны в репозитории GitHub для примеров структуры. Эти записные книжки демонстрируют использование библиотеки Python семантики SemPy в Microsoft Fabric. |
| Сентябрь 2023 | Емкости Fabric — все, что вам нужно знать о новых возможностях и о том, что происходит | Узнайте больше об улучшениях, которые мы делаем на платформе управления емкостью Fabric для пользователей Fabric и Power BI. |
| Август 2023 г. | Доступ к Microsoft Fabric для разработчиков, стартапов и предприятий! | Узнайте, как включить Microsoft Fabric в качестве разработчика, как стартап или как предприятие имеет различные шаги. Узнайте больше о включении Microsoft Fabric для разработчиков, стартапов и предприятий. |
| Август 2023 г. | Сильный, полезный, красивый: проектирование нового способа получения данных | В команде разработчиков Интеграция данных вы узнаете о сильном, творческом и функциональном проектировании Microsoft Fabric в качестве проектов Майкрософт для будущего интеграции данных. |
| Август 2023 г. | Learn Live: Начало работы с Microsoft Fabric | Вызов всех профессионалов, энтузиастов и учащихся! 29 августа мы начнем с серии "Learn Live: Приступая к работе с Microsoft Fabric" в партнерстве с командами Microsoft Data Advocacy и командами Microsoft WorldWide Learning для доставки 9x динамических потоковых занятий, посвященных Microsoft Fabric! |
| Июль 2023 г. | Пошаговое руководство. Создание etLs с помощью Microsoft Fabric | В этом комплексном руководстве мы рассмотрим процесс создания конвейеров Extract, Transform, Load (ETL) с помощью Microsoft Fabric. |
| Июнь 2023 г. | Получение навыка в Microsoft Fabric — платформа аналитики, на основе искусственного интеллекта | Кто является Fabric для? Как получить навыки? В этой записи блога приводятся ответы на эти вопросы о Microsoft Fabric, комплексном решении аналитики данных, объединяя множество возможностей на одной платформе. |
| Июнь 2023 г. | Знакомство с комплексными сценариями в Microsoft Fabric | В этом блоге мы рассмотрим четыре комплексных сценария, которые являются типичными путями, которые наши клиенты принимают для извлечения ценности и аналитических сведений из своих данных с помощью Microsoft Fabric. |
| Май 2023 г. | Начало работы с Microsoft Fabric — все в одном месте для всех ваших аналитических потребностей | Технический обзор и общие сведения обо всем, от перемещения данных до обработки и анализа данных в режиме реального времени и бизнес-аналитики в Microsoft Fabric. |
| Май 2023 г. | Microsoft OneLake в Fabric, OneDrive для данных | Microsoft OneLake приносит первое многооблачное озеро данных SaaS для всей организации. |
Общедоступные функции
В следующей таблице перечислены функции Microsoft Fabric, которые перешли с предварительной версии на общедоступную версию (GA).
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Доступность OneLake Eventhouse в формате Delta Lake | В рамках обещания one логического копирования мы рады сообщить, что доступность OneLake в формате Delta Lake является общедоступной. |
| Май 2024 г. | Приватный канал Microsoft Fabric | Приватный канал Azure для Microsoft Fabric защищает доступ к конфиденциальным данным в Microsoft Fabric, предоставляя сетевую изоляцию и применяя необходимые элементы управления для входящего сетевого трафика. Дополнительные сведения см. в разделе "Объявление о общедоступной доступности Приватный канал Fabric". |
| Май 2024 г. | Доступ к доверенной рабочей области | Доступ к доверенной рабочей области в сочетаниях клавиш OneLake теперь общедоступен. Теперь вы можете создать конвейеры данных для доступа к учетным записям с поддержкой брандмауэра Azure Data Lake Storage 2-го поколения (ADLS 2-го поколения) с помощью доступа к доверенной рабочей области (предварительная версия) в конвейерах данных Fabric. Используйте удостоверение рабочей области, чтобы установить безопасное и простое подключение между Fabric и учетными записями хранения. Доступ к доверенной рабочей области также обеспечивает безопасный и простой доступ к учетным записям хранения ADLS 2-го поколения из сочетаний клавиш OneLake в Fabric. |
| Май 2024 г. | Управляемые частные конечные точки | Управляемые частные конечные точки для Microsoft Fabric разрешают безопасные подключения через управляемые виртуальные сети к источникам данных, которые находятся за брандмауэром или недоступны из общедоступного Интернета. Дополнительные сведения см. в статье Об объявлении общедоступной доступности Приватный канал Fabric, доступ к доверенным рабочим областям и управляемые частные конечные точки. |
| Май 2024 г. | Eventhouse | Eventhouse — это новая динамическая рабочая область с несколькими базами данных KQL, общедоступная в составе Аналитики в реальном времени Fabric. Eventhouse предлагает надежное решение для управления и анализа существенных объемов данных в режиме реального времени. Начало работы с руководством по созданию и управлению хранилищем событий. |
| Май 2024 г. | Инжиниринг данных: среда | Среда в Fabric теперь общедоступна. Среда — это централизованный элемент , позволяющий настроить все необходимые параметры для выполнения задания Spark в одном месте. В общедоступной версии мы добавили поддержку Git, конвейеров развертывания, REST API, папок ресурсов и общего доступа. |
| Май 2024 г. | REST API Microsoft Fabric Core | Api Microsoft Fabric Core теперь общедоступны. API-интерфейсы пользователей Fabric являются основными возможностями для предприятий и партнеров, чтобы использовать Microsoft Fabric, так как они обеспечивают комплексное автоматическое взаимодействие со службой, обеспечивают интеграцию Microsoft Fabric с внешними веб-приложениями и, как правило, позволяют клиентам и партнерам масштабировать свои решения более легко. |
| Май 2024 г. | Пакет SDK потока данных Power Query 2-го поколения для VS Code | Пакет SDK Power Query теперь доступен в Visual Studio Code. Чтобы приступить к работе с пакетом SDK Power Query в Visual Studio Code, установите его из Visual Studio Code Marketplace. |
| Апрель 2024 г. | Семантическая ссылка | Семантические ссылки теперь общедоступны! Пакет поставляется с нашим виртуальным жестким диском по умолчанию, и теперь вы можете использовать семантику ссылки в Fabric сразу без установки pip. |
| Март 2024 г. | Шлюзы виртуальной сети в потоке данных 2-го поколения | Поддержка шлюза данных виртуальной сети для потоков данных 2-го поколения в Fabric теперь общедоступна. Шлюз данных виртуальной сети помогает подключаться из Fabric Dataflows 2-го поколения к службам данных Azure в виртуальной сети без необходимости локального шлюза данных. |
| Ноябрь 2023 г. | Microsoft Fabric теперь общедоступен | Microsoft Fabric теперь общедоступен для покупки. Microsoft Fabric может изменить способ работы команд с данными, объединив всех пользователей на одной платформе, на основе ИИ, созданной для эпохи искусственного интеллекта. К ним относятся: Power BI, Фабрика данных, Инжиниринг данных, Обработка и анализ данных, аналитика в режиме реального времени, хранилище данных и общая платформа Fabric. |
Сообщество
В этом разделе приведены предыдущие возможности сообщества Microsoft Fabric для потенциальных и текущих поставщиков влияния и MVP. Чтобы узнать о награде Microsoft MVP и найти MVP, см . mvp.microsoft.com.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Записи сообщества Solved Fabric теперь доступны в области справки Fabric | Теперь вы можете найти решаемые записи из обсуждений сообщества Fabric в области справки Fabric. |
| Май 2024 г. | Объявление о конференции сообщества Microsoft Fabric в Европе | Объявление о конференции сообщества Microsoft Fabric 24 сентября 2024 года. Зарегистрируйтесь сегодня! |
| Май 2024 г. | Зарегистрируйтесь в Microsoft Build: Microsoft Fabric Cloud Skills Challenge | Начиная с 21 мая 2024 г., зарегистрируйтесь в Microsoft Build: Microsoft Fabric Cloud Skills Challenge и подготовьтесь к экзамену DP-600 и upskill в сертификацию инженера Аналитики Fabric. |
| Март 2024 г. | Экзамен DP-600 теперь доступен | Экзамен DP-600 теперь доступен, что приводит к сертификации Microsoft Certified: Fabric Analytics Engineer Associate. Центр карьеры Fabric поможет вам быстро научиться и получить сертификацию. |
| Март 2024 г. | Конференция сообщества Microsoft Fabric | Присоединяйтесь к нам в Лас-Вегасе 26-28 марта 2024 года на первой ежегодной конференции сообщества Microsoft Fabric. Ознакомьтесь с тем, как Microsoft Fabric и остальные продукты и продукты искусственного интеллекта в Майкрософт помогут вашей организации подготовиться к эпохе искусственного интеллекта. Зарегистрируйтесь сегодня с помощью кода MSCUST для эксклюзивной скидки! |
| Март 2024 г. | Объявление победителей "HackTogether: Microsoft Fabric Global AI Hack" | Мы получили 50 отправки проектов Хакатон от более чем 100 реестрантов, участвующих в каждом уголке мира. Наши судьи были взорваны широтой, глубиной и общим качеством представлений. Познакомьтесь с победителями Hack Global AI Fabric! |
| 2024 января | Объявление о карьере Fabric Hub | Новый Центр карьеры Fabric — это ваш единый стоп-магазин для профессионального роста! Мы создали комплексное обучение с лучшим бесплатным по запросу и живой подготовкой, а также скидками на экзамены. |
| 2024 января | Hack Together: The Microsoft Fabric Global AI Hack | Hack Together — это глобальный онлайн-хакатон , который работает с 15 февраля по 4 марта 2024 года. Присоединяйтесь к нам для Hack Together: Microsoft Fabric Global AI Hack, виртуальное событие, где вы можете учиться, экспериментировать и взломать вместе с новыми Copilot функциями ИИ в Microsoft Fabric! Дополнительные сведения см. в статье Microsoft Fabric Global AI Hack. |
| Декабрь 2023 г. | Конференция сообщества Microsoft Fabric | Присоединяйтесь к нам в Лас-Вегасе 26-28 марта 2024 года на первой ежегодной конференции сообщества Microsoft Fabric. Ознакомьтесь с тем, как Microsoft Fabric и остальные продукты и продукты искусственного интеллекта в Майкрософт помогут вашей организации подготовиться к эпохе искусственного интеллекта. Зарегистрируйтесь сегодня , чтобы погрузиться в будущее данных и ИИ и подключиться к тысячам новаторов данных, как вы хотите поделиться своими аналитическими сведениями. |
| Ноябрь 2023 г. | Microsoft Fabric MVP Corner — Специальный выпуск (Ignite) | Специальный выпуск серии блогов Microsoft Fabric MVP corner выделяет выбранное содержимое, связанное с Fabric и созданное MVPs на конференции Microsoft Ignite 2023, когда мы объявили о общедоступной версии Microsoft Fabric. |
| Октябрь 2023 | Microsoft Fabric MVP Corner — октябрь 2023 г. | Основные сведения о выбранном содержимом, связанном с Fabric и созданным MVP с октября 2023 года. |
| Сентябрь 2023 | Microsoft Fabric MVP Corner — сентябрь 2023 г. | Основные сведения о выбранном содержимом, связанном с Fabric и созданным MVP с сентября 2023 года. |
| Август 2023 г. | Microsoft Fabric MVP Corner — август 2023 г. | Основные сведения о выбранном содержимом, связанном с Fabric и созданным MVPs с августа 2023 года. |
| Июль 2023 г. | Microsoft Fabric MVP Corner — июль 2023 г. | Основные сведения о выбранном содержимом, связанном с Fabric и созданным MVP в июле 2023 года. |
| Июнь 2023 г. | Угол MVP Microsoft Fabric — июнь 2023 г. | Серия блогов Fabric MVP Corner для выделения выбранного содержимого, связанного с Fabric и созданных MVP в июне 2023 года. |
| Май 2023 г. | Группы пользователей Fabric | Группы пользователей Power BI теперь являются группами пользователей Fabric! |
| Май 2023 г. | Сведения о Microsoft Fabric из MVPs | До нашего официального объявления Microsoft Fabric на сборке 2023 MVPs имели возможность ознакомиться с продуктом. В течение нескольких месяцев они активно тестируют Fabric и получают ценные аналитические сведения. Теперь их энтузиазм к продукту очевиден, так как они стремятся поделиться своими знаниями и мыслями о Microsoft Fabric с сообществом. |
Примеры структуры и рекомендации
В этом разделе приведены архивные рекомендации и примеры ресурсов проекта для Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Март 2024 г. | Защита персональных данных в Microsoft Fabric Lakehouse с помощью ответственного ИИ | Один из возможных способов использования ИИ Azure для идентификации и извлечения персональных данных (PII) в Microsoft Fabric — использовать язык ИИ Azure для обнаружения и классификации сущностей PII в текстовых данных, таких как имена, адреса, адреса, адреса, номера телефонов, номера социального страхования и т. д. |
| Февраль 2024 г. | Создание общих архитектур данных с помощью OneLake в Microsoft Fabric | Узнайте больше о распространенных шаблонах архитектуры данных и о том, как их можно защитить с помощью Microsoft Fabric, а также основные стандартные блоки безопасности для OneLake. |
| 2024 января | Новая сертификация Fabric и Центр карьеры Fabric | Доступность бета-версии экзамена Сертификации Майкрософт DP-600. Реализация решений аналитики с помощью Microsoft Fabric доступна в течение ограниченного времени. Прохождение этого экзамена получает сертификацию Microsoft Certified: Fabric Analytics Engineer Associate . |
| Декабрь 2023 г. | Работа с OneLake с помощью обозревателя служба хранилища Azure | Если вы хотите использовать приложение, которое напрямую интегрируется с Windows проводник, ознакомьтесь с проводником OneLake. Однако если вы привыкли использовать обозреватель служба хранилища Azure для задач управления данными, вы можете продолжать использовать свои функциональные возможности с Помощью OneLake и некоторых ее ключевых преимуществ. |
| Ноябрь 2023 г. | Семантическая ссылка: интегрированные семантические модели OneLake | Семантическая ссылка добавляет поддержку недавно выпущенных интегрированных семантических моделей OneLake. Теперь вы можете напрямую получить доступ к данным с помощью имени семантической модели с помощью OneLake с помощью read_table функции и нового mode параметра onelake. |
| Ноябрь 2023 г. | Интеграция данных SAP в Microsoft Fabric | Использование встроенного подключения Microsoft Fabric — это самый простой и наименее трудоемкий способ добавления данных SAP в хранилище данных Fabric. |
| Ноябрь 2023 г. | Изменение структуры игры: проверка зависимостей с помощью семантической связи — качество данных | Выполните этот пошаговый пример изучения функциональных зависимостей между столбцами в таблице с помощью семантической связи. Семантическая связь — это функция, которая позволяет установить соединение между наборами данных Power BI и Synapse Обработка и анализ данных в Microsoft Fabric. |
| Ноябрь 2023 г. | Реализация архитектуры medallion lakehouse в Microsoft Fabric | Общие сведения о архитектуре озера медальона и о том, как можно реализовать lakehouse в Microsoft Fabric. |
| Октябрь 2023 | Изменение структуры игры: изучение данных | Следуйте этому реалистичному примеру чтения данных из Azure Data Lake Storage с помощью сочетаний клавиш, организации необработанных данных в структурированные таблицы и базовое исследование данных. Наше исследование данных используется в качестве источника разнообразных и увлекательных городов Лондона с информацией, извлеченной из data.london.gov.uk/. |
| Сентябрь 2023 | Объявление о сквозном семинаре: анализ данных дикой природы с помощью Microsoft Fabric | Новый семинар поможет вам создать комплексное решение аналитики данных для набора данных Snapshot Serengeti с помощью Microsoft Fabric. Набор данных состоит из примерно 1,68 млн изображений и заметок изображений, предоставляемых в .json файлах. |
| Сентябрь 2023 | Новая схема обучения: реализация Lakehouse с помощью Microsoft Fabric | Новая реализация Lakehouse с помощью схемы обучения Microsoft Fabric представляет базовые компоненты реализации озера данных с Microsoft Fabric с семи подробными модулями. |
| Сентябрь 2023 | Репозиторий готовности Структуры | Репозиторий готовности Fabric является сокровищем ресурсов для всех, кто заинтересован в изучении захватывающего мира Microsoft Fabric. |
| Июль 2023 г. | Подключение к OneLake | Разделы справки подключение к OneLake? В этом блоге описывается , как подключиться и взаимодействовать с OneLake, включая то, как OneLake обеспечивает совместимость с любым инструментом, используемым в ADLS 2-го поколения! |
| Июнь 2023 г. | Использование Azure Databricks с Microsoft Fabric и OneLake | Как Azure Databricks работает с Microsoft Fabric? В этом блоге содержатся ответы на этот вопрос и дополнительные сведения о том, как две системы могут работать вместе. |
| Июль 2023 г. | Бесплатное предварительное использование возможностей Microsoft Fabric, расширенных до 1 октября 2023 г. | Мы расширяем бесплатную предварительную версию возможностей Fabric (кроме Power BI). Эти возможности не будут учитываться в отношении приобретенной емкости до 1 октября 2023 года. |
Microsoft Copilot в Microsoft Fabric
В этом разделе приведены архивные объявления о Copilot Структуре.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Copilot конфиденциальность и безопасность | Дополнительные сведения о конфиденциальности и безопасности Copilot в Microsoft Fabric и подробные сведения о каждой рабочей нагрузке см. в статье "Конфиденциальность, безопасность и ответственность за использование Copilot в Microsoft Fabric (предварительная версия)". |
| Май 2024 г. | ИИ и Copilot настройка автоматически делегированы администраторам емкости | На портале администрирования клиента можно делегировать включение ИИ и Copilot функций администраторам емкости. Этот ИИ и Copilot параметр автоматически делегируются администраторам емкости и администраторам клиента не смогут отключить делегирование. |
| Февраль 2024 г. | Изменение структуры игры: как легко использовать Copilot в Microsoft Fabric | В этой записи блога показано, как просто включить Copilot, генерированный ИИ, который предоставляет новые способы преобразования и анализа данных, создания аналитических сведений и создания визуализаций и отчетов в Microsoft Fabric. |
| Февраль 2024 г. | Copilot Для фабрики данных в Microsoft Fabric | Copilot Для фабрики данных в Microsoft Fabric теперь доступна предварительная версия и включена в интерфейс dataflow 2-го поколения. Дополнительные сведения см. в разделе Copilot "Фабрика данных". |
| 2024 января | Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных | Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас? |
| 2024 января | Copilot Включение в Fabric для всех | Следуйте этому руководству, чтобы получить Copilot доступ к Fabric для всех пользователей в вашей организации. Дополнительные сведения см. в разделе "Обзор Copilot Microsoft Fabric (предварительная версия)". |
| 2024 января | Copilot в Fabric доступен по всему миру | Copilotв Fabric теперь доступны всем клиентам, включая Copilot Power BI, Фабрику данных и Обработка и анализ данных и Инжиниринг данных. Дополнительные сведения см. в статье "Обзор Copilot " в Fabric. |
| Ноябрь 2023 г. | Расширение возможностей пользователей Power BI с помощью Microsoft Fabric и Copilot | Мы рады сообщить о общедоступной доступности Microsoft Fabric и предварительной версии Copilot в Microsoft Fabric, включая возможности Power BI. |
| Ноябрь 2023 г. | Copilot для Power BI в предварительной версии Microsoft Fabric | Мы рады сообщить о предварительной версии Copilot Microsoft Fabric, включая интерфейс Power BI, который помогает пользователям быстро приступить к работе, помогая им создавать отчеты в веб-интерфейсе Power BI. Дополнительные сведения см. в power Copilot BI. |
| Октябрь 2023 | Чат данных в Microsoft Fabric с семантическим ядром | Узнайте, как создавать Copilot инструменты на основе бизнес-данных в Microsoft Fabric. |
Фабрика данных в Microsoft Fabric
В этом разделе приведены архивированные новые функции и возможности фабрики данных в Microsoft Fabric. Следуйте вопросам и отзывам на форуме сообщества фабрики данных.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Обновления сертифицированного соединителя dataflow 2-го поколения | Были выпущены новые и обновленные соединители потока данных 2-го поколения. Дополнительные сведения см. в обновлениях сертифицированного соединителя за июнь 2024 г. |
| Июнь 2024 г. | Обновления соединителя конвейера данных | Теперь для конвейера данных доступны дополнительные соединители. Дополнительные сведения см. в обновлении Fabric за июнь 2024 г. |
| Июнь 2024 г. | Функция схем Lakehouse | Функция схемы Lakehouse (предварительная версия) предоставляет поддержку конвейера данных для чтения сведений о схеме из таблиц Lakehouse и поддерживает запись данных в таблицы в указанных схемах. Схемы Lakehouse позволяют группировать таблицы вместе для улучшения обнаружения данных, управления доступом и многого другого. |
| Июнь 2024 г. | Перемещение данных по рабочей области с помощью современного интерфейса получения данных | Теперь можно перемещать данные между Lakehouses, хранилищами и т. д. в разных рабочих областях. В конвейере современного получения данных выберите элемент Fabric из другой рабочей области в обозревателе слева от концентратора данных OneLake. |
| Июнь 2024 г. | Создание хранилища в качестве назначения в конвейере данных | Теперь вы можете создать хранилище в качестве назначения в конвейере данных, а не выбрать существующий. |
| Май 2024 г. | Объявления фабрики данных в Microsoft Build Recap | Не пропустите ни один из объявлений Фабрики данных в Fabric, вот краткий обзор всех новых функций в Фабрике данных в Fabric из сборки 2024. |
| Май 2024 г. | Новые сертифицированные соединители | В процессе сертификации пакета SDK для Power Query и Power Query появилось несколько новых соединителей Power Query, включая соединители для базы данных Oracle, MySQL, Oracle Cloud Storage, Azure AI, Файлы Azure, Dynamics AX, Google Bigquery, Snowflake ADBC и многое другое. |
| Май 2024 г. | API для GraphQL в Microsoft Fabric (предварительная версия) | Новый API для GraphQL — это уровень доступа к данным, который позволяет запрашивать несколько источников данных быстро и эффективно в Fabric. Дополнительные сведения см. в статье "Что такое API Microsoft Fabric для GraphQL? |
| Май 2024 г. | Пакет SDK потока данных Power Query 2-го поколения для VS Code | Пакет SDK Power Query теперь доступен в Visual Studio Code. Чтобы приступить к работе с пакетом SDK Power Query в Visual Studio Code, установите его из Visual Studio Code Marketplace. |
| Май 2024 г. | Обновление диалогового окна журнала обновления | Всплывающее окно "Журнал обновлений" содержит кнопку "Обновить". |
| Май 2024 г. | Новые и обновленные сертифицированные соединители | В процессе сертификации пакета SDK Для Power Query и Соединителя Power Query появились четыре новых и обновленных соединителя Power Query. |
| Май 2024 г. | Рабочие процессы данных в предварительной версии Фабрики данных | Рабочие процессы данных (предварительная версия) в фабрике данных, на базе Apache Airflow, предлагают простой процесс разработки, планирования и мониторинга для процессов данных на основе Python, определенных как "Управляемые ациклические графы" (DAG). Дополнительные сведения см . в кратком руководстве по созданию рабочего процесса данных. |
| Май 2024 г. | Доступ к доверенным рабочим областям в предварительной версии конвейеров данных Fabric | Используйте удостоверение рабочей области, чтобы установить безопасное и простое подключение между Fabric и учетными записями хранения. Теперь вы можете создать конвейеры данных для доступа к учетным записям с поддержкой брандмауэра Azure Data Lake Storage 2-го поколения (ADLS 2-го поколения) с помощью доступа к доверенной рабочей области (предварительная версия) в конвейерах данных Fabric. |
| Май 2024 г. | Триггеры событий хранилища BLOB-объектов для предварительной версии конвейеров данных | Триггеры событий хранилища BLOB-объектов Azure (предварительная версия) в конвейерах данных фабрики данных Fabric используют оповещения Fabric Reflex и потоки событий для создания подписок на события в учетных записях хранения Azure. |
| Май 2024 г. | Действие Azure HDInsight для конвейеров данных | Действие Azure HDInsight позволяет выполнять запросы Hive, вызывать программу MapReduce, выполнять запросы Pig, выполнять программы Spark или программу Hadoop Stream. |
| Май 2024 г. | Копирование помощника по данным | Начните использовать современный интерфейс получения данных, выбрав помощник по копированию данных на целевой странице конвейера или используйте помощник по копированию данных в раскрывающемся списке "Копирование данных". Вы можете легко подключиться к недавно использованным элементам Fabric и обеспечить интуитивно понятный способ чтения источников из примеров данных и новых подключений. |
| Май 2024 г. | Изменение типа столбца целевой таблицы при копировании данных | Типы столбцов целевой таблицы можно изменять при копировании данных для новой или автоматической целевой таблицы для многих хранилищ данных. Дополнительные сведения см. в разделе "Настройка Lakehouse" в действии копирования. |
| Апрель 2024 г. | Действие определения задания Spark | С помощью нового действия определения задания Spark вы сможете запустить определение задания Spark в конвейере. |
| Апрель 2024 г. | Хранилище Fabric в действии копирования ADF | Теперь вы можете подключиться к хранилищу Fabric из конвейера Фабрика данных Azure/Synapse. Этот новый соединитель можно найти при создании нового источника или назначения приемника в действии копирования, в действии подстановки, действии хранимой процедуры, действии скрипта и действии получения метаданных. |
| Апрель 2024 г. | Изменение типа столбца в целевую таблицу, добавленную в хранилище Fabric и другие хранилища данных SQL | При перемещении данных из любых поддерживаемых источников данных в хранилище Fabric или другие хранилища данных SQL (SQL Server, База данных SQL Azure, Управляемый экземпляр SQL Azure или Azure Synapse Analytics) с помощью конвейеров данных пользователи теперь могут указать тип данных для каждого столбца. |
| Апрель 2024 г. | Улучшения производительности при записи данных в SFTP | Соединитель SFTP был улучшен, чтобы повысить производительность при записи в SFTP в качестве назначения. |
| Апрель 2024 г. | Поддержка проверки подлинности имени субъекта-службы для локальных и шлюзов данных виртуальной сети | Теперь субъекты-службы Azure (SPN) поддерживаются для локальных шлюзов данных и шлюзов данных виртуальной сети. Узнайте, как использовать тип проверки подлинности субъекта-службы в Azure Data Lake Storage, Dataverse, База данных SQL Azure, веб-соединитель и многое другое. |
| Апрель 2024 г. | Новые и обновленные сертифицированные соединители | В процессе сертификации пакета SDK Для Power Query и Соединителя Power Query появились 11 новых и обновленных настраиваемых соединителей Power Query. |
| Апрель 2024 г. | Новый интерфейс построителя выражений | Новый интерфейс в конвейерах фабрики данных Fabric для упрощения создания выражений с помощью языка выражений конвейера. |
| Апрель 2024 г. | Фабрика данных увеличивает максимальное количество действий на конвейер до 80 | Мы удвоили ограничение на количество действий, которые можно определить в конвейере от 40 до 80. |
| Апрель 2024 г. | ИНТЕРФЕЙСы REST API для конвейеров Фабрики данных Fabric | Интерфейсы REST API для конвейеров фабрики данных Fabric теперь доступны в предварительной версии. ИНТЕРФЕЙСы REST API для конвейеров фабрики данных позволяют расширить встроенную возможность в Fabric для создания, чтения, обновления, удаления и списков конвейеров. |
| Март 2024 г. | Быстрое копирование в потоках данных 2-го поколения | С помощью быстрого копирования можно получать терабайты данных с простым интерфейсом потоков данных, но с масштабируемой серверной частью действие Copy конвейера. |
| Март 2024 г. | Интеграция локальных данных в Microsoft Fabric с помощью конвейеров данных в предварительной версии фабрики данных | С помощью локального шлюза данных (предварительная версия) клиенты могут подключаться к локальным источникам данных с помощью потоков данных и конвейеров данных с фабрикой данных. Дополнительные сведения см. в статье о доступе к локальным источникам данных в Фабрике данных для Microsoft Fabric. |
| Март 2024 г. | Предварительная версия CI/CD для конвейеров данных Fabric | Интеграция Git и интеграция со встроенными конвейерами развертывания в конвейеры данных фабрики данных теперь доступна в предварительной версии. Дополнительные сведения см. в разделе "Фабрика данных" добавление CI/CD в конвейеры данных Fabric. |
| Март 2024 г. | Просмотр ресурсов Azure с помощью получения данных | Узнайте, как просматривать и подключаться ко всем ресурсам Azure с помощью функций "Обзор Azure" в Get Data. Вы можете легко просматривать ресурсы Azure и подключаться к ресурсам Synapse, хранилища BLOB-объектов или ADLS 2-го поколения. |
| Март 2024 г. | Поддержка потоков данных 2-го поколения для шлюзов виртуальной сети теперь общедоступна | Поддержка шлюза данных виртуальной сети для потоков данных 2-го поколения в Fabric теперь общедоступна. Шлюз данных виртуальной сети помогает подключаться из Fabric Dataflows 2-го поколения к службам данных Azure в виртуальной сети без необходимости локального шлюза данных. |
| Март 2024 г. | Поддержка уровней конфиденциальности в потоках данных | Теперь вы можете задать уровни конфиденциальности для подключений в потоке данных 2-го поколения. Уровни конфиденциальности критически важны для правильной настройки, чтобы конфиденциальные данные просматривались только авторизованными пользователями. |
| Март 2024 г. | Копирование данных в S3, совместимое с помощью конвейера данных фабрики данных Fabric | Копирование данных в совместимость S3 теперь доступно в конвейере данных Фабрики данных Fabric! Вы можете использовать помощник по копированию и действие Copy в конвейере данных для завершения этого перемещения данных. |
| Февраль 2024 г. | Назначения данных и управляемые параметры потоков данных 2-го поколения | Новые функции для потоков данных 2-го поколения включают назначения, управляемые параметры и дополнительные разделы. |
| Февраль 2024 г. | Copilot Для фабрики данных в Microsoft Fabric | Copilot Для фабрики данных в Microsoft Fabric теперь доступна предварительная версия и включена в интерфейс dataflow 2-го поколения. Дополнительные сведения см. в разделе Copilot "Фабрика данных". |
| Февраль 2024 г. | Обновления сертифицированного соединителя | Пакет SDK Power Query позволяет создавать новые соединители для Power BI и Dataflow. Новые сертифицированные соединители Power Query доступны в списке сертифицированных соединителей в Power Query. |
| Февраль 2024 г. | Обновления соединителя конвейера данных | Новые соединители доступны в конвейерах данных фабрики данных, включая совместимые с S3 и источники данных Google Cloud Storage. Дополнительные сведения см. в разделе "Соединители конвейера данных" в Microsoft Fabric. |
| 2024 января | Автоматизация запросов и команд хранилища данных Fabric с помощью фабрики данных | В Фабрике данных Fabric существует множество способов запрашивать данные, извлекать данные и выполнять команды из хранилища с помощью действий конвейера, которые затем могут быть легко автоматизированы. |
| 2024 января | Использование конвейеров данных фабрики данных Fabric для оркестрации рабочих процессов на основе записных книжек | Рекомендации и рекомендации по созданию рабочих процессов Записной книжки Spark Fabric с помощью фабрики данных в Fabric с конвейерами данных. |
| Декабрь 2023 г. | Чтение и запись в Fabric Lakehouse с помощью Фабрика данных Azure (ADF) | Теперь вы можете считывать и записывать данные в Microsoft Fabric Lakehouse из ADF (Фабрика данных Azure). Используя Поток данных действия копирования или сопоставления, вы можете читать, записывать, преобразовывать и обрабатывать данные с помощью ADF или Synapse Analytics в настоящее время в предварительной версии. |
| Декабрь 2023 г. | Настройка состояния действия для простой отладки конвейера | В конвейерах данных Фабрики данных Fabric теперь можно задать состояние действия неактивным, чтобы сохранить конвейер даже с неполными недопустимыми конфигурациями. Подумайте об этом как о том, как "комментировать" часть кода конвейера. |
| Декабрь 2023 г. | Изменение подключения в редакторе конвейера | Теперь вы можете изменить существующие подключения к данным во время разработки конвейера, не выходя из редактора конвейера! При настройке подключения появляется всплывающее окно "Изменить " и всплывающее окно. |
| Декабрь 2023 г. | Выполнение записной книжки Azure Databricks в Фабрике данных Fabric | Теперь можно создавать мощные рабочие процессы конвейера данных, которые включают выполнение записных книжек из кластеров Azure Databricks с помощью фабрики данных Fabric. Добавьте действие Databricks в конвейер, наведите указатель на существующий кластер или запросите новый кластер, а фабрика данных выполнит код записной книжки для вас. |
| Ноябрь 2023 г. | Реализация архитектуры medallion lakehouse в Microsoft Fabric | Общие сведения о архитектуре озера медальона и о том, как можно реализовать lakehouse в Microsoft Fabric. |
| Ноябрь 2023 г. | Общая доступность соединителей Fabric для потока данных 2-го поколения | Соединители для Lakehouse, Warehouse и KQL Database теперь общедоступны. Мы рекомендуем использовать эти соединители при попытке подключиться к данным из любой из этих рабочих нагрузок Fabric. |
| Ноябрь 2023 г. | Автоматическое отмена обновления потока данных 2-го поколения | Чтобы предотвратить использование ненужных ресурсов, существует новый механизм, который останавливает обновление потока данных, как только результаты обновления, как известно, не оказывают никакого влияния. Это позволяет сократить потребление более упреждающим образом. |
| Ноябрь 2023 г. | Распространение сообщений об ошибках потока данных 2-го поколения через шлюз | Мы сделали диагностика улучшения для предоставления значимых сообщений об ошибках при сбое обновления потока данных для этих потоков данных, выполняемых через корпоративный шлюз данных. |
| Ноябрь 2023 г. | Поддержка потоков данных 2-го поколения для привязки столбцов для соединителя SAP HANA | Поддержка привязки столбцов включена для SAP HANA. Этот необязательный параметр приводит к значительному повышению производительности. Дополнительные сведения см. в статье "Поддержка привязки столбцов для соединителя SAP HANA". |
| Ноябрь 2023 г. | Скрытые артефакты промежуточного потока данных 2-го поколения | При использовании потока данных 2-го поколения в Fabric система автоматически создаст набор промежуточных артефактов. Теперь эти промежуточные артефакты будут абстрагированы из интерфейса потока данных 2-го поколения и будут скрыты из списка рабочих областей. Никаких действий, необходимых пользователю, и это изменение не влияет на существующие потоки данных. |
| Ноябрь 2023 г. | Поддержка потоков данных 2-го поколения для предварительной версии шлюзов виртуальной сети | Поддержка шлюза данных виртуальной сети для потоков данных 2-го поколения в Fabric теперь доступна в предварительной версии. Шлюз данных виртуальной сети помогает подключаться из Fabric Dataflows 2-го поколения к службам данных Azure в виртуальной сети без необходимости локального шлюза данных. |
| Ноябрь 2023 г. | Перекрестная рабочая область "Сохранить как" | Теперь можно клонировать конвейеры данных в рабочих областях с помощью кнопки "Сохранить как". |
| Ноябрь 2023 г. | Интеграция динамического содержимого с действиями электронной почты и Teams | В действиях электронной почты и Teams теперь можно легко добавить динамическое содержимое. Благодаря этой новой интеграции выражений конвейера вы увидите всплывающее меню, которое поможет вам быстро выбрать и создать содержимое сообщения без необходимости изучать язык выражений конвейера. |
| Ноябрь 2023 г. | действие Copy теперь поддерживает отказоустойчивость соединителя хранилища данных Fabric | Теперь действие Copy в конвейерах данных поддерживает отказоустойчивость для хранилища Fabric. Отказоустойчивость позволяет обрабатывать определенные ошибки без прерывания перемещения данных. Включив отказоустойчивость, можно продолжать копировать данные, пропуская несовместимые данные, такие как повторяющиеся строки. |
| Ноябрь 2023 г. | Соединители MongoDB и MongoDB Atlas | Соединители MongoDB и MongoDB Atlas теперь доступны для использования в конвейерах данных фабрики данных в качестве источников и назначений. |
| Ноябрь 2023 г. | Соединитель Microsoft 365 теперь поддерживает прием данных в Lakehouse (предварительная версия) | Соединитель Microsoft 365 теперь поддерживает прием данных в таблицы Lakehouse. |
| Ноябрь 2023 г. | Поддержка нескольких задач для редактирования конвейеров в конструкторе | Теперь можно открывать и изменять конвейеры данных из разных рабочих областей и перемещаться между ними с помощью возможностей многофакторной обработки в Fabric. |
| Ноябрь 2023 г. | Интерполяция строк, добавленная в возвращаемое значение конвейера | Теперь вы можете изменить подключения к данным в конвейерах данных. Ранее новая вкладка откроется при необходимости редактирования подключений. Теперь вы можете оставаться в конвейере и легко обновлять подключения. |
| Октябрь 2023 | Изменение категории действий | Мы изменили способ классификации действий, чтобы упростить поиск действий, которые вы ищете с новыми категориями, такими как поток управления, уведомления и многое другое. |
| Октябрь 2023 | Улучшение производительности среды выполнения копирования | Мы улучшили производительность среды выполнения копирования. В соответствии с результатами наших тестов, с улучшениями пользователи могут ожидать, чтобы увидеть длительность копирования из файлов parquet/csv в таблицу Lakehouse, чтобы улучшить на ~25%-35%. |
| Октябрь 2023 | Целочисленный тип данных, доступный для переменных | Теперь мы поддерживаем переменные в виде целых чисел! При создании новой переменной теперь можно задать для типа переменной целое число, что упрощает использование арифметических функций с переменными. |
| Октябрь 2023 | Теперь имя конвейера поддерживается в системных переменных. | Мы добавили новую системную переменную с именем Pipeline Name, чтобы можно было проверить и передать имя конвейера в редакторе выражений конвейера, что обеспечивает более мощный рабочий процесс в Фабрике данных Fabric. |
| Октябрь 2023 | Поддержка редактирования типов в сопоставлениях действие Copy | Теперь можно изменять типы столбцов при посадке данных в таблицы Lakehouse. Это упрощает настройку схемы данных в назначении. Просто перейдите на вкладку "Сопоставление ", импортируйте схемы, если вы не видите никаких сопоставлений, и используйте раскрывающийся список для внесения изменений. |
| Октябрь 2023 | Новый сертифицированный соединитель: Метрики Emplifi | Объявление о выпуске нового соединителя Emplifi Metrics. Соединитель Power BI — это слой между общедоступным API Emplifi и самой Power BI. Дополнительные сведения см . в документации по общедоступному API Emplifi. |
| Октябрь 2023 | SAP HANA (обновление соединителя) | Обновление улучшает соединитель SAP HANA с возможностью использования представлений вычислений HANA, развернутых в SAP Datasphere, учитывая дополнительные понятия безопасности SAP Datasphere. |
| Октябрь 2023 | Задайте для состояния действия значение "Закомментировать" часть конвейера | Состояние действия теперь доступно в конвейерах данных Фабрики данных Fabric, что дает возможность комментировать часть конвейера без удаления определения. |
| Август 2023 г. | Промежуточные метки | Концепция промежуточных данных была представлена в Dataflows 2-го поколения для Microsoft Fabric, и теперь у вас есть возможность определить, какие запросы в потоке данных должны использовать промежуточные механизмы или нет. |
| Август 2023 г. | Защита входных и выходных данных для журналов | Мы добавили дополнительные параметры для действия set Variable с именем Secure input и Secure output. Если включить безопасные входные или выходные данные, вы можете скрыть конфиденциальную информацию от записи в журналах. |
| Август 2023 г. | Состояние выполнения конвейера, добавленное на панель вывода | Недавно мы добавили состояние конвейера, чтобы разработчики могли легко видеть состояние запуска конвейера. Теперь вы можете просмотреть состояние запуска конвейера на панели вывода . |
| Август 2023 г. | Соединитель FTP конвейеров данных | Соединитель FTP теперь доступен для использования в конвейерах данных фабрики данных в Microsoft Fabric. Найдите его в меню "Создать подключение ". |
| Август 2023 г. | Максимальное число сущностей в потоке данных | Новое максимальное число сущностей, которые могут быть частью потока данных, было увеличено до 50. |
| Август 2023 г. | Управление функциями подключений | Теперь параметр "Управление подключениями" позволяет просматривать связанные подключения к потоку данных, отменять связь с подключением или изменять учетные данные подключения и шлюз. |
| Август 2023 г. | Соединитель Power BI Lakehouses | Обновление соединителя Lakehouses в августовской версии Power BI Desktop и шлюза включает значительные улучшения производительности. |
| Июль 2023 г. | Новые современные возможности подключения к данным и обнаружение в потоках данных | Улучшенный интерфейс направлен на ускорение процесса обнаружения данных в потоке данных, потоке данных 2-го поколения и Datamart. |
| Май 2023 г. | Знакомство с фабрикой данных в Microsoft Fabric | Фабрика данных позволяет разрабатывать решения для интеграции данных корпоративного масштаба с помощью потоков данных следующего поколения и конвейеров данных. |
Фабрика данных в примерах и рекомендациях Microsoft Fabric
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Карта навигатора конвейера фабрики данных | Конечная карта конвейера фабрики данных помогает перемещаться по конвейерам фабрики данных в пути фабрики данных, чтобы создать успешный проект Интеграция данных. |
| Май 2024 г. | Действие обновления семантической модели | Узнайте, как использовать много запрошенное действие обновления семантической модели в конвейерах данных и как теперь можно создать комплексное решение, охватывающее весь жизненный цикл конвейера. |
| Февраль 2024 г. | Конвейеры данных Fabric — расширенные методы планирования | В этой серии блогов рассматриваются методы расширенного планирования в конвейерах данных Microsoft Fabric. |
| Декабрь 2023 г. | Чтение данных из таблиц Delta Lake с помощью функции DeltaLake.Table M | DeltaLake.Table — это новая функция на языке M Power Query для чтения данных из таблиц Delta Lake. Эта функция теперь доступна в Power Query в Power BI Desktop и в потоках данных 1-го поколения и заменяет необходимость использования решения, разработанного сообществом. |
| Октябрь 2023 | Серия вебинаров фабрики данных Microsoft Fabric — октябрь 2023 г. | Вы приглашены присоединиться к серии вебинаров октября, где мы покажем, как использовать фабрику данных для преобразования и оркестрации данных в различных сценариях. |
| Сентябрь 2023 | Уведомление о канале или группе Outlook и Teams из конвейера Microsoft Fabric | Узнайте, как отправлять уведомления в каналы и группы Teams и сообщения электронной почты Outlook. |
| Сентябрь 2023 | Серия вебинаров фабрики данных Microsoft Fabric — сентябрь 2023 г. | Присоединитесь к серии вебинаров фабрики данных, где мы покажем, как использовать фабрику данных для преобразования и оркестрации данных в различных сценариях. |
| Август 2023 г. | Конвейеры, управляемые метаданными для Microsoft Fabric, часть 2, стиль хранилища данных | Обзор конвейера на основе метаданных в Microsoft Fabric, который следует архитектуре медальона с хранилищем данных, выступающим в качестве уровня Gold. |
| Август 2023 г. | Конвейеры на основе метаданных для Microsoft Fabric | Обзор конвейера на основе метаданных в Microsoft Fabric , который следует архитектуре медальона (Бронза, Silver, Gold). |
| Август 2023 г. | Использование конвейеров данных для копирования данных в базы данных KQL и создания рабочих процессов с действием подстановки | База данных KQL аналитики в режиме реального времени поддерживается как в качестве назначения, так и источника с конвейерами данных, что позволяет создавать и управлять различными действиями извлечения, преобразования и загрузки (ETL), используя мощность и возможности DQL-баз данных. |
| Август 2023 г. | Добавочно накапливает данные | Благодаря потокам данных 2-го поколения, который поддерживает назначения данных, вы можете настроить собственный шаблон для постепенной загрузки новых данных, замены старых данных и поддержания актуальности отчетов с исходными данными. |
| Август 2023 г. | Улучшение производительности конвейера данных, часть 3. Получение более чем 50% улучшения для исторических нагрузок | Узнайте, как учитывать разбивку на страницы с учетом текущего состояния конвейеров данных Fabric в предварительной версии. Этот конвейер выполняется, если количество страниц с разбивкой на страницы не слишком велико. Узнайте больше о получении более чем 50% улучшения для исторических нагрузок. |
| Август 2023 г. | Улучшения производительности конвейера данных, часть 2. Создание массива JSON | Примеры из этой серии блогов включают слияние двух массивов в массив объектов JSON, а также как принимать диапазон дат и создавать несколько подрангов, а затем хранить их в виде массива JSON. Узнайте больше о создании массива JSON. |
| Июль 2023 г. | Улучшения производительности конвейера данных, часть 1. Преобразование интервала времени (dd.hh:mm:ss) в секунды | Часть одной из серии блогов по перемещению данных с несколькими действиями копирования перемещает небольшие тома параллельно: как преобразовать интервал времени (dd.hh:mm:ss) в секунды. |
| Июль 2023 г. | Создание рабочего процесса аналитики данных с помощью конвейера данных Фабрики данных Fabric | Блог, охватывающий конвейеры данных в фабрике данных и преимущества, которые вы найдете с помощью конвейеров для оркестрации проектов и действий аналитики данных Fabric. |
| Июль 2023 г. | Руководство по конвейерам данных. Прием файлов в Lakehouse из REST API с разбиением на страницы. Центр данных AVEVA | В этом блоге мы будем действовать в персоне клиента AVEVA, который должен получать данные об операциях из Центра данных AVEVA в Microsoft Fabric Lakehouse. |
| Июль 2023 г. | Центр внимания фабрики данных: поток данных 2-го поколения | В этом блоге рассматриваются два основных высокоуровневых компонента Фабрики данных, реализующие: потоки данных и конвейеры. |
Synapse Инжиниринг данных в Microsoft Fabric
В этом разделе приведены архивированные новые функции и возможности проектирования данных, включая фабрику данных в Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Соединитель Fabric Spark для хранилища данных Fabric Synapse в среде выполнения Spark (предварительная версия) | Соединитель Fabric Spark для хранилища данных Synapse (предварительная версия) позволяет разработчику Spark или специалисту по обработке и анализу данных получить доступ к данным из конечной точки хранилища или аналитики SQL в lakehouse (из одной рабочей области или из разных рабочих областей) с упрощенным API Spark. |
| Июнь 2024 г. | Общедоступные Предварительная версия API общего доступа к внешним данным | REST API для внешнего общего доступа к данным OneLake теперь доступны в предварительной версии. Теперь пользователи могут масштабировать варианты использования общего доступа к данным, автоматив создание общих папок с помощью общедоступного API. |
| Июнь 2024 г. | Предварительная версия пулов емкости | Администраторы емкости теперь могут создавать настраиваемые пулы (предварительная версия) на основе требований к рабочей нагрузке, обеспечивая детальный контроль над вычислительными ресурсами. Настраиваемые пулы для Инжиниринг данных и Обработка и анализ данных можно задать как параметры пула Spark в параметрах рабочей области Spark и элементах среды. |
| Июнь 2024 г. | Собственный обработчик выполнения для Apache Spark | Модуль машинного выполнения для Apache Spark в Fabric Инжиниринг данных и Обработка и анализ данных для среды выполнения Fabric 1.2 теперь находится в предварительной версии. Дополнительные сведения см. в разделе "Собственный механизм выполнения" для Fabric Spark. |
| Июнь 2024 г. | API доступа к данным OneLake | После выпуска ролей доступа к данным OneLake в предварительной версии новые API доступны для управления ролями доступа к данным. Эти API можно использовать для программного управления доступом к подробным данным для озерных домов. |
| Май 2024 г. | Среда выполнения 1.3 (Apache Spark 3.5, Delta Lake 3.1, R 4.3.3, Python 3.11) (предварительная версия) | Усовершенствования среды выполнения Fabric 1.3 включают включение Delta Lake 3.1 , совместимость с Python 3.11, поддержка начальных пулов, интеграция с возможностями управления средой и библиотеками. Кроме того, среда выполнения Fabric теперь расширяет возможности обработки и анализа данных путем поддержки языка R и интеграции Copilot. |
| Май 2024 г. | Анализ рядов Spark и предварительная версия функции Autotune | Функции анализа последовательности выполнения Spark позволяют анализировать тенденцию выполнения и сравнение производительности для повторяющихся экземпляров выполнения конвейера Spark и повторяющихся действий выполнения Spark из той же записной книжки или определения задания Spark. |
| Май 2024 г. | Сочетания клавиш OneLake для локальных и сетевых источников данных (предварительная версия) | Подключитесь к локальным источникам данных с помощью локального шлюза данных Fabric на компьютере в вашей среде с видимостью сети, совместимой с S3, Amazon S3 или источником данных Google Cloud Storage. Затем создайте ярлык и выберите этот шлюз. Дополнительные сведения см. в статье "Создание ярлыков для локальных данных". |
| Май 2024 г. | Комментарий @tagging в записной книжке | Записная книжка теперь поддерживает возможность тегов других пользователей в комментариях, как и знакомые функции использования продуктов Office. |
| Май 2024 г. | Обновления ленты записной книжки | Новые функции на ленте записной книжки Fabric, включая элемент управления "Подключение сеанса" и кнопку "Данные Wrangler" на вкладке "Главная", сеансы высокой параллелизма, новый элемент управления "Просмотр сведений о сеансе", включая время ожидания сеанса. |
| Май 2024 г. | Инжиниринг данных: общедоступная среда | Среда в Fabric теперь общедоступна. Среда — это централизованный элемент , позволяющий настроить все необходимые параметры для выполнения задания Spark в одном месте. В общедоступной версии мы добавили поддержку Git, конвейеров развертывания, REST API, папок ресурсов и общего доступа. |
| Май 2024 г. | Общедоступный API для рабочей области Инжиниринг данных/науки | Поддержка REST API для параметров рабочей области Fabric Инжиниринг данных/Science позволяет пользователям создавать и управлять вычислениями Spark, выбирать среду выполнения по умолчанию или среду по умолчанию, включать или отключать режим высокой параллелизма или автологирование машинного обучения. |
| Апрель 2024 г. | Прием оптимистических заданий Fabric Spark | Прием оптимистических заданий Fabric Spark снижает частоту ошибок регулирования (HTTP 430: превышение ограничения емкости Spark) и улучшает прием заданий для наших клиентов, особенно во время пиковых часов использования. |
| Апрель 2024 г. | Поддержка одного узла для начальных пулов | Поддержка одного узла для начальных пулов позволяет настроить начальный пул на максимальный один узел и получить время начала сеанса супер-быстро для сеансов Spark. |
| Апрель 2024 г. | Образ контейнера для Synapse VS Code | Чтобы упростить процесс разработки, мы выпустили образ контейнера для Synapse VS Code , содержащий все необходимые зависимости для расширения. |
| Апрель 2024 г. | Интеграция Git с определением задания Spark | Интеграция Git с определениями заданий Spark позволяет проверять изменения определений заданий Spark в репозиторий Git, который будет включать исходный код заданий Spark и другие свойства элемента. |
| Апрель 2024 г. | Новый обновленный обозреватель объектов в записной книжке | Новый интерфейс обозреватель объектов повышает гибкость и возможность обнаружения источников данных в обозревателе и улучшает возможности обнаружения папок ресурсов. |
| Апрель 2024 г. | %Запуск скриптов в записной книжке | Теперь можно использовать магическую команду %run для запуска скриптов Python и скриптов SQL в папке ресурсов записной книжки, как и команда Jupyter Notebook %run . |
| Апрель 2024 г. | Сочетания клавиш OneLake для предварительной версии источников данных, совместимых с S3 | Сочетания клавиш OneLake для источников данных, совместимых с S3, теперь доступны в предварительной версии. Создайте ярлык , совместимый с Amazon S3, чтобы подключиться к существующим данным через единое пространство имен без необходимости копировать или перемещать данные. |
| Апрель 2024 г. | Сочетания клавиш OneLake для Google Cloud Storage предварительной версии | Ярлыки OneLake для Google Cloud Storage теперь доступны в предварительной версии. Создайте ярлык Google Cloud Storage для подключения к существующим данным через единое пространство имен без необходимости копировать или перемещать данные. |
| Апрель 2024 г. | Роли доступа к данным OneLake | Роли доступа к данным OneLake для Lakehouse доступны в предварительной версии. Разрешения ролей и назначения пользователей и групп можно легко обновить с помощью нового пользовательского интерфейса безопасности папок. |
| Март 2024 г. | Новое улучшение проверки для "Загрузка в таблицу" | Новое усовершенствование проверки функции "Загрузка в таблицу" помогает устранить любые проблемы с проверкой и упростить загрузку данных. |
| Март 2024 г. | Очередь для заданий записной книжки | Теперь при задании очереди заданий записной книжки задания, запускаемые конвейерами или планировщиком заданий, будут добавлены в очередь и будут автоматически выполняться при освобождении емкости. Дополнительные сведения см. в разделе "Очередь заданий" в Microsoft Fabric Spark. |
| Март 2024 г. | Функция настройки запросов Autotune для Apache Spark | Теперь доступна функция настройки запросов Autotune для Apache Spark . Autotune использует исторические данные из запросов Spark SQL и алгоритмов машинного обучения для автоматической настройки конфигураций, обеспечения более быстрого времени выполнения и повышения эффективности. |
| Март 2024 г. | OneLake проводник: редактирование с помощью Excel | В нашем последнем выпуске проводника версии 1.0.11.0 мы рады сообщить, что теперь вы можете обновлять файлы непосредственно с помощью Excel, зеркально отображая удобный интерфейс, доступный в OneDrive. |
| Февраль 2024 г. | Доступ к доверенной рабочей области (предварительная версия) для сочетаний клавиш OneLake | Доступ к доверенной рабочей области (предварительная версия) обеспечивает безопасный и простой доступ к учетным записям хранения ADLS 2-го поколения из сочетаний клавиш OneLake в Fabric. Дополнительные сведения см. в разделе "Доступ к доверенным рабочим областям( предварительная версия)". |
| Февраль 2024 г. | Сокращение затрат на исходящий трафик с помощью сочетаний клавиш S3 в OneLake | Узнайте, как сочетания клавиш OneLake в S3 теперь поддерживают кэширование, что может значительно снизить затраты на исходящий трафик. Используйте новый параметр включения кэша для сочетаний клавиш S3 с ярлыком S3. |
| Февраль 2024 г. | API сочетаний клавиш OneLake | Новые интерфейсы REST API для сочетаний клавиш OneLake позволяют программным образом создавать ярлыки и управлять ими в настоящее время в предварительной версии. Теперь вы можете программно создавать, читать и удалять сочетания клавиш OneLake. Например, см . раздел "Использование сочетаний клавиш OneLake" rest API. |
| Февраль 2024 г. | Обзор фрагмента кода | Новая функция записной книжки "Обзор кода" позволяет легко получать доступ к фрагментам кода и вставлять фрагменты кода для часто используемых фрагментов кода с несколькими поддерживаемыми языками. |
| Февраль 2024 г. | Настройка времени ожидания сеанса | Записные книжки теперь поддерживают настройку времени ожидания сеанса для текущего динамического сеанса. Это поможет вам избежать потери ресурсов или потери контекста из-за времени ожидания. Вы можете указать максимальную продолжительность сеансов Spark, от минут до часов, а также получать оповещения до истечения срока действия сеанса и расширить его. |
| Февраль 2024 г. | Обновление строки состояния записной книжки Fabric | Новая строка состояния записной книжки Fabric содержит три сохраненных кнопки сведений: состояние сеанса, состояние сохранения и состояние выбора ячеек. Кроме того, функции контекста включают сведения о состоянии подключения Git, ярлыке для расширения времени ожидания сеанса и навигатора ячейки с ошибкой. |
| 2024 января | Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных | Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас? |
| 2024 января | Новая версия OneLake проводник включает интеграцию Excel | С помощью последней версии проводника OneLake (версии 1.0.11.0) мы предлагаем несколько обновлений для улучшения работы с OneLake, включая интеграцию Excel. |
| Декабрь 2023 г. | %%configure — персонализация сеанса Spark в записной книжке | Теперь вы можете персонализировать сеанс Spark с помощью волшебной команды %%configure, как в интерактивной записной книжке, так и в действиях записной книжки конвейера. |
| Декабрь 2023 г. | Расширенный предварительный просмотр кадров данных в записной книжке | Функция display() была обновлена в Записной книжке Fabric, которая теперь называется предварительной версией форматированного кадра данных. Теперь, когда вы используете display() для предварительного просмотра кадра данных, можно легко указать диапазон, просмотреть сводку кадра данных и статистику столбцов, проверить недопустимые значения или отсутствующие значения и просмотреть длинную ячейку. |
| Декабрь 2023 г. | Работа с OneLake с помощью обозревателя служба хранилища Azure | Если вы хотите использовать приложение, которое напрямую интегрируется с Windows проводник, ознакомьтесь с проводником OneLake. Однако если вы привыкли использовать обозреватель служба хранилища Azure для задач управления данными, вы можете продолжать использовать свои функциональные возможности с Помощью OneLake и некоторых ее ключевых преимуществ. |
| Ноябрь 2023 г. | Поддержка специальных возможностей для Lakehouse | Чтобы обеспечить более инклюзивное и понятное взаимодействие, мы реализовали улучшения до сих пор для поддержки специальных возможностей в Lakehouse, включая совместимость с средствами чтения с экрана, изменение потока текста с экрана, навигацию по клавиатуре, альтернативный текст для изображений и полей форм и меток. |
| Ноябрь 2023 г. | Расширенный многозадачность работы в Lakehouse | Мы представили новые возможности для улучшения многозадачной работы в Lakehouse, включая многозадачность во время выполнения операций, неблокирование перезагрузки и более четкие уведомления. |
| Ноябрь 2023 г. | Обновленные возможности DataGrid в Lakehouse | Обновленный dataGrid для предварительной версии таблицы Lakehouse теперь включает сортировку, фильтрацию и изменение размера столбцов. |
| Ноябрь 2023 г. | Повторная подготовка конечной точки аналитики SQL | Теперь вы можете повторить подготовку конечной точки аналитики SQL непосредственно в Lakehouse. Это означает, что если первоначальная попытка подготовки завершается сбоем, у вас есть возможность повторить попытку без необходимости создать совершенно новый Lakehouse. |
| Ноябрь 2023 г. | Среда выполнения Microsoft Fabric 1.2 | Среда выполнения Microsoft Fabric 1.2 — это значительный прогресс в наших возможностях обработки данных. Среда выполнения Microsoft Fabric 1.2 включает Apache Spark 3.4.1, Mariner 2.0 в качестве операционной системы, Java 11, Scala 2.12.17, Python 3.10, Delta Lake 2.4 и R 4.2.2, обеспечивая наличие самых передовых средств в вашем распоряжении. Кроме того, этот выпуск поставляется с пакетами по умолчанию, охватывая полную установку Anaconda и основные библиотеки для Java/Scala, Python и R, упрощая рабочий процесс. |
| Ноябрь 2023 г. | Поддержка нескольких сред выполнения | При внедрении среды выполнения 1.2 Fabric поддерживает несколько сред выполнения, предлагая пользователям возможность легко переключаться между ними, минимизируя риск несовместимости или сбоев. При изменении среды выполнения все системные элементы рабочей области, включая Lakehouses, SJD и записные книжки, будут работать с использованием новой выбранной версии среды выполнения на уровне рабочей области, начиная с следующего сеанса Spark. |
| Ноябрь 2023 г. | Delta в качестве формата таблицы по умолчанию в новой среде выполнения 1.2 | Теперь параметр deltaсеанса spark.sql.sources.default Spark по умолчанию. Все таблицы, созданные с помощью Spark SQL, PySpark, Scala Spark и Spark R, когда тип таблицы опущен, по умолчанию создаст таблицу как Delta. |
| Ноябрь 2023 г. | Интеллектуальный кэш | По умолчанию в Fabric Spark включена только что обновленная и оптимизированная функция интеллектуального кэша. Интеллектуальный кэш легко работает за кулисами и кэширует данные, чтобы ускорить выполнение заданий Spark в Microsoft Fabric, как оно считывается из хранилища OneLake или ADLS 2-го поколения с помощью сочетаний клавиш. |
| Ноябрь 2023 г. | Улучшения Центра мониторинга для Spark | Последние улучшения в центре мониторинга предназначены для предоставления комплексного и подробного представления действий Spark и Lakehouse, включая выделение исполнителя, версию среды выполнения для приложения Spark, ссылку на связанные элементы на странице сведений. |
| Ноябрь 2023 г. | Мониторинг операций Lakehouse | Теперь пользователи могут просматривать ход выполнения и состояние заданий обслуживания Lakehouse и действий по загрузке таблиц. |
| Ноябрь 2023 г. | Анализ использования ресурсов приложения Spark | Отвечая на запросы клиентов о мониторинге метрик использования ресурсов Spark для настройки производительности и оптимизации, мы рады представить функцию анализа использования ресурсов Spark, которая теперь доступна в предварительной версии. Эта недавно выпущенная функция позволяет пользователям отслеживать выделенных исполнителей, запущенных исполнителей и бездействующих исполнителей вместе с выполнением Spark. |
| Ноябрь 2023 г. | Поддержка REST API для предварительной версии определения задания Spark | Теперь доступны общедоступные API REST для определения заданий Spark, что упрощает управление элементами SJD и управление ими. |
| Ноябрь 2023 г. | Поддержка REST API для Lakehouse, загрузка в таблицы и обслуживание таблиц | В качестве ключевого требования для интеграции рабочей нагрузки теперь доступны общедоступные API REST для Lakehouse . Общедоступные API Lakehouse REST упрощают управление элементами Lakehouse и управление ими программным способом. |
| Ноябрь 2023 г. | Поддержка Lakehouse для конвейеров интеграции и развертывания Git (предварительная версия) | Lakehouse теперь интегрируется с возможностями управления жизненным циклом в Microsoft Fabric, обеспечивая стандартизированную совместную работу между всеми участниками команды разработки на протяжении всей жизни продукта. Управление жизненным циклом упрощает эффективный процесс управления версиями продуктов и выпуска, постоянно предоставляя функции и исправления ошибок в нескольких средах. |
| Ноябрь 2023 г. | Внедрение отчета Power BI в записную книжку | Мы рады сообщить, что пакет Python powerbiclient теперь изначально поддерживается в записных книжках Fabric. Это означает, что вы можете легко внедрять и взаимодействовать с отчетами Power BI в записных книжках с несколькими строками кода. Дополнительные сведения об использовании пакета powerbiclient для внедрения компонента Power BI. |
| Ноябрь 2023 г. | Mssparkutils new API — ссылка на выполнение нескольких записных книжек параллельно | Новый API runMultiple в mssparkutils с именем mssparkutils.notebook.runMultiple() позволяет выполнять несколько записных книжек параллельно или с предопределенной топологической структурой. Дополнительные сведения см. в разделе "Служебные программы записной книжки". |
| Ноябрь 2023 г. | Ресурсы записной книжки. Поддержка JAR-файла | Теперь мы поддерживаем отправку .jar файлов в обозревателе ресурсов записной книжки. Вы можете добавить собственные скомпилированные libs, использовать перетаскивание для создания фрагмента кода для их установки в сеансе и удобно загружать библиотеки в коде. |
| Ноябрь 2023 г. | Предварительная версия интеграции с Записной книжкой Git | Записные книжки Fabric теперь предлагают интеграцию Git для управления версиями с помощью Azure DevOps. Это позволяет пользователям легко управлять версиями кода записной книжки и управлять ветвями Git, используя функции Fabric Git и Azure DevOps. |
| Ноябрь 2023 г. | Записная книжка в предварительной версии конвейера развертывания | Теперь вы также можете использовать записные книжки для развертывания кода в разных средах, таких как разработка, тестирование и рабочая среда. Вы также можете использовать правила развертывания для настройки поведения записных книжек при их развертывании, таких как изменение стандартного Lakehouse записной книжки. Приступая к работе с конвейерами развертывания, а записная книжка отображается в содержимом развертывания автоматически. |
| Ноябрь 2023 г. | Предварительная версия REST API записной книжки | С помощью общедоступных API REST для элементов записной книжки инженеры и специалисты по обработке и анализу данных могут автоматизировать конвейеры и эффективно устанавливать CI/CD. Общедоступный API записной книжки позволяет пользователям легко управлять элементами записных книжек Fabric и интегрировать записную книжку с другими инструментами и системами. |
| Ноябрь 2023 г. | Предварительная версия среды | Мы рады сообщить о предварительной версии среды в Fabric. Среда — это централизованный элемент , позволяющий настроить все необходимые параметры для выполнения задания Spark в одном месте. |
| Ноябрь 2023 г. | Расширение Synapse VS Code в vscode.dev предварительной версии | Благодаря поддержке расширения Synapse VS Code на vsocde.dev пользователи теперь могут легко изменять и выполнять записные книжки Fabric, не покидая окно браузера. Кроме того, все собственные возможности vs-developer в VS Code теперь доступны конечным пользователям в этой среде. |
| Октябрь 2023 | Создание нескольких сочетаний клавиш OneLake одновременно | Создание нескольких сочетаний клавиш OneLake стало проще. Вместо создания сочетаний клавиш одновременно можно перейти к нужному расположению и выбрать несколько целевых объектов одновременно. Все выбранные целевые объекты создаются как новые сочетания клавиш в одной операции. |
| Октябрь 2023 | Delta-RS предоставляет встроенную поддержку OneLake | Команда OneLake работала с сообществом Delta-RS, чтобы помочь ввести поддержку распознавания URL-адресов OneLake как в Delta-RS, так и в Хранилище объектов Rust. |
| Сентябрь 2023 | Импорт записной книжки в рабочую область | Новая запись "Импорт записной книжки" в рабочей области —> новое меню позволяет легко импортировать новые элементы записной книжки Fabric в целевой рабочей области. Вы можете отправить один или несколько файлов, включая .ipynb.pyформаты , , .sql.scalaи .r форматы файлов. |
| Сентябрь 2023 | Поддержка файловой системы записной книжки в расширении VS Code Synapse | Расширение Synapse VS Code теперь поддерживает файловую систему записной книжки для Инжиниринг данных и Обработка и анализ данных в Microsoft Fabric. Расширение Synapse VS Code позволяет пользователям разрабатывать свои элементы записной книжки непосредственно в среде Visual Studio Code. |
| Сентябрь 2023 | Режим общего доступа к записным книжкам только для выполнения | Теперь мы поддерживаем проверку операции "Выполнить" отдельно при совместном использовании записной книжки, если вы только что выбрали операцию "Выполнить", получатель увидит записную книжку только для выполнения. |
| Сентябрь 2023 | Разрешение конфликтов в записной книжке | Теперь мы поддерживаем просмотр и сравнение различий между двумя версиями одной и той же записной книжки при сохранении конфликтов. |
| Сентябрь 2023 | Mssparkutils новый API для быстрого копирования данных | Теперь мы поддерживаем новый метод в mssparkutils, который может ускорить перемещение и копированиеMssparkutils.fs.fastcp() больших объемов данных. Вы можете использовать mssparkutils.fs.help("fastcp") для проверки подробного использования. |
| Сентябрь 2023 | Поддержка WHL-файлов записных книжек | Теперь мы поддерживаем отправку WHL-файлов в обозревателе ресурсов записной книжки. |
| Август 2023 г. | Знакомство с режимом высокой параллелизма в записных книжках для рабочих нагрузок Инжиниринг данных и Обработка и анализ данных в Microsoft Fabric | Режим высокой параллелизма позволяет одновременно запускать записные книжки в одном кластере без ущерба для производительности или безопасности при оплате за один сеанс. Режим высокой параллелизма предоставляет несколько преимуществ для пользователей Fabric Spark. |
| Август 2023 г. | Поддержка субъекта-службы для подключения к данным в потоке данных, Datamart, наборе данных и потоке данных 2-го поколения | Субъект-служба Azure добавлен в качестве типа проверки подлинности для набора источников данных, которые можно использовать в наборе данных, потоке данных, потоке данных 2-го поколения и Datamart. |
| Август 2023 г. | Объявление о поддержке записи XMLA для наборов данных Direct Lake | Наборы данных Direct Lake теперь поддерживают операции XMLA-Write. Теперь вы можете использовать избранные средства и скрипты BI Pro для создания наборов данных Direct Lake и управления ими с помощью конечных точек XMLA. |
| Июль 2023 г. | Управление разрешениями для общего доступа и совместного использования Lakehouse | Предоставление общего доступа к лейкхаусу и управление разрешениями , чтобы пользователи могли получать доступ к данным lakehouse через Центр данных, конечную точку аналитики SQL и семантику по умолчанию. |
| Июнь 2023 г. | Виртуализация существующих данных в OneLake с помощью сочетаний клавиш | Подключите подсистемы данных без перемещения или копирования данных с помощью OneLake, что позволяет создавать специальные папки, называемые ярлыками, которые указывают на другие расположения хранилища. |
| Май 2023 г. | Знакомство с Инжиниринг данных в Microsoft Fabric | С помощью Synapse Инжиниринг данных одним из основных возможностей Microsoft Fabric инженеры по обработке и анализу данных чувствуют себя правильно дома, в состоянии использовать возможности Apache Spark для преобразования данных в масштабе и создания надежной архитектуры lakehouse. |
Примеры и рекомендации synapse Инжиниринг данных
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Демистификация приема данных в Fabric: основные компоненты для приема данных в Fabric Lakehouse с помощью конвейеров данных Fabric | Узнайте о платформе приема пакетных данных на основе опыта работы с различными клиентами при создании lakehouse в Fabric. |
| Июнь 2024 г. | Повышение производительности и экономия затрат с помощью быстрого копирования в потоках данных 2-го поколения | Узнайте, как функция быстрого копирования помогает повысить производительность и экономичность потоков данных 2-го поколения. |
| Май 2024 г. | Копирование данных из Lakehouse в другой рабочей области с помощью конвейера данных | Узнайте, как копировать данные между Lakehouse, которые пересекают разные рабочие области с помощью конвейера данных. |
| Май 2024 г. | Профилирование записных книжек Microsoft Fabric Spark с помощью Sparklens | В этом блоге вы узнаете , как использовать Sparklens, средство профилирования Spark с открытым исходным кодом, профилировать записные книжки Microsoft Fabric Spark и повысить производительность кода Spark. |
| Март 2024 г. | Бриджинг Fabric Lakehouses: разностный канал данных изменений для простого ETL | Узнайте, как использовать канал данных Delta Change Для упрощения простой синхронизации данных в разных озерах в архитектуре медальона. |
| 2024 января | Использование конвейеров данных фабрики данных Fabric для оркестрации рабочих процессов на основе записных книжек | Рекомендации и рекомендации по созданию рабочих процессов Записной книжки Spark Fabric с помощью фабрики данных в Fabric с конвейерами данных. |
| Ноябрь 2023 г. | Изменение структуры: использование собственной библиотеки с Microsoft Fabric | Пошаговое руководство по использованию собственной библиотеки Python в Lakehouse. Довольно просто создать собственную библиотеку с помощью Python и еще проще использовать ее в Fabric. |
| Август 2023 г. | Изменение структуры игры: ведение журнала рабочей нагрузки с помощью записных книжек | Дополнительные сведения о ведении журнала рабочей нагрузки в OneLake с помощью записных книжек с помощью пути API OneLake в записной книжке. |
Synapse Обработка и анализ данных в Microsoft Fabric
В этом разделе приведены архивные улучшения и функции Обработка и анализ данных в Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Предварительная версия пулов емкости | Администраторы емкости теперь могут создавать настраиваемые пулы (предварительная версия) на основе требований к рабочей нагрузке, обеспечивая детальный контроль над вычислительными ресурсами. Настраиваемые пулы для Инжиниринг данных и Обработка и анализ данных можно задать как параметры пула Spark в параметрах рабочей области Spark и элементах среды. |
| Июнь 2024 г. | Собственный обработчик выполнения для Apache Spark | Модуль машинного выполнения для Apache Spark в Fabric Инжиниринг данных и Обработка и анализ данных для среды выполнения Fabric 1.2 теперь находится в предварительной версии. Дополнительные сведения см. в разделе "Собственный механизм выполнения" для Fabric Spark. |
| Июнь 2024 г. | Демистификация приема данных в Fabric: основные компоненты для приема данных в Fabric Lakehouse с помощью конвейеров данных Fabric | Узнайте о платформе приема пакетных данных на основе опыта работы с различными клиентами при создании lakehouse в Fabric. |
| Июнь 2024 г. | Повышение производительности и экономия затрат с помощью быстрого копирования в потоках данных 2-го поколения | Узнайте, как функция быстрого копирования помогает повысить производительность и экономичность потоков данных 2-го поколения. |
| Май 2024 г. | Общедоступный API для рабочей области Инжиниринг данных/науки | Поддержка REST API для параметров рабочей области Fabric Инжиниринг данных/Science позволяет пользователям создавать и управлять вычислениями Spark, выбирать среду выполнения по умолчанию или среду по умолчанию, включать или отключать режим высокой параллелизма или автологирование машинного обучения. |
| Апрель 2024 г. | Семантическая ссылка | Семантические ссылки теперь общедоступны! Пакет поставляется с нашим виртуальным жестким диском по умолчанию. Теперь вы можете использовать семантику канала в Fabric сразу без установки pip. |
| Апрель 2024 г. | Делегирование уровня емкости для ИИ и Copilot | Теперь администраторы клиентов могут включить ИИ и Copilot в Fabric для всей организации, определенных групп безопасности или для определенной емкости. |
| Март 2024 г. | Клиенты ЕС могут использовать ИИ и Copilot без перекрестного геопараметров | С середины марта клиенты ЕС могут использовать ИИ и Copilot без включения кросс-геопараметров, а их ИИ и Copilot запросы будут обрабатываться в EUDB. |
| Март 2024 г. | Предварительная версия настройки Гиперпараметра code-First | FLAML теперь интегрирован для настройки гиперпараметра, в настоящее время является предварительной версией функции. flaml.tune Функция Fabric упрощает этот процесс, предлагая экономичный и эффективный подход к настройке гиперпараметров. |
| Март 2024 г. | Предварительная версия Code-First AutoML | С помощью новой функции AutoML вы можете автоматизировать рабочий процесс машинного обучения и получить лучшие результаты с меньшими усилиями. AutoML или Автоматизированная Машинное обучение — это набор методов и инструментов, которые могут автоматически обучать и оптимизировать модели машинного обучения для любого заданного типа данных и задач. |
| Март 2024 г. | Сравнение вложенных запусков | Родительский и дочерний запуски в представлении списка запуска для экспериментов машинного обучения представляет иерархическую структуру, позволяя пользователям легко просматривать различные родительские и дочерние запуски в одном представлении и легко взаимодействовать с ними для визуального сравнения результатов. |
| Март 2024 г. | Поддержка обязательного применения меток MIP | Элементы модели машинного обучения и экспериментов в Fabric теперь предлагают расширенную поддержку меток Microsoft Information Protection (MIP). |
| 2024 января | Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных | Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас? |
| Декабрь 2023 г. | Обновление семантической ссылки | Мы рады сообщить о последнем обновлении семантической ссылки! Помимо многих улучшений, мы также добавили множество новых возможностей для нашего сообщества разработчиков Power BI, которые можно использовать из записных книжек Fabric для удовлетворения всех потребностей службы автоматизации. |
| Декабрь 2023 г. | Предварительно созданные службы ИИ Azure в предварительной версии Fabric | Предварительная версия предварительно созданных служб ИИ в Fabric — это интеграция со службами ИИ Azure, ранее известной как Azure Cognitive Services. Предварительно созданные службы ИИ Azure позволяют легко улучшить данные с предварительно созданными моделями ИИ без каких-либо предварительных требований. В настоящее время предварительно созданные службы ИИ находятся в предварительной версии и включают поддержку Службы OpenAI Microsoft Azure, языка ИИ Azure и Azure AI Translator. |
| Ноябрь 2023 г. | Copilot предварительная версия записных книжек | Записные Copilot книжки Fabric Обработка и анализ данных и Инжиниринг данных предназначены для повышения производительности, предоставления полезных ответов и рекомендаций, а также создания кода для распространенных задач, таких как исследование данных, подготовка данных и машинное обучение. Вы можете взаимодействовать и взаимодействовать с ИИ на панели чата или даже из ячеек записных книжек с помощью магических команд, чтобы получить аналитические сведения от данных быстрее. Дополнительные сведения см Copilot . в записных книжках. |
| Ноябрь 2023 г. | Пользовательские операции Python в Wrangler | Data Wrangler, инструмент на основе записной книжки для анализа данных, всегда позволял пользователям просматривать и применять общие операции очистки данных, создавая соответствующий код в режиме реального времени. Теперь, помимо создания кода из пользовательского интерфейса, пользователи также могут писать собственный код с пользовательскими операциями в Data Wrangler. |
| Ноябрь 2023 г. | Предварительная версия Wrangler для dataFrames Spark | Wrangler теперь поддерживает кадры данных Spark в предварительной версии. До сих пор пользователи смогли просматривать и преобразовывать кадры данных pandas с помощью распространенных операций, которые можно преобразовать в код Python в режиме реального времени. Новый выпуск позволяет пользователям изменять кадры данных Spark в дополнение к пандам DataFrames с помощью Wrangler. |
| Ноябрь 2023 г. | Мини-приложение записной книжки MLFlow | Мини-приложение встроенного разработки MLflow позволяет пользователям легко отслеживать их эксперименты вместе с метриками и параметрами непосредственно из своей записной книжки. |
| Ноябрь 2023 г. | Улучшения удобства использования нового элемента модели и элемента эксперимента | Новые усовершенствования в нашей модели и функции отслеживания экспериментов основаны на ценных отзывах пользователей. Новый элемент управления "Дерево" в представлении сведений о выполнении упрощает отслеживание, показывая, какой запуск выбран. Мы улучшили функцию сравнения, что позволяет легко настроить область сравнения для более удобного взаимодействия. Теперь можно выбрать имя запуска, чтобы просмотреть представление сведений о выполнении. |
| Ноябрь 2023 г. | Последние запуски эксперимента | Теперь пользователям проще проверить последние запуски эксперимента непосредственно из представления списка рабочих областей. Это обновление упрощает отслеживание недавних действий, быстро переход к соответствующему приложению Spark и применение фильтров на основе состояния выполнения. |
| Ноябрь 2023 г. | Модели, переименованные в модели машинного обучения | Корпорация Майкрософт переименовала "Модели" в "Модели машинного обучения", чтобы обеспечить ясность и избежать путаницы с другими элементами Fabric. Дополнительные сведения см . в статье "Эксперименты машинного обучения" в Microsoft Fabric. |
| Ноябрь 2023 г. | SynapseML версии 1.0 | SynapseML версии 1.0 теперь выпущен. SynapseML версии 1.0 упрощает создание готовых систем машинного обучения в Fabric и используется в Корпорации Майкрософт в течение более шести лет. |
| Ноябрь 2023 г. | Обучение интерпретируемых машин с помощью SynapseML | Мы ввели масштабируемую реализацию объясняемых машин повышения (EBM), на базе Apache Spark в SynapseML. EBMs — это мощный метод машинного обучения, который объединяет точность градиентного повышения с сильным акцентом на интерпретацию модели. |
| Ноябрь 2023 г. | Предварительно созданные модели искусственного интеллекта в предварительной версии Microsoft Fabric | Мы рады сообщить о предварительной версии предварительно созданных моделей искусственного интеллекта в Fabric. Azure OpenAI Service, Анализ текста и Azure AI Translator — это предварительно созданные модели, доступные в Fabric, с поддержкой API RESTful и SynapseML. Вы также можете использовать библиотеку Python OpenAI для доступа к службе Azure OpenAI в Fabric. |
| Ноябрь 2023 г. | Повторное использования существующего сеанса Spark в sparklyr | Мы добавили поддержку нового метода подключения с именем Synapse в sparklyr, который позволяет пользователям подключаться к существующему сеансу Spark. Кроме того, мы внесли этот метод подключения в проект sparklyr OSS. Теперь пользователи могут использовать sparklyr и SparkR в одном сеансе и легко обмениваться данными между ними. |
| Ноябрь 2023 г. | Поддержка REST API для экспериментов машинного обучения и моделей машинного обучения | REST API для эксперимента машинного обучения и модели машинного обучения теперь доступны. Эти ИНТЕРФЕЙСы REST API для экспериментов машинного обучения и моделей машинного обучения начинают предоставлять пользователям возможность создавать элементы машинного обучения и управлять ими программными средствами, ключевым требованием для автоматизации конвейера и интеграции рабочей нагрузки. |
| Октябрь 2023 | Семантическая ссылка (предварительная версия) | Семантическая связь — это инновационная функция, которая легко соединяет семантические модели Power BI с помощью Synapse Обработка и анализ данных в Microsoft Fabric. Как золотой слой в архитектуре медальона, семантические модели Power BI содержат самые изысканные и ценные данные в вашей организации. |
| Октябрь 2023 | Семантическая ссылка в Microsoft Fabric: бриджинг бизнес-аналитики и Обработка и анализ данных | Мы рады ознакомиться с предварительной версией семантической связи, инновационной функцией, которая легко подключает семантические модели Power BI к Synapse Обработка и анализ данных в Microsoft Fabric. |
| Октябрь 2023 | Начало работы с семантической ссылкой (предварительная версия) | Узнайте, как семантическая связь легко подключает семантические модели Power BI с помощью Synapse Обработка и анализ данных в Microsoft Fabric. Дополнительные сведения см. в разделе "Семантическая ссылка" в Microsoft Fabric: объединение бизнес-аналитики и Обработка и анализ данных. Вы также можете ознакомиться с примерами семантических записных книжек, которые теперь доступны в репозитории GitHub для примеров структуры. Эти записные книжки демонстрируют использование библиотеки Python семантики SemPy в Microsoft Fabric. |
| Август 2023 г. | Использование power of LangChain в Microsoft Fabric для расширенной сводки документов | Используйте потенциал возможностей Microsoft Fabric и SynapseML LLM, чтобы эффективно суммировать и упорядочивать собственные документы. |
| Июль 2023 г. | Развязывание power of SynapseML и Microsoft Fabric: руководство по Q&A в PDF-документах | В этой записи блога мы рассмотрим захватывающие функциональные возможности и функции Microsoft Fabric и SynapseML , чтобы продемонстрировать, как использовать модели Генеривных ИИ или большие языковые модели (LLMs) для выполнения задач вопросов и ответов (Q&A) в любом PDF-документе. |
| Май 2023 г. | Знакомство с Synapse Обработка и анализ данных в Microsoft Fabric | Благодаря обработке и анализу данных в Microsoft Fabric вы можете использовать возможности функций машинного обучения для бесшовного обогащения данных в рамках рабочих процессов аналитики и данных. |
Примеры и рекомендации synapse Обработка и анализ данных
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Создание пользовательских приложений ИИ с помощью Microsoft Fabric: реализация расширенного создания дополненного поколения для расширенных языковых моделей | В этом руководстве описано, как реализовать систему RAG (получение дополненного поколения) в Microsoft Fabric с помощью Azure OpenAI и поиска ИИ Azure. |
| Март 2024 г. | Новые примеры ИИ | Новые примеры AutoML, настройки модели и семантической связи отображаются в категории "Краткое руководство" Обработка и анализ данных примеров в Microsoft Fabric. |
| Декабрь 2023 г. | Использование данных Lakehouse в Microsoft Fabric и потока запросов в службе Машинное обучение Azure для создания приложений RAG | Пошаговые приложения RAG через поток запроса в службе Машинное обучение Azure в сочетании с данными Microsoft Fabric Lakehouse. |
| Ноябрь 2023 г. | Руководство по работе с новыми путями для обработки и анализа данных в Microsoft Fabric | Мы обновили руководство по Обработка и анализ данных Happy Path для Microsoft Fabric. Это новое комплексное руководство демонстрирует весь рабочий процесс обработки и анализа данных, используя проблему оттока клиентов банка в качестве контекста. |
| Ноябрь 2023 г. | Новые примеры для обработки и анализа данных | Мы расширили нашу коллекцию примеров для обработки и анализа данных, чтобы включить новые комплексные примеры R и новые краткие примеры учебников для "Объяснение выходных данных модели" и "Визуализация поведения модели". |
| Ноябрь 2023 г. | Новый пример прогнозирования для обработки и анализа данных | Новый Обработка и анализ данных пример прогнозирования продаж был разработан в сотрудничестве с Sonata Software. Этот новый пример охватывает весь рабочий процесс обработки и анализа данных, охватывающий от очистки данных до визуализации Power BI. Записная книжка охватывает шаги по разработке, оценке и оценке модели прогнозирования для продаж суперstore, используя возможности алгоритма SARIMAX. |
| Август 2023 г. | Сбой нового компьютера и примеры оттока клиентов | Дополнительные примеры добавлены в Обработка и анализ данных Microsoft Fabric Synapse используйте пример меню. Чтобы проверить эти Обработка и анализ данных примеры, выберите Synapse Обработка и анализ данных, а затем используйте пример. |
| Август 2023 г. | Использование семантического ядра с Lakehouse в Microsoft Fabric | Узнайте, как Fabric позволяет специалистам по обработке и анализу данных использовать семантические ядра с Lakehouse в Microsoft Fabric. |
Synapse Data Warehouse
В этом разделе приведены архивные улучшения и функции хранилища данных Synapse в Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Восстановление на месте интерфейса портала | Теперь вы можете создать созданные пользователем точки восстановления в хранилище с помощью портала Fabric. Дополнительные сведения см. в статье "Восстановление на месте хранилища в Microsoft Fabric". |
| Июнь 2024 г. | Соединитель Fabric Spark для хранилища данных Fabric в среде выполнения Spark (предварительная версия) | Соединитель Fabric Spark для хранилища данных Fabric (предварительная версия) позволяет разработчику Spark или специалисту по обработке и анализу данных из хранилища данных Fabric и конечной точке аналитики SQL (из одной рабочей области или из разных рабочих областей) с упрощенным API Spark. |
| Май 2024 г. | Мониторинг средств хранилища | Вы можете отслеживать действия хранилища данных Synapse с различными средствами, включая отчеты о выставлении счетов и использовании в хранилище данных Synapse, мониторинг подключений, сеансов и запросов с помощью динамических представлений, аналитики запросов и действий запросов. Дополнительные сведения см . в действии запроса: однократное представление для мониторинга выполняемых и завершенных запросов T-SQL. |
| Май 2024 г. | Copilot для хранилища данных | Copilotдля хранилища данных (предварительная версия) теперь доступна в ограниченной предварительной версии, предлагая Copilot область чата, быстрые действия и завершения кода. |
| Май 2024 г. | Запросы хранилища с перемещением по времени (предварительная версия) | Хранилище в Microsoft Fabric предоставляет возможность запрашивать исторические данные, как это было в прошлом на уровне инструкции, в настоящее время в предварительной версии. Возможность запрашивать данные из определенной метки времени известна в отрасли хранения данных как путешествия по времени. |
| Май 2024 г. | Усовершенствования COPY INTO | COPY INTO теперь поддерживает проверку подлинности Идентификатора Microsoft Entra и доступ к защищенному хранилищу брандмауэра через функциональность доверенной рабочей области. Дополнительные сведения см. в разделе "УЛУЧШЕНИЯ COPY INTO" и COPY INTO (Transact-SQL). |
| Апрель 2024 г. | Хранилище Fabric в действии копирования ADF | Теперь вы можете подключиться к хранилищу Fabric из конвейера Фабрика данных Azure/Synapse. Этот новый соединитель можно найти при создании нового источника или назначения приемника в действии копирования, в действии подстановки, действии хранимой процедуры, действии скрипта и действии получения метаданных. |
| Апрель 2024 г. | Интеграция Git | Интеграция Git для хранилища позволяет проверить изменения хранилища в репозитории Azure DevOps Git в качестве проекта базы данных SQL. |
| Апрель 2024 г. | Устранение секций | Устранение секций — это улучшение производительности таблиц с большим количеством файлов. Конечная точка аналитики SQL в Lakehouse использует исключение секций для чтения данных только из тех секций, которые относятся к запросу. Последние улучшения повышают производительность еще больше, если запросы направлены на несколько секций в таблице с большим количеством файлов. |
| Март 2024 г. | Зеркальное отображение в предварительной версии Microsoft Fabric | С помощью зеркального отображения в Fabric вы можете легко перенести базы данных в OneLake в Microsoft Fabric, обеспечивая простой нулевой ETL, практически в реальном времени аналитические сведения о ваших данных и разблокировку хранилища, БИЗНЕС, ИИ и многое другое. Дополнительные сведения см. в разделе "Что такое зеркальное отображение в Fabric?". |
| Март 2024 г. | Улучшения производительности холодного кэша | Структура хранит данные в разностных таблицах и когда данные не кэшируются, необходимо перекодировать данные из структур формата parquet в структуры в памяти для обработки запросов. Последние улучшения производительности холодного кэша еще больше оптимизируют транскодирование , и мы наблюдали до 9 % быстрее запросов в наших тестах, когда данные не кэшируются ранее. |
| Март 2024 г. | Извлечение и публикация проекта базы данных SQL непосредственно через редактор DW | Расширение База данных SQL Projects создает файл проекта SQL(.sqlproj локальное представление объектов SQL, составляющих схему для одной базы данных, таких как таблицы, хранимые процедуры или функции. Теперь можно извлечь и опубликовать проект базы данных SQL непосредственно через редактор DW. |
| Март 2024 г. | Изменение владельца элемента хранилища | Новый API принятия позволяет изменить владельца хранилища с текущего владельца на нового владельца, который может быть spN или учетной записью организации. |
| Март 2024 г. | Клонирование таблицы RLS и CLS | Клонированная таблица теперь наследует безопасность на уровне строк (RLS) и динамическое маскирование данных из источника клонирования таблицы. |
| Февраль 2024 г. | Улучшения производительности | Последние улучшения подключения и производительности включают улучшенный интерфейс для создания хранилищ, выполнения T-SQL, автоматического обнаружения метаданных и обмена сообщениями об ошибках. |
| Декабрь 2023 г. | Автоматическая контрольная точка журнала для хранилища Fabric | Автоматическая контрольная точка журнала — это один из способов, которыми мы помогаем вашему хранилищу данных обеспечить высокую производительность и лучше всего, это не включает в себя дополнительную работу. |
| Декабрь 2023 г. | Восстановление точек и восстановление на месте | Теперь можно создать точки восстановления и выполнить восстановление на месте хранилища до последнего момента во времени. Точки восстановления и восстановление на месте в настоящее время находятся в предварительной версии. Восстановление на месте является важной частью восстановления хранилища данных, что позволяет восстановить хранилище данных до предыдущего известного надежного состояния, заменив или перезаписав существующее хранилище данных, из которого была создана точка восстановления. |
| Ноябрь 2023 г. | Поддержка TRIM T-SQL | Теперь можно использовать TRIM команду для удаления пробелов или определенных символов из строк с помощью ключевых слов LEADING, TRAILING или ОБА в TRIM (Transact-SQL). |
| Ноябрь 2023 г. | поддержка T-SQL GENERATE_SERIES | Создает ряд чисел в пределах заданного интервала с GENERATE_SERIES (Transact-SQL). Интервал и шаг между значениями рядов определяются пользователем. |
| Ноябрь 2023 г. | Кэширование метаданных SSD | Метаданные файлов и групп строк теперь кэшируются с кэшем в памяти и SSD, что повышает производительность. |
| Ноябрь 2023 г. | Улучшения PARSER 2.0 для приема CSV | Средство синтаксического анализа CSV-файлов версии 2.0 для COPY INTO создает инновации из группы "Платформа данных и аналитика Microsoft Research" для быстрого приема CSV-файла в хранилище Fabric. Дополнительные сведения см. в разделе COPY INTO (Transact-SQL). |
| Ноябрь 2023 г. | Включено быстрое назначение вычислительных ресурсов | Все выполнение запросов в хранилище Fabric теперь используется новой технологией, недавно развернутой в рамках компонента глобального управления ресурсами, который назначает вычислительные ресурсы в миллисекундах. |
| Ноябрь 2023 г. | Поддержка REST API для хранилища | С помощью общедоступных API хранилища разработчики SQL теперь могут автоматизировать свои конвейеры и установить CI/CD удобно и эффективно. Общедоступные API-интерфейсы хранилища хранилища позволяют пользователям легко управлять элементами хранилища Fabric и управлять ими. |
| Ноябрь 2023 г. | Поддержка SQLPackage для хранилища Fabric | SQLPackage теперь поддерживает хранилище Fabric. SqlPackage — это служебная программа командной строки, которая автоматизирует следующие задачи разработки баз данных, предоставляя некоторые из общедоступных API Платформы приложений уровня данных (DacFx). Средство командной строки SqlPackage позволяет указать эти действия вместе с параметрами и свойствами, зависящими от действия. |
| Ноябрь 2023 г. | Семантические модели Power BI | Корпорация Майкрософт переименовала тип контента набора данных Power BI в семантику модели. Это касается и семантических моделей Microsoft Fabric. Дополнительные сведения см. в статье "Новое имя" для наборов данных Power BI. |
| Ноябрь 2023 г. | Конечная точка аналитики SQL | Корпорация Майкрософт переименовала конечную точку SQL Lakehouse в конечную точку аналитики SQL Lakehouse. |
| Ноябрь 2023 г. | Динамическое маскирование данных | Динамическое маскирование данных (DDM) для хранилища Fabric и конечной точки аналитики SQL в Lakehouse. Дополнительные сведения и примеры см. в разделе Динамическое маскирование данных в хранилище данных Fabric и как реализовать динамическое маскирование данных в хранилище данных Synapse. |
| Ноябрь 2023 г. | Клонирование таблиц с перемещением по времени | Теперь можно использовать клоны таблиц для создания клона таблицы на основе данных до семи календарных дней в прошлом. |
| Ноябрь 2023 г. | Обновления пользовательского интерфейса | Несколько пользовательских возможностей в складе приземлились. Дополнительные сведения см. в статье об обновлениях пользовательского интерфейса хранилища Fabric. |
| Ноябрь 2023 г. | Автоматическое сжатие данных | Автоматическое сжатие данных перезаписывает множество небольших файлов parquet в несколько больших файлов parquet, что повышает производительность чтения таблицы. Сжатие данных — это один из способов, которыми мы помогаем вашему хранилищу обеспечить высокую производительность и не выполнять никаких усилий. |
| Октябрь 2023 | Поддержка sp_rename | Поддержка синтаксиса T-SQL sp_rename теперь доступна как для конечной точки хранилища, так и для аналитики SQL. Дополнительные сведения см. в статье о поддержке хранилища Fabric для sp_rename. |
| Октябрь 2023 | Аналитика запросов | Функция аналитики запросов — это масштабируемое, устойчивое и расширяемое решение для улучшения возможностей аналитики SQL. С помощью исторических данных запросов, агрегированных аналитических сведений и доступа к фактическому тексту запроса можно анализировать и настраивать производительность запроса. |
| Октябрь 2023 | Полный DML в журналы Delta Lake | Хранилище Fabric теперь публикует все вставки, обновления и удаления для каждой таблицы в журнал Delta Lake в OneLake. |
| Октябрь 2023 | Оптимизация записи v-Order | V-Order оптимизирует файлы parquet, чтобы включить молниеносные операции чтения в вычислительных модулях Microsoft Fabric, таких как Power BI, SQL, Spark и другие. Запросы к хранилищу в целом по сравнению с более быстрым временем чтения с этой оптимизацией по-прежнему обеспечивают соответствие файлов parquet 100 % спецификации с открытым исходным кодом. Начиная с этого месяца все данные, используемые в хранилищах Fabric, используют оптимизацию V-Order. |
| Октябрь 2023 | Емкость с возможностью ускорения | Емкость с возможностью ускорения позволяет рабочим нагрузкам использовать больше ресурсов для повышения производительности. Масштабируемая емкость ограничена, при этом ограничение применяется к вычислительным ресурсам серверной части, чтобы значительно снизить риск регулирования. Дополнительные сведения см. в разделе "Хранилище SKU Guardrails" для емкости с возможностью ускорения. |
| Октябрь 2023 | Регулирование и сглаживание в хранилище данных Synapse | В новой статье описано поведение регулирования и сглаживания в хранилище данных Synapse, где почти все действия классифицируются как фон , чтобы воспользоваться окном сглаживания 24 часов, прежде чем регулирование вступает в силу. Узнайте больше об использовании в Хранилище данных Synapse. |
| Сентябрь 2023 | Улучшения семантической модели по умолчанию | Семантическая модель по умолчанию больше не добавляет новые объекты автоматически. Это можно включить в параметрах элемента хранилища. |
| Сентябрь 2023 | Конвейеры развертывания теперь поддерживают хранилища | Конвейеры развертывания позволяют создателям разрабатывать и тестировать содержимое в службе, прежде чем он достигнет пользователей. Поддерживаемые типы контента включают отчеты, отчеты с разбивкой на страницы, панели мониторинга, семантические модели, потоки данных и теперь хранилища. Узнайте, как программно развертывать содержимое с помощью REST API и DevOps. |
| Сентябрь 2023 | Поддержка проектов SQL для хранилища в Microsoft Fabric | Хранилище данных Microsoft Fabric теперь поддерживается в расширении проектов База данных SQL, доступном в Azure Data Studio и Visual Studio Code. |
| Сентябрь 2023 | Объявление: безопасность на уровне столбца и уровня строк для конечной точки хранилища Fabric и аналитики SQL | Безопасность на уровне столбцов и на уровне строк в хранилище Fabric и конечная точка аналитики SQL теперь находятся в предварительной версии, что и те же функции в SQL Server. |
| Сентябрь 2023 | Отчеты об использовании | Отчеты об использовании и выставлении счетов доступны для хранения данных Fabric в приложении метрик емкости Microsoft Fabric. Дополнительные сведения см. в статье об использовании и выставлении счетов для хранения данных Fabric. |
| Август 2023 г. | Кэширование SSD включено | Кэширование локальных SSD хранит часто доступ к данным на локальных дисках в высокооптимизируемом формате, что значительно снижает задержку ввода-вывода. Это дает вам преимущество немедленно, без каких-либо действий или необходимых настроек. |
| Июль 2023 г. | Деление | Любой администратор или член рабочей области может совместно использовать хранилище с другим получателем в организации. Вы также можете предоставить эти разрешения с помощью интерфейса "Управление разрешениями". |
| Июль 2023 г. | Клон таблицы | Клон нулевого копирования создает реплику таблицы путем копирования метаданных, ссылаясь на те же файлы данных в OneLake. Это позволяет избежать необходимости хранить несколько копий данных, тем самым экономя затраты на хранение при клонировании таблицы в Microsoft Fabric. Дополнительные сведения см. в руководствах по клонировании таблицы с таблицами T-SQL или Клонированием на портале Fabric. |
| Май 2023 г. | Знакомство с хранилищем данных Synapse в Microsoft Fabric | Хранилище данных Synapse — это следующее поколение хранения данных в Microsoft Fabric , которое является первым хранилищем транзакций для поддержки открытого формата данных Delta-Parquet. |
Примеры и рекомендации по хранилищу данных Synapse
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Mastering Enterprise T-SQL ETL/ELT: руководство по хранилищам данных и конвейерам Fabric | Узнайте о базовых элементах платформы ETL/ELT корпоративного масштаба с помощью конвейеров Fabric и хранилища данных для выполнения преобразований в T-SQL. Кроме того, мы рассмотрим динамический скрипт SQL, предназначенный для добавочного процесса таблиц во всей организации. |
| Апрель 2024 г. | Изменение структуры игры: База данных SQL Azure зеркальное отображение в Microsoft Fabric | Пошаговое руководство для зеркального отображения База данных SQL Azure в Microsoft Fabric. |
| Февраль 2024 г. | Сопоставление выделенных пулов SQL Azure Synapse с вычислительными ресурсами хранилища данных Fabric | Ознакомьтесь с рекомендациями по сопоставлению единиц хранилища данных (DWU) из выделенного пула SQL Azure Synapse Analytics с приблизительным числом единиц емкости Fabric (CU). |
| 2024 января | Автоматизация запросов и команд хранилища данных Fabric с помощью фабрики данных | В Фабрике данных Fabric существует множество способов запрашивать данные, извлекать данные и выполнять команды из хранилища с помощью действий конвейера, которые затем могут быть легко автоматизированы. |
| Ноябрь 2023 г. | Миграция из выделенных пулов SQL Azure Synapse | Подробное руководство по runbook миграции доступно для миграции из выделенных пулов SQL хранилища данных Azure Synapse в Microsoft Fabric. |
| Август 2023 г. | Эффективное секционирование данных с помощью Microsoft Fabric: рекомендации и руководство по реализации | Предлагаемый метод секционирования данных с помощью записных книжек Fabric. Секционирование данных — это метод управления данными, используемый для разделения большого набора данных на меньшие, более управляемые подмножества, называемые секциями или сегментами. |
| Май 2023 г. | Microsoft Fabric — как можно подключить пользователя SQL или DBA | В этом блоге рассматривается, как подключиться к конечной точке аналитики SQL Lakehouse или хранилища через конечную точку табличных данных или TDS, знакомую со всеми современными веб-приложениями, которые взаимодействуют с конечной точкой SQL Server. |
Аналитика в режиме реального времени в Microsoft Fabric
В этом разделе приведены архивные улучшения и функции аналитики в режиме реального времени в Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Семантика Графа в хранилище событий | Семантика Графа в Eventhouse позволяет пользователям моделировать данные в виде графов и выполнять расширенные запросы графа и аналитику с помощью язык запросов Kusto (KQL). |
| Июнь 2024 г. | Настройка оповещений на панелях мониторинга в режиме реального времени с помощью триггеров активации данных | Визуальные элементы панели мониторинга в режиме реального времени теперь поддерживают оповещения, чтобы расширить поддержку мониторинга с помощью Активатора данных. При интеграции с Активатором данных вы получите своевременное оповещение по мере изменения ключевых метрик в режиме реального времени. |
| Июнь 2024 г. | Доступность OneLake Eventhouse в формате Delta Lake | В рамках обещания one логического копирования мы рады сообщить, что доступность OneLake в формате Delta Lake является общедоступной. |
| Июнь 2024 г. | Панели мониторинга в режиме реального времени | Панели мониторинга реального времени взаимодействуют с данными динамически и в режиме реального времени. Панели мониторинга реального времени визуализировать данные, хранящиеся в хранилищах событий. Панели мониторинга в режиме реального времени поддерживают ультра-низкие частоты обновления всего 1 или 10 секунд. Дополнительные сведения см. в статье Визуализация и изучение данных с помощью панелей мониторинга в режиме реального времени. |
| Май 2024 г. | Общедоступная версия eventhouse | Eventhouse — это новая динамическая рабочая область с несколькими базами данных KQL, общедоступная в составе Аналитики в реальном времени Fabric. Eventhouse предлагает надежное решение для управления и анализа существенных объемов данных в режиме реального времени. Начало работы с руководством по созданию и управлению хранилищем событий. |
| Май 2024 г. | Copilot для аналитики в режиме реального времени | Copilot Для аналитики в режиме реального времени теперь доступна предварительная версия! Для тех, кто уже поклонник KQL или новичков изучает свой потенциал, Copilot может помочь вам приступить к работе и легко перемещаться по данным. |
| Май 2024 г. | Автоматизация элементов Структуры с помощью аналитики в режиме реального времени | Узнайте, как взаимодействовать с конвейерами данных, записными книжками, заданиями Spark более на основе событий. |
| Май 2024 г. | Аналитика в режиме реального времени | В этом месяце включается объявление аналитики в режиме реального времени, следующая эволюция аналитики в режиме реального времени и активатора данных. |
| Май 2024 г. | Новые функции аналитики в режиме реального времени | На сборке 2024 десятки новых функций и возможностей были объявлены для аналитики в режиме реального времени, организованы по категориям приема и обработки, анализа и преобразования, а также визуализации и визуализации и закона. |
| Май 2024 г. | Предварительная версия концентратора реального времени | Концентратор реального времени — это однопользовательское, единое, логическое место для потоковой передачи данных в движении. Это позволяет легко обнаруживать, прием, управление и использование данных в движении из различных источников. В нем перечислены все потоки и таблицы язык запросов Kusto (KQL), с которыми можно напрямую действовать. Кроме того, это дает простой способ приема потоковых данных из продуктов Майкрософт и событий Fabric. Дополнительные сведения см. в обзоре центра реального времени. |
| Май 2024 г. | Получение предварительной версии событий | Интерфейс "Получить события " позволяет пользователям подключаться к широкому спектру источников непосредственно из концентратора реального времени, событий, eventhouse и активатора данных. Используя get Events, получите потоковую передачу данных из источников Майкрософт непосредственно в Fabric с интерфейсом первого класса. |
| Май 2024 г. | Предварительная версия расширенных возможностей eventstream | Благодаря расширенным возможностям Eventstream теперь можно передавать данные не только из источников Майкрософт, но и из других платформ, таких как Google Cloud, Amazon Kinesis, потоки отслеживания измененных данных базы данных и многое другое с помощью новых соединителей обмена сообщениями. |
| Май 2024 г. | Потоки событий — расширенные возможности предварительной версии | Предварительная версия расширенных возможностей поддерживает множество новых источников : Google Cloud Pub/Sub, Amazon Kinesis Data Streams, Confluent Cloud Kafka, База данных SQL Azure Change Data Capture (CDC), Postgre База данных SQL CDC, My База данных SQL CDC, Azure Cosmos DB CDC, Хранилище BLOB-объектов Azure события и события элементов рабочей области Fabric и новое назначение Stream. Он поддерживает два разных режима, режим редактирования и динамическое представление в визуальном конструкторе. Она также поддерживает маршрутизацию на основе содержимого в потоках данных. Дополнительные сведения см. в статье "Что такое потоки событий Fabric". |
| Апрель 2024 г. | Предварительная версия потребления кэша Kusto | Предварительная версия потребления кэша Kusto означает, что вы начнете видеть оплачиваемое потребление данных кэша OneLake, хранящихся в базе данных KQL и элементах Eventhouse. Дополнительные сведения см. в разделе О потреблении базы данных KQL. |
| Апрель 2024 г. | Приостановка и возобновление в предварительной версии eventstream | Функция "Приостановка и возобновление" позволяет приостановить потоковую передачу данных из различных источников и назначений в Eventstream. Затем вы можете легко возобновить потоковую передачу данных из приостановленного времени или настраиваемого времени, гарантируя отсутствие потери данных. |
| Март 2024 г. | Новые выражения "Изменения по", "Увеличивается" и "Уменьшается на" | В активаторе данных при настройке условий триггера мы добавили синтаксис, чтобы определить, когда данные были изменены по абсолютному числу или проценту. Ознакомьтесь с новыми выражениями "Изменения по", "Увеличивается на" и "Уменьшается на". |
| Март 2024 г. | Аналитика в режиме реального времени Fabric интегрируется с недавно объявленным наблюдателем за базами данных для SQL Azure | Пользователи SQL Azure могут использовать решение мониторинга наблюдателя за базами данных с помощью Microsoft Fabric. Наблюдатель за базами данных для SQL Azure (предварительная версия) предоставляет расширенные возможности мониторинга и может интегрироваться с базой данных Eventhouse KQL. |
| Март 2024 г. | Обновление записей в предварительной версии базы данных KQL | Команда .update теперь доступна в качестве предварительной версии функции. Узнайте больше о том, как обновить записи в базе данных Kusto. |
| Март 2024 г. | Запрос данных Azure Data Explorer из набора запросов | Теперь доступно подключение к данным и использование данных в кластере Azure Data Explorer из набора запросов KQL Fabric. |
| Февраль 2024 г. | Обзор события: обработка данных в режиме реального времени с помощью Microsoft Fabric | Eventhouse (предварительная версия) — это динамическая рабочая область с несколькими базами данных KQL, частью Аналитики в режиме реального времени Fabric. Eventhouse предлагает надежное решение для управления и анализа существенных объемов данных в режиме реального времени. Начало работы с руководством по созданию и управлению хранилищем событий. |
| Февраль 2024 г. | Ярлык KQL DB для таблиц Delta Lake поддерживает сопоставление столбцов на основе имен | Теперь база данных KQL поддерживает чтение таблиц Delta с сопоставлениями имен столбцов. Функция сопоставления столбцов позволяет столбцам таблиц Delta и базовым столбцам файла Parquet использовать разные имена. Это позволяет выполнять операции эволюции разностной схемы, такие как в таблице Delta без необходимости переписывать базовые файлы Parquet и позволяют пользователям именовать столбцы таблицы Delta с помощью символов, которые не разрешены Parquet. |
| Февраль 2024 г. | Ярлык KQL DB для таблиц Delta Lake поддерживает векторы удаления | Теперь база данных KQL может считывать разностные таблицы с векторами удаления, разрешая текущее состояние таблицы, применяя удаления, отмеченные векторами удаления, к последней версии таблицы. |
| Февраль 2024 г. | Получение данных в базе данных KQL теперь поддерживает обработку событий перед приемом через Eventstream | Событие Process перед приемом в параметре Eventstream позволяет обрабатывать данные перед приемом в целевую таблицу. Выбрав этот параметр, процесс получения данных без проблем продолжается в eventstream, а сведения о целевой таблице и источнике данных автоматически заполняются. |
| Февраль 2024 г. | KQL DB теперь поддерживает прием данных с помощью Apache Flink | С помощью соединителя Flink с открытым кодом можно отправлять данные из Flink в таблицу. С помощью Azure Data Explorer и Apache Flink можно создавать быстрые и масштабируемые приложения, предназначенные для сценариев на основе данных. |
| Февраль 2024 г. | Маршрутизация данных из Splunk Universal Forwarder в KQL DB с помощью универсального соединителя Kusto Splunk | Теперь вы можете использовать универсальный соединитель Kusto Splunk для отправки данных из Splunk Universal Forwarder в таблицу в базе данных KQL. |
| Декабрь 2023 г. | Вычисление различных счетчиков в Power BI, выполняющих отчеты в базах данных KQL | Функции dcount и dcountif базы данных New Fabric KQL используют специальный алгоритм для возврата оценки отдельных счетчиков, даже в очень больших наборах данных. Новые функции count_distinct и count_distinctif вычисляют точные уникальные счетчики. |
| Декабрь 2023 г. | Создание записной книжки с предварительно настроенным подключением к базе данных KQL | Теперь вы можете создать новую записную книжку из редактора KQL DB с предварительно настроенным подключением к базе данных KQL и изучить данные с помощью PySpark. Этот параметр создает записную книжку PySpark с готовой к выполнению ячейки кода для чтения данных из выбранной базы данных KQL. |
| Декабрь 2023 г. | Проверка схемы базы данных KQL | Новая команда .show database schema violations Kusto была разработана для проверки текущего состояния схемы базы данных и поиска несоответствий. Вы можете использовать нарушения схемы базы данных .show для проверки на месте базы данных или в автоматизации CI/CD. |
| Декабрь 2023 г. | Включение доступности данных базы данных KQL в OneLake | Доступность данных базы данных KQL в OneLake означает, что вы можете наслаждаться лучшим из обоих миров. Вы можете запрашивать данные с высокой производительностью и низкой задержкой в базе данных KQL, а также запрашивать те же данные в Delta Parquet с помощью режима Direct Lake Power BI, warehouse, Lakehouse, Notebook и т. д. |
| Декабрь 2023 г. | Структура изменяет игру: аналитика в режиме реального времени | Аналитика в режиме реального времени — это средство, уменьшающее сложность и упрощающее процессы интеграции данных. Microsoft Fabric позволяет создавать аналитику потоковой передачи в режиме реального времени с помощью потока событий или Spark Stream. |
| Ноябрь 2023 г. | Объявление о поддержке Delta Lake в базе данных KQL в режиме реального времени | Теперь можно включить доступность базы данных KQL в формате Delta Lake. Delta Lake — это унифицированный формат таблицы озера данных, выбранный для обеспечения простого доступа к данным во всех вычислительных модулях в Microsoft Fabric. |
| Ноябрь 2023 г. | Аналитика в режиме реального времени в общедоступной версии Microsoft Fabric | Объявление о общедоступной доступности аналитики в режиме реального времени в Microsoft Fabric! Аналитика в режиме реального времени предлагает множество функций, направленных на более эффективное и эффективное анализ данных. |
| Ноябрь 2023 г. | Поддержка Delta Parquet в базе данных KQL | В рамках одного обещания логического копирования мы рады сообщить о том, что данные в базе данных KQL теперь можно сделать доступными в OneLake в разностном формате parquet. Теперь вы можете получить доступ к этой таблице Delta, создав ярлык OneLake из Lakehouse, Warehouse или непосредственно через режим Direct Lake Power BI. |
| Ноябрь 2023 г. | Соединители с открытым кодом для базы данных KQL | Теперь поддерживаются несколько соединителей с открытым кодом для аналитики в режиме реального времени, чтобы пользователи могли получать данные из различных источников и обрабатывать их с помощью KQL DB. |
| Ноябрь 2023 г. | Поддержка REST API для базы данных KQL | Мы рады сообщить о запуске общедоступных API REST для KQL DB. Общедоступные ИНТЕРФЕЙСы REST API KQL DB позволяют пользователям управлять и автоматизировать потоки программными средствами. |
| Ноябрь 2023 г. | Теперь общедоступная версия eventstream | Поток событий теперь общедоступен, добавляя улучшения, направленные на переход к следующему уровню обработки данных. |
| Ноябрь 2023 г. | Преобразование данных eventstream для базы данных KQL | Теперь вы можете преобразовать потоки данных в режиме реального времени в eventstream перед отправкой в базу данных KQL. При создании назначения базы данных KQL в потоке событий можно задать режим приема для параметра "Обработка событий перед приемом" и добавить логику обработки событий, например фильтрацию и агрегирование для преобразования потоков данных. |
| Ноябрь 2023 г. | Предварительная версия надстройки Splunk | Надстройка Microsoft Fabric для Splunk позволяет пользователям прием журналов из платформы Splunk в базу данных Fabric KQL с помощью пакета SDK для Python Kusto. |
| Ноябрь 2023 г. | Получение данных из eventstream в любом месте в Fabric | Если вы работаете над другими элементами Fabric и ищете прием данных из Eventstream, наша новая функция "Получить данные из eventstream" упрощает процесс, вы можете получить данные из eventstream во время работы с базой данных KQL и Lakehouse. |
| Ноябрь 2023 г. | Два режима приема для назначения Lakehouse | Мы представили два разных режима приема для назначения Lakehouse: строки для каждого файла и длительности. |
| Ноябрь 2023 г. | Оптимизация таблиц перед приемом данных в Lakehouse | Ярлык оптимизации таблицы теперь доступен внутри назначения Eventstream Lakehouse для сжатия многочисленных небольших потоковых файлов, созданных в таблице Lakehouse. Сочетание клавиш оптимизации таблиц работает путем открытия задания Notebook с помощью Spark, которое будет сжимать небольшие потоковые файлы в целевой таблице Lakehouse. |
| Ноябрь 2023 г. | Создание облачного подключения в eventstream | Мы упростили процесс установления облачного подключения к службам Azure в eventstream. При добавлении ресурса Azure, например Центр Интернета вещей Azure и Центры событий Azure, в поток событий теперь можно создать облачное подключение и ввести учетные данные ресурса Azure прямо в eventstream. Это улучшение значительно улучшает процесс добавления новых источников данных в поток событий, экономии времени и усилий. |
| Ноябрь 2023 г. | Получение данных в аналитике в режиме реального времени: новый и улучшенный интерфейс | Новый интерфейс получения данных упрощает процесс приема данных в базе данных KQL. |
| Октябрь 2023 | Расширенные подключения к пользовательским приложениям | Новые пользовательские подключения приложений обеспечивают большую гибкость, когда речь идет о переносе потоков данных в Eventstream. |
| Октябрь 2023 | Расширенный интерфейс взаимодействия с обработчиком событий | Новые улучшения пользовательского интерфейса в обработчике событий без кода обеспечивают интуитивно понятный интерфейс, что позволяет легко добавлять или удалять операции на холсте. |
| Октябрь 2023 | Конечные точки Kafka eventstream и пример кода | Функция пользовательского приложения имеет новые конечные точки в источниках и назначениях, включая пример кода Java для удобства. Просто добавьте его в приложение, и вы все настроены для потоковой передачи события в режиме реального времени в Eventstream. |
| Октябрь 2023 | Улучшения пользовательского интерфейса редактора обработки событий | Последние улучшения пользовательского интерфейса представляют полноэкранный режим, предоставляя более обширную рабочую область для проектирования рабочих процессов обработки данных. Вставка и удаление операций потока данных были более понятными, что упрощает перетаскивание и подключение преобразований данных. |
| Октябрь 2023 | Усовершенствования алгоритма автомасштабирования базы данных KQL | Пользователям не нужно беспокоиться о том, сколько ресурсов необходимо для поддержки рабочих нагрузок в базе данных KQL. База данных KQL имеет сложный многомерный алгоритм автоматического масштабирования. Недавно мы реализовали некоторые оптимизации, которые упрощают анализ временных рядов. |
| Октябрь 2023 | Общие сведения о емкости базы данных KQL Fabric | Дополнительные сведения о выставлении счетов за базу данных KQL в мире SaaS Microsoft Fabric. |
| Сентябрь 2023 | Ярлык OneLake для разностных таблиц из базы данных KQL | Теперь вы можете создать ярлык из KQL DB в разностные таблицы в OneLake, что позволяет выполнять запросы данных на месте. Теперь вы запрашиваете разностные таблицы в Lakehouse или Warehouse непосредственно из KQL DB. |
| Сентябрь 2023 | Данные модели и запроса в виде графов с помощью KQL | язык запросов Kusto (KQL) теперь позволяет моделировать и запрашивать данные в виде графов. Эта функция в настоящее время доступна для предварительного ознакомления. Дополнительные сведения о семантике графа см. в операторах и функциях KQL и Graph. |
| Сентябрь 2023 | Простое подключение к базе данных KQL из Power BI Desktop | Power BI Desktop выпустил два новых способа легко подключиться к базе данных KQL в диалоговом окне "Получить данные" и в меню Концентратора данных OneLake. |
| Сентябрь 2023 | Eventstream теперь поддерживает формат AMQP строка подключения для приема данных | AMQP обозначает расширенный протокол очереди сообщений, протокол, поддерживающий широкий спектр шаблонов обмена сообщениями. В Eventstream теперь можно создать источник или назначение пользовательского приложения и выбрать формат AMQP строка подключения для приема данных в Fabric или использования данных из Fabric. |
| Сентябрь 2023 | Eventstream поддерживает прием данных из Центр Интернета вещей Azure | Центр Интернета вещей Azure — это облачное решение, которое предоставляет безопасные каналы связи для отправки и получения данных с устройств Интернета вещей. В Eventstream теперь можно передавать данные Центр Интернета вещей Azure в Fabric и выполнять обработку в режиме реального времени перед сохранением в базе данных Kusto или Lakehouse. |
| Сентябрь 2023 | Общий доступ к данным в режиме реального времени в Microsoft Fabric | Ярлык базы данных в аналитике в режиме реального времени — это внедренная ссылка в базе данных KQL в исходную базу данных в Azure Data Explorer (ADX), которая позволяет совместно использовать данные на месте. Поведение, отображаемое ярлыком базы данных, аналогично тому, что база данных подписчика Azure Data Explorer. |
| Август 2023 г. | Оптимизация подготовки | Процесс подготовки базы данных KQL оптимизирован. Теперь можно создать базу данных KQL в течение нескольких секунд. |
| Август 2023 г. | Поддержка базы данных KQL для встроенного Python | База данных KQL Fabric поддерживает выполнение кода Python, внедренного в язык запросов Kusto (KQL), с помощью подключаемого модуля Python(). Подключаемый модуль отключен по умолчанию. Прежде чем начать, включите подключаемый модуль Python в базе данных KQL. |
| Июль 2023 г. | Потоки событий Microsoft Fabric: создание аналитики в режиме реального времени с помощью Python, KQL и Power BI | Потоки событий Microsoft Fabric — это служба приема и преобразования данных с высокой пропускной способностью, низкой задержкой. |
| Июль 2023 г. | Потоковая передача событий в Режиме реального времени в Microsoft Fabric с потоками событий из пользовательского приложения | Потоки событий в аналитике в режиме реального времени — это централизованная платформа в Fabric, которая позволяет записывать, преобразовывать и направлять события в режиме реального времени в несколько назначений без усилий, используя удобный для пользователя интерфейс без кода. |
| Июнь 2023 г. | Открытие эпической возможности: веселая игра для изучения аналитики в режиме реального времени | В рамках сезона 2 детективного агентства Kusto мы рады представить эпическую возможность для всех следователей и энтузиастов данных, чтобы узнать о новом портфеле весело и интересно. Вербовка сейчас!https://detective.kusto.io/ |
| Май 2023 г. | Новые возможности Kusto — сборка 2023! | Объявление о Аналитика в режиме реального времени Synapse в Microsoft Fabric! |
Примеры и рекомендации аналитики в режиме реального времени
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Выход на панель мониторинга метрики использования портала администрирования Power BI | С июля 2024 г. панель мониторинга метрики использования портала администрирования Power BI удаляется. Теперь в рабочей области мониторинга администрирования (предварительная версия) поддерживаются сопоставимые аналитические сведения. Рабочая область мониторинга администратора предоставляет несколько отчетов Power BI и семантических моделей, включая отчет об использовании компонентов и внедрении, который посвящен инвентаризации клиентов Fabric и мониторингу активности аудита. |
| Май 2024 г. | Оповещение и выполнение данных из концентратора реального времени | Новый концентратор Microsoft Fabric в режиме реального времени и активатор данных предоставляют возможность автоматического выполнения действий при обнаружении шаблонов или условий в изменении данных и встраивается в концентратор реального времени, чтобы обеспечить доступность оповещений. |
| Май 2024 г. | Использование API с аналитикой в режиме реального времени Fabric: Eventhouse и KQL DB | Узнайте, как создавать и обновлять и удалять элементы в Fabric с помощью API KQL, обращающегося к плоскости данных ресурса. |
| Май 2024 г. | Подключение и потоковая передача событий с помощью интерфейса получения событий | Интерфейс "Получить события" упрощает процесс просмотра и поиска источников и потоков. |
| Май 2024 г. | Получение данных в режиме реального времени из новых источников с помощью расширенного потока событий | Узнайте, как подключиться к новым источникам в Eventstream. Начните с создания потока событий и выбора "Расширенные возможности (предварительная версия)". |
| Март 2024 г. | Просмотр ресурсов Azure с помощью получения данных | Узнайте, как просматривать и подключаться ко всем ресурсам Azure с помощью функций "Обзор Azure" в Get Data. Вы можете легко просматривать ресурсы Azure и подключаться к ресурсам Synapse, хранилища BLOB-объектов или ADLS 2-го поколения. |
| Ноябрь 2023 г. | Семантическая ссылка: проверка данных с помощью больших ожиданий | Open Source (GX OSS) — это популярная библиотека Python, которая предоставляет платформу для описания и проверки допустимого состояния данных. Благодаря недавней интеграции семантической связи Microsoft Fabric GX теперь может получить доступ к семантических моделях, что позволяет обеспечить непрерывную совместную работу между специалистами по обработке и анализу данных и бизнес-аналитиками. |
| Ноябрь 2023 г. | Изучение преобразования данных в eventstream для интеграции базы данных KQL | Ознакомьтесь с практическим сценарием с использованием данных общего доступа к велосипедам в реальном мире и узнайте, как вычислить количество велосипедов, арендованных каждую минуту на каждой улице, используя мощный обработчик событий Eventstream, освоив преобразования данных в режиме реального времени, и легко направлять обработанные данные в базу данных KQL. |
| Октябрь 2023 | Из RabbitMQ в отчеты PowerBI с помощью Аналитики в режиме реального времени Microsoft Fabric | Пошаговое руководство по комплексному сценарию отправки данных из RabbitMQ в базу данных KQL в Microsoft Fabric. |
| Октябрь 2023 | Потоковая передача Центр Интернета вещей Azure данных в поток событий Fabric для оповещения электронной почты | Демонстрация использования потока событий Fabric для простого приема и преобразования потоков данных в режиме реального времени, прежде чем они достигают различных назначений Fabric, таких как Lakehouse, база данных KQL и Рефлектор. Затем настройте оповещения электронной почты в Рефлекторе с триггерами активации данных. |
| Сентябрь 2023 | Коллекция примеров аналитики в режиме реального времени | Аналитика в режиме реального времени теперь предлагает комплексную коллекцию примеров с несколькими наборами данных, что позволяет быстро изучить, научиться и приступить к работе. Чтобы получить доступ к примерам, выберите "Использовать пример " из дома для аналитики в режиме реального времени. |
| Сентябрь 2023 | Краткое руководство. Отправка данных в аналитику в режиме реального времени в Fabric из экосистем Apache Kafka с помощью Java | Узнайте, как отправлять данные из Kafka в аналитику в режиме реального времени в Fabric. |
| Июнь 2023 г. | От необработанных данных до аналитических сведений: прием данных из Центры событий Azure в базу данных KQL | Узнайте об интеграции между Центры событий Azure и базой данных KQL. |
| Июнь 2023 г. | От необработанных данных к аналитическим сведениям: прием данных из потоков событий в базу данных KQL | Узнайте об интеграции между потоками событий и базой данных KQL, которые являются частью интерфейса аналитики в режиме реального времени. |
| Июнь 2023 г. | Обнаружение лучших способов получения данных в базу данных KQL | В этом блоге рассматриваются различные варианты переноса данных в базу данных KQL. |
| Июнь 2023 г. | Начало работы с изучением данных с помощью KQL — специально созданного средства для анализа данных в петабайтах | В этом блоге мы сосредоточимся на различных способах запроса данных в аналитике в режиме реального времени. |
| Май 2023 г. | Прием, преобразование и маршрутизация событий в режиме реального времени с помощью потоков событий Microsoft Fabric | Теперь вы можете получать, записывать, преобразовывать и направлять события в режиме реального времени в различные назначения в Microsoft Fabric с использованием потоков событий Microsoft Fabric без кода. |
Основные функции Microsoft Fabric
Архивированные новости и объявления о функциях в интерфейсе Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Май 2024 г. | Общедоступная версия Приватный канал Microsoft Fabric | Приватный канал Azure для Microsoft Fabric защищает доступ к конфиденциальным данным в Microsoft Fabric, предоставляя сетевую изоляцию и применяя необходимые элементы управления для входящего сетевого трафика. Дополнительные сведения см. в разделе "Объявление о общедоступной доступности Приватный канал Fabric". |
| Май 2024 г. | Общедоступная общедоступная версия доверенной рабочей области | Доступ к доверенной рабочей области в сочетаниях клавиш OneLake теперь общедоступен. Теперь вы можете создать конвейеры данных для доступа к учетным записям с поддержкой брандмауэра Azure Data Lake Storage 2-го поколения (ADLS 2-го поколения) с помощью доступа к доверенной рабочей области (предварительная версия) в конвейерах данных Fabric. Используйте удостоверение рабочей области, чтобы установить безопасное и простое подключение между Fabric и учетными записями хранения. Доступ к доверенной рабочей области также обеспечивает безопасный и простой доступ к учетным записям хранения ADLS 2-го поколения из сочетаний клавиш OneLake в Fabric. |
| Май 2024 г. | Пошаговое руководство по API Структуры | Сведения об использовании REST API в Fabric, включая создание рабочих областей, добавление разрешений, удаление, создание, выполнение конвейеров данных и приостановку и возобновление действий Fabric с помощью API управления. |
| Май 2024 г. | Общедоступная версия управляемых частных конечных точек | Управляемые частные конечные точки для Microsoft Fabric разрешают безопасные подключения через управляемые виртуальные сети к источникам данных, которые находятся за брандмауэром или недоступны из общедоступного Интернета. Дополнительные сведения см. в статье Об объявлении общедоступной доступности Приватный канал Fabric, доступ к доверенным рабочим областям и управляемые частные конечные точки. |
| Май 2024 г. | Система пользовательского интерфейса Fabric | Система пользовательского интерфейса Fabric представляет собой шаг вперед в согласованности проектирования и расширяемости для Microsoft Fabric. |
| Май 2024 г. | REST API Microsoft Fabric Core | Api Microsoft Fabric Core теперь общедоступны. API-интерфейсы пользователей Fabric являются основными возможностями для предприятий и партнеров, чтобы использовать Microsoft Fabric, так как они обеспечивают комплексное автоматическое взаимодействие со службой, обеспечивают интеграцию Microsoft Fabric с внешними веб-приложениями и, как правило, позволяют клиентам и партнерам масштабировать свои решения более легко. |
| Май 2024 г. | Предварительная версия API администрирования Microsoft Fabric | API администрирования Fabric предназначены для упрощения административных задач. Теперь вы можете управлять как Power BI, так и новыми элементами Fabric (ранее называемыми артефактами) с помощью одного набора API. Перед этим усовершенствованием необходимо было перейти с помощью двух разных API— одного для элементов Power BI и другого для новых элементов Fabric. |
| Май 2024 г. | Пакет средств разработки для рабочей нагрузки Fabric (предварительная версия) | Пакет средств разработки рабочей нагрузки Microsoft Fabric расширяется до дополнительных рабочих нагрузок и предлагает надежный набор средств разработчика для разработки, разработки и взаимодействия с Microsoft Fabric с помощью интерфейсных пакетов SDK и интерфейсных ИНТЕРФЕЙСов REST API. |
| Май 2024 г. | Знакомство с внешним доступом к данным (предварительная версия) | Внешний общий доступ к данным (предварительная версия) — это новая функция, которая позволяет пользователям Fabric предоставлять доступ к данным из своего клиента Fabric пользователям в другом клиенте Fabric. |
| Май 2024 г. | Потоки задач в Microsoft Fabric (предварительная версия) | Предварительная версия потоков задач в Microsoft Fabric включена для всех пользователей Microsoft Fabric . При проектировании проекта данных потоки задач Fabric больше не нужно использовать доску для рисования различных частей проекта и их взаимосвязей. Вместо этого можно использовать поток задач для сборки и добавления этих ключевых сведений в сам проект. |
| Май 2024 г. | Power BI: подписки, лицензии и пробные версии | Сведения о планировании реализации Power BI и основных рекомендациях по планированию подписок, лицензий и пробных версий Power BI и Fabric. |
| Май 2024 г. | Зарегистрируйтесь в Microsoft Build: Microsoft Fabric Cloud Skills Challenge | Начиная с 21 мая 2024 г., зарегистрируйтесь в Microsoft Build: Microsoft Fabric Cloud Skills Challenge и подготовьтесь к экзамену DP-600 и upskill в сертификацию инженера Аналитики Fabric. |
| Март 2024 г. | Microsoft Fabric теперь соответствует HIPAA | Мы рады сообщить о том, что Microsoft Fabric, наше решение для аналитики по одному для предприятий, достигло новых сертификатов для HIPAA и ISO 27017, ISO 27018, ISO 27001, ISO 27701, ISO 27701. |
| Март 2024 г. | Папка в предварительной версии рабочей области | В качестве подразделения в рабочей области папка обращается к этой точке боли, предоставляя иерархическую структуру для организации и управления элементами. Дополнительные сведения см. в статье "Создание папок в рабочих областях (предварительная версия)". |
| Март 2024 г. | Ценовая Copilot структура: пример сквозного примера | Copilot В Fabric начинается выставление счетов 1 марта 2024 г. в рамках существующей емкости Power BI Premium или Fabric. Узнайте, как вычисляется использование FabricCopilot. |
| Март 2024 г. | Обновления платформы емкости для приостановки и возобновления работы, метрик емкости, виртуализированных элементов и рабочих областей для Copilotшлюзов виртуальной сети | Платформа емкости Fabric теперь поддерживает отчеты об использовании для приостановки и возобновления работы, виртуализированных элементов и рабочих областей, поддерживающих Copilot, метрики емкости и шлюз виртуальной сети. Дополнительные сведения см. в статье "Обновления платформы емкости" для метрики приостановки и емкости для Copilot шлюзов виртуальной сети. |
| Февраль 2024 г. | Управляемые частные конечные точки для Microsoft Fabric (предварительная версия) | Управляемые частные конечные точки для Microsoft Fabric (предварительная версия) позволяют безопасно подключаться к источникам данных, которые находятся за брандмауэром или недоступны из общедоступного Интернета. Рабочие области с управляемыми частными конечными точками имеют сетевую изоляцию через управляемую виртуальную сеть, созданную Microsoft Fabric. Дополнительные сведения см. в статье "Знакомство с управляемыми частными конечными точками для предварительной версии Microsoft Fabric". |
| Февраль 2024 г. | Приватный канал Azure поддержка Microsoft Fabric (предварительная версия) | Приватный канал Azure для Microsoft Fabric защищает доступ к конфиденциальным данным в Microsoft Fabric, предоставляя сетевую изоляцию и применяя необходимые элементы управления для входящего сетевого трафика. Дополнительные сведения см. в статье "Объявление о поддержке Приватный канал Azure для Microsoft Fabric в предварительной версии". |
| Февраль 2024 г. | Домены в OneLake (предварительная версия) | Домены в OneLake помогают упорядочивать данные в логическую сетку данных, позволяя федеративной системе управления и оптимизации для бизнес-потребностей. Теперь можно создавать поддомены, домены по умолчанию для пользователей и перемещать рабочие области между доменами. Дополнительные сведения см. в разделе "Домены Fabric". |
| Февраль 2024 г. | Настраиваемая панель навигации Fabric | Теперь вы можете настроить предпочтительную точку входа на панели навигации, включая закрепление общих точек входа и отмену прикрепления редко используемых параметров. |
| Февраль 2024 г. | Постоянные фильтры в рабочей области | Теперь вы можете сохранить выбранные фильтры в представлении списка рабочих областей, и они будут автоматически применены при следующем открытии рабочей области. |
| Декабрь 2023 г. | Предварительная версия API администрирования Microsoft Fabric | API администрирования Fabric предназначены для упрощения административных задач. Первоначальный набор API администрирования Fabric предназначен для упрощения обнаружения рабочих областей, элементов Fabric и сведений о доступе пользователей. |
| Декабрь 2023 г. | Изменения хранения рабочей области в Fabric и Power BI | Срок хранения для рабочих областей совместной работы настраивается от 7 до 90 дней. Параметр хранения рабочей области включен по умолчанию, а срок хранения по умолчанию — семь дней. |
| Ноябрь 2023 г. | Рабочие нагрузки Fabric теперь общедоступны! | Microsoft Fabric теперь общедоступен! Хранилище данных Microsoft Fabric Synapse, Инжиниринг данных и Обработка и анализ данных, аналитика в реальном времени, фабрика данных, OneLake и общая платформа Fabric теперь общедоступна. |
| Ноябрь 2023 г. | Предварительная версия API-интерфейсов пользователей Microsoft Fabric | Мы рады сообщить о предварительной версии API-интерфейсов пользователей Microsoft Fabric. API-интерфейсы пользователей Fabric являются основными возможностями для предприятий и партнеров, чтобы использовать Microsoft Fabric, так как они обеспечивают комплексное автоматическое взаимодействие со службой, обеспечивают интеграцию Microsoft Fabric с внешними веб-приложениями и, как правило, позволяют клиентам и партнерам масштабировать свои решения более легко. |
| Октябрь 2023 | Значки типов элементов | Наша команда разработчиков выполнила повторную работу значков типов элементов на платформе для улучшения визуального анализа. |
| Октябрь 2023 | Фильтрация на основе ключевых слов параметров клиента | В Microsoft Fabric недавно появилась фильтрация на основе ключевых слов на странице параметров клиента на портале администрирования. |
| Сентябрь 2023 | Центр мониторинга — параметры столбцов | Параметры столбцов в центре мониторинга позволяют пользователям лучше настраивать возможности и больше места для работы. |
| Сентябрь 2023 | OneLake проводник версии 1.0.10 | Обозреватель файлов OneLake автоматически синхронизирует все элементы Microsoft OneLake, к которым у вас есть доступ в Windows проводник. Последняя версия позволяет легко перейти между приложением обозревателя файлов OneLake и веб-порталом Fabric. Вы также можете щелкнуть правой кнопкой мыши значок OneLake в области уведомлений Windows и выбрать операции диагностики для просмотра журналов клиентского сайта. Узнайте больше о простом доступе к открытым рабочим областям и элементам в Интернете. |
| Август 2023 г. | Улучшение многозадачности навигации | Теперь все элементы Fabric открываются на одной вкладке браузера на панели навигации, даже в случае обновления страницы. Это гарантирует, что вы можете обновить страницу без проблем с потерей контекста. |
| Август 2023 г. | Поддержка центра мониторинга для персонализированных параметров столбцов | Мы обновили Центр мониторинга, чтобы пользователи могли персонализировать столбцы, относящиеся к действиям. Теперь у вас есть гибкость для отображения столбцов, относящихся к действиям, на которые вы сосредоточены. |
| Июль 2023 г. | Новое обновление проводника OneLake с поддержкой переключения учетных записей организации | В проводнике OneLake версии 1.0.9.0 просто выбрать и переключиться между различными учетными записями Microsoft Entra ID (ранее — Azure Active Directory). |
| Июль 2023 г. | Панель справки | В области справки отображаются статьи о действиях и функциях, доступных на текущем экране Fabric. Дополнительные сведения см. в области справки в ежемесячном обновлении Fabric. |
Непрерывная интеграция и непрерывная доставка (CI/CD) в Microsoft Fabric
В этом разделе содержатся руководства и обновления документации по процессу разработки, средствам и версиям в рабочей области Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Знакомство с новыми возможностями ветвления в интеграции с Fabric Git | Новые возможности ветвления в интеграции Fabric Git включают измененную панель управления версиями, возможность быстро создавать подключенную рабочую область и ветвь, а также контекстные связанные ветви для поиска содержимого, связанного с текущей рабочей областью. |
| Май 2024 г. | API конвейеров развертывания для CI/CD | Появились API-интерфейсы конвейеров развертывания Структуры, начиная с API "Развертывание", что позволит развернуть всю рабочую область или только выбранные элементы. |
| Май 2024 г. | Новые элементы в CI/CD Fabric | Конвейеры данных, задания Warehouse, Spark и Spark теперь доступны для CI/CD в конвейерах интеграции и развертывания Git. |
| Апрель 2024 г. | Знакомство с доверенным доступом к рабочей области в конвейерах данных Fabric | Создайте конвейеры данных в Fabric, чтобы получить доступ к учетным записям хранения ADLS 2-го поколения с поддержкой брандмауэра с легкостью и безопасностью. Эта функция использует удостоверение рабочей области для обеспечения безопасного и простого подключения между Fabric и учетными записями хранения. |
| Март 2024 г. | Предварительная версия CI/CD для конвейеров данных Fabric | Интеграция Git и интеграция со встроенными конвейерами развертывания в конвейеры данных фабрики данных теперь доступна в предварительной версии. Дополнительные сведения см. в разделе "Фабрика данных" добавление CI/CD в конвейеры данных Fabric. |
| Март 2024 г. | Обновления системных файлов для интеграции с Git | Автоматически созданные системные файлы item.metadata.json и item.config.json были консолидированы в один системный файл .platform. Дополнительные сведения см. в разделе "Автоматически созданные системные файлы". |
| Февраль 2024 г. | REST API для интеграции с Fabric Git | Интерфейсы REST API для интеграции Fabric Git позволяют легко включить интеграцию Fabric Git в сквозной конвейер CI/CD вашей команды, устраняя необходимость запуска действий вручную из Fabric. |
| Февраль 2024 г. | Делегирование параметров интеграции Git | Чтобы включить дополнительный контроль над связанными параметрами Git, администратор клиента теперь может делегировать эти параметры администраторам емкости и администраторам рабочих областей с помощью портала администрирования? |
| Ноябрь 2023 г. | API-интерфейсы пользователей Microsoft Fabric | Теперь доступны API-интерфейсы пользователей Microsoft Fabric. API-интерфейсы пользователей Fabric являются основными возможностями для предприятий и партнеров, чтобы использовать Microsoft Fabric, так как они обеспечивают комплексное автоматическое взаимодействие со службой, обеспечивают интеграцию Microsoft Fabric с внешними веб-приложениями и, как правило, позволяют клиентам и партнерам масштабировать свои решения более легко. |
| Ноябрь 2023 г. | Записная книжка в предварительной версии конвейера развертывания | Теперь вы также можете использовать записные книжки для развертывания кода в разных средах, таких как разработка, тестирование и рабочая среда. Вы также можете использовать правила развертывания для настройки поведения записных книжек при их развертывании, таких как изменение стандартного Lakehouse записной книжки. Приступая к работе с конвейерами развертывания, а записная книжка отображается в содержимом развертывания автоматически. |
| Ноябрь 2023 г. | Предварительная версия интеграции с Записной книжкой Git | Записные книжки Fabric теперь предлагают интеграцию Git для управления версиями с помощью Azure DevOps. Это позволяет пользователям легко управлять версиями кода записной книжки и управлять ветвями Git, используя функции Fabric Git и Azure DevOps. |
| Ноябрь 2023 г. | Предварительная версия REST API записной книжки | С помощью общедоступных API REST для элементов записной книжки инженеры и специалисты по обработке и анализу данных могут автоматизировать конвейеры и эффективно устанавливать CI/CD. Общедоступный API записной книжки позволяет пользователям легко управлять элементами записных книжек Fabric и интегрировать записную книжку с другими инструментами и системами. |
| Ноябрь 2023 г. | Поддержка Lakehouse для конвейеров интеграции и развертывания Git (предварительная версия) | Элемент Lakehouse теперь интегрируется с возможностями управления жизненным циклом в Microsoft Fabric, обеспечивая стандартизированную совместную работу между всеми участниками группы разработки на протяжении всей жизни продукта. Управление жизненным циклом упрощает эффективный процесс управления версиями продуктов и выпуска, постоянно предоставляя функции и исправления ошибок в нескольких средах. |
| Ноябрь 2023 г. | Поддержка SQLPackage для хранилища Fabric | SQLPackage теперь поддерживает хранилище Fabric. SqlPackage — это служебная программа командной строки, которая автоматизирует следующие задачи разработки баз данных, предоставляя некоторые из общедоступных API Платформы приложений уровня данных (DacFx). Средство командной строки SqlPackage позволяет указать эти действия вместе с параметрами и свойствами, зависящими от действия. |
| Сентябрь 2023 | Поддержка проектов SQL для хранилища в Microsoft Fabric | Хранилище данных Microsoft Fabric теперь поддерживается в расширении проектов База данных SQL, доступном в Azure Data Studio и Visual Studio Code. |
| Сентябрь 2023 | Поддержка файловой системы записной книжки в расширении VS Code Synapse | Расширение Synapse VS Code теперь поддерживает файловую систему записной книжки для Инжиниринг данных и Обработка и анализ данных в Microsoft Fabric. Расширение Synapse VS Code позволяет пользователям разрабатывать свои элементы записной книжки непосредственно в среде Visual Studio Code. |
| Сентябрь 2023 | Конвейеры развертывания теперь поддерживают хранилища | Конвейеры развертывания позволяют создателям разрабатывать и тестировать содержимое в службе, прежде чем он достигнет пользователей. Поддерживаемые типы контента включают отчеты, отчеты с разбивкой на страницы, панели мониторинга, семантические модели, потоки данных и теперь хранилища. Узнайте, как программно развертывать содержимое с помощью REST API и DevOps. |
| Сентябрь 2023 | Интеграция Git с отчетами с разбивкой на страницы в Power BI | Теперь вы можете опубликовать отчет с разбивкой на страницы Power BI и синхронизировать его с рабочей областью Git. Разработчики могут применять свои процессы разработки, инструменты и рекомендации. |
| Август 2023 г. | Знакомство с адаптером dbt для хранилища данных Synapse в Microsoft Fabric | Адаптер dbt позволяет подключать и преобразовывать данные в хранилище данных Synapse. Средство сборки данных (dbt) — это платформа с открытым исходным кодом, которая упрощает преобразование данных и инженерию аналитики. |
| Май 2023 г. | Знакомство с интеграцией Git в Microsoft Fabric для простого управления версиями | При разработке в Fabric разработчики могут создавать резервные копии и версию своей работы, откатывать по мере необходимости, совместно работать или работать в изоляции с помощью ветвей Git. Дополнительные сведения о подключении рабочей области к репозиторию Azure. |
Примеры непрерывной интеграции и непрерывной доставки (CI/CD)
| Month | Компонент | Подробнее |
|---|---|---|
| Июнь 2024 г. | Начало разработки в изоляции с помощью частной рабочей области | В этом пошаговом руководстве мы поговорим о настройке git для частной рабочей области из основной ветви, которая подключена к общей рабочей области разработчика, а затем о том, как зафиксировать изменения из частной рабочей области в главную ветвь общей рабочей области. |
| Март 2024 г. | Управление жизненным циклом Microsoft Fabric— начало работы с конвейерами интеграции и развертывания Git | Ознакомьтесь с основными компонентами управления жизненным циклом с помощью демонстрационного сценария и изучите, что такое управление жизненным циклом и что это означает в Fabric. |
Активатор данных Fabric
В этом разделе приведены архивированные новые функции и возможности активатора данных в Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Октябрь 2023 | Объявление о предварительной версии активатора данных | Мы рады сообщить о том, что активатор данных теперь находится в предварительной версии и включен для всех существующих пользователей Microsoft Fabric. |
| Август 2023 г. | Обновленный предварительный просмотр для разработки триггеров | Мы работали над новым интерфейсом для разработки триггеров , и теперь он доступен в нашей предварительной версии! Теперь в каждом триггере отображаются три карточки: выбор, обнаружение и акт. |
| Май 2023 г. | Управление действиями из данных с помощью активатора данных | Активатор данных — это новый интерфейс Microsoft Fabric без кода, который позволяет бизнес-аналитику автоматически выполнять действия из данных. Чтобы узнать больше, зарегистрируйтесь в ограниченной предварительной версии Активатора данных. |
Fabric и Microsoft 365
В этом разделе содержатся статьи и объявления об интеграции Microsoft Fabric с Microsoft Graph и Microsoft 365.
| Month | Компонент | Подробнее |
|---|---|---|
| Март 2024 г. | Анализ таблиц Dataverse из Microsoft Fabric | При создании ярлыка в Fabric теперь вы увидите вариант для Dataverse. При выборе этого ярлыка и указании сведений о среде Dataverse можно быстро просматривать и работать с таблицами из этой среды. |
| Ноябрь 2023 г. | Fabric + Microsoft 365 Data: Better Together | Microsoft Graph — это шлюз для данных и аналитики в Microsoft 365. Microsoft 365 Интеграция данных для Microsoft Fabric позволяет управлять microsoft 365 вместе с другими источниками данных в одном месте с набором аналитических возможностей. |
| Ноябрь 2023 г. | Соединитель Microsoft 365 теперь поддерживает прием данных в Lakehouse (предварительная версия) | Соединитель Microsoft 365 теперь поддерживает прием данных в таблицы Lakehouse. |
| Октябрь 2023 | Microsoft OneLake добавляет поддержку сочетаний клавиш в Power Platform и Dynamics 365 | Теперь вы можете создавать сочетания клавиш непосредственно к данным Dynamics 365 и Power Platform в Dataverse и анализировать их с помощью Microsoft Fabric вместе с остальными данными OneLake. Нет необходимости экспортировать данные, создавать конвейеры ETL или использовать средства интеграции партнеров. |
| Май 2023 г. | Пошаговое руководство по включению учетной записи разработчика Microsoft Fabric для Microsoft 365 | В этом блоге рассматривается, как включить Microsoft Fabric с учетной записью разработчика Microsoft 365 и бесплатной пробной версией Fabric. |
| Май 2023 г. | Microsoft 365 Data + Microsoft Fabric лучше вместе | Microsoft 365 Интеграция данных для Microsoft Fabric позволяет управлять microsoft 365 вместе с другими источниками данных в одном месте с набором аналитических возможностей. |
Миграция
В этом разделе содержатся рекомендации и обновления документации по миграции в Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Февраль 2024 г. | Сопоставление выделенных пулов SQL Azure Synapse с вычислительными ресурсами хранилища данных Fabric | Ознакомьтесь с рекомендациями по сопоставлению единиц хранилища данных (DWU) из выделенного пула SQL Azure Synapse Analytics с приблизительным числом единиц емкости Fabric (CU). |
| Ноябрь 2023 г. | Миграция из выделенных пулов SQL Azure Synapse | Подробное руководство по runbook миграции доступно для миграции из выделенных пулов SQL хранилища данных Azure Synapse в Microsoft Fabric. |
| Ноябрь 2023 г. | Миграция из Azure Synapse Spark в Fabric | Подробный набор статей о миграции Azure Synapse Spark в Microsoft Fabric, включая процесс миграции, который может включать несколько сценариев и этапов. |
| Июль 2023 г. | Изменение структуры игры — интеграция OneLake | В этой записи блога рассматриваются интеграции OneLake и несколько сценариев для приема данных внутри Fabric OneLake, включая ADLS, ADF, OneLake Explorer, Databricks. |
| Июнь 2023 г. | Microsoft Fabric изменяет игру: экспорт данных и создание Lakehouse | В этой записи блога рассматривается сценарий экспорта данных из База данных SQL Azure в OneLake. |
| Июнь 2023 г. | Копирование данных в SQL Azure в масштабе с помощью Microsoft Fabric | Знаете ли вы, что с помощью Microsoft Fabric можно копировать данные в масштабе из поддерживаемых источников данных в База данных SQL Azure или Управляемый экземпляр SQL Azure в течение нескольких минут? |
| Июнь 2023 г. | Перенос данных Mainframe DB2 z/OS в Microsoft Fabric | В этом блоге мы рассмотрим удобство и простоту открытия DB2 для данных z/OS в Microsoft Fabric. |
Azure Monitor
В этом разделе содержатся рекомендации и обновления документации по мониторингу емкости и использования Microsoft Fabric, включая центр мониторинга.
| Month | Компонент | Подробнее |
|---|---|---|
| Март 2024 г. | Поддержка метрик емкости для приостановки и возобновления | Метрики емкости Fabric обновлены с новыми системными событиями и логикой выверки, чтобы упростить анализ приостановленных емкостей. Приостановка и возобновление структуры — это функция управления емкостью, которая позволяет приостановить емкость SKU F для управления затратами. Если емкость не работает, ее можно приостановить, чтобы обеспечить экономию затрат, а затем, когда вы хотите возобновить работу с емкостью, которую можно повторно активировать. |
| Октябрь 2023 | Регулирование и сглаживание в хранилище данных Synapse | Новая статья поможет вам понять регулирование емкости Fabric. Регулирование возникает, когда емкость клиента потребляет больше ресурсов емкости, чем она приобрела за период времени. |
| Сентябрь 2023 | Центр мониторинга — параметры столбцов | Пользователи могут выбирать и переупорядочение столбцов в соответствии с их настраиваемыми потребностями в центре мониторинга. |
| Сентябрь 2023 | Емкости Fabric — все, что вам нужно знать о новых возможностях и о том, что происходит | Узнайте больше об улучшениях, которые мы делаем на платформе управления емкостью Fabric для пользователей Fabric и Power BI. |
| Сентябрь 2023 | Метрики емкости Microsoft Fabric | Приложение "Метрики емкости Microsoft Fabric" доступно в источнике приложений для различных отчетов о выставлении счетов и использовании. |
| Август 2023 г. | Поддержка центра мониторинга для персонализированных параметров столбцов | Центр мониторинга, позволяющий пользователям персонализировать столбцы, относящиеся к действиям. Теперь у вас есть гибкость для отображения столбцов, относящихся к действиям, на которые вы сосредоточены. |
| Май 2023 г. | Метрики емкости в Microsoft Fabric | Узнайте больше о универсальных вычислительных емкостях и функциях управления метриками емкости Fabric, которые администраторы могут использовать для мониторинга использования и принятия решений по масштабированию на основе данных. |
Microsoft Purview
В этом разделе приведены архивные объявления о возможностях управления и соответствия требованиям с помощью Microsoft Purview в Microsoft Fabric. Дополнительные сведения о защите информации в Microsoft Fabric.
| Month | Компонент | Подробнее |
|---|---|---|
| Май 2023 г. | Администрирование, безопасность и управление в Microsoft Fabric | Microsoft Fabric предоставляет встроенные возможности управления корпоративными классами и соответствия требованиям, основанные на Microsoft Purview. |
Связанный контент
- Блог по модернизации и повторно используемым ресурсам
- Блог Azure Data Explorer
- Начало работы с Microsoft Fabric
- Схемы обучения Майкрософт для Fabric
- Комплексные учебники в Microsoft Fabric
- Известные проблемы структуры
- Блог Microsoft Fabric
- Терминология Microsoft Fabric
- Новые возможности Power BI
- Новые возможности Microsoft Fabric?