你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn

使用适用于 Azure 的 Komprise 智能分层优化文件存储

企业和公共部门企业通常会将文件数据保留数十年,因为其中包含客户洞察、基因组模式、机器学习训练数据和合规信息等有业务价值的信息。 由于文件数据量大、种类多且增长速度快,因此文件数据的存储、备份和管理成本可能会很高。 正如 2023 年 Komprise 非结构化数据管理状况报告所示,大多数 IT 组织将 30% 到 50% 的预算用于文件数据存储和备份。

在查看文件数据的存储成本时,要考虑到文件数据的成本至少比文件存储本身的成本高 3 倍。 文件数据不仅可以存储,还需要通过备份进行保护并进行复制以进行灾难恢复。

项目 成本
文件存储 1 倍
快照 0.3 倍
DR 镜像(FS + 快照的第二个站点副本) 1.3 倍
2 到 3 个备份(更实惠的存储 + 备份软件) 1 倍以上
总计 3.6 倍以上

使用云来降低文件数据成本:替代方案比较

随着文件数据增长的加速,管理数据增长的同时降低文件数据存储和备份的成本已成为企业 IT 的首要任务。 大多数(通常高达 80%)文件数据是冷数据,这意味着不经常访问。 因此,组织可以通过将本地文件数据分层到具有成本效益的对象存储层(例如 Azure Blob)来显著节省成本,这可能是文件存储成本的 1/10 到 1/100。 以下是与更高性能的本地和云文件存储选项相比 Azure Blob 存档存储层成本的细分。

项目 成本/GB/月 Azure Blob 存档存储层的相对成本
本地 Flash/SSD 0.12 美元 123 倍
本地磁盘 $.066 66 倍
Azure Blob 冷存储层 $0.015 15x
Azure Blob 存档存储层 0.00099 美元 1 倍

阅读 Azure 存储博客文章:

适用于 Azure 的 Komprise 智能分层

适用于 Azure 的 Komprise 智能分层分析文件和对象存储系统中的数据,识别非活动/冷数据。 根据你的策略,合格的文件将移动到 Azure Blob。 Komprise 透明移动技术 (TMT™) 可从数据存储、快照、备份和灾难恢复足迹中卸载整个文件,而不会改变流程或用户行为。 这种文件分层方法可以最大限度地节省数据存储和备份成本,通过防止从云访问数据时不必要的补充来降低云流出量成本,并允许为不同的数据类型和组设置不同的策略。 用户可以像以前一样从原始位置访问分层数据,并且可以直接访问 Azure Blob 中的对象,而无需任何锁定。 还可以使用所有本机 Azure 数据服务。

分层界面的屏幕截图。

Komprise 会分析你的所有文件和对象数据。 可以设置策略,以透明方式将冷文件分层到 Azure,并根据你的成本和策略立即可视化节省的费用

分层后更新的图标的屏幕截图。

Komprise TMT 移动的文件与以前一样,用户不会注意到任何差异,并且像桌面上的普通文件一样打开。 没有存根。 没有代理。 该图显示了 Komprise 分层之前和之后的 PDF 文件。

阅读 Azure 博客文章:如何节省 70% 的文件数据成本

适用于 Azure 的 Komprise 智能分层入门

你当地的 Komprise 团队将协助你设置 Komprise Director 控制台和本地网格。 这是一个简单的过程,包括安装前审查、部署阶段和初始培训。 从通电到看到第一个分析结果,安装准备工作大约需要 1 小时。

适用于 Azure 的 Komprise 智能分层

Komprise 网格

Komprise 软件易于设置,并且在虚拟环境中运行,可实现完全的资源灵活性。 Komprise Grid 可进行配置,以获得最佳性能、灵活性和成本,从而满足每个客户独特环境的需求。 Komprise 数据管理器(观察程序)和数据移动器(Windows 代理)可以部署在本地或云中,以满足你的要求。

  • 控制器:Komprise Grid 的管理控制台。 它用于配置环境、设置策略、监视活动以及查看报告和图表。
  • 观察程序:系统的核心。 观察程序与控制器通信、分析存储系统、总结报告、执行分层计划以确定要分层的数据、将数据移动到 Azure Blob,然后为最终用户提供对分层文件的持续透明访问。
  • Windows 代理:这些可缩放的数据移动器可简化和加速 SMB/CIFS 数据流。 可以轻松添加 Windows 代理数据移动器,以满足不断发展的环境或紧迫的时间线不断变化的性能要求。

Komprise 分层解决方案的体系结构关系图。

共享发现和分析

添加 Komprise 分析和分层的共享

  1. 从“数据存储”页开始。
  2. 使用“添加数据存储”来识别存储系统和共享以进行分析。

添加数据存储界面的屏幕截图。

  1. 添加 NAS 共享时,为“存储使用”选择“标准”,并选择合适的存储系统平台或提供程序进行添加。 Komprise 支持标准 NAS 协议。 对于列表中未指定的存储系统,请使用“其他 NAS”选项。

添加 NAS 界面的屏幕截图。

  1. 提供必要的系统信息以使 Komprise 能够访问存储系统。 这通常是主机名或 IP 地址。 较大的 NAS 系统有时需要管理端口并登录。 有关详细信息,请参阅 Komprise 管理指南:简介

  2. 启用共享以进行分析和分层。

启用共享界面的屏幕截图。

  1. 然后,选择“跳过添加到计划并关闭”以完成添加数据存储向导。

添加 Azure Blob 目标

添加目标以发送分层数据。

  1. 在“数据存储”页面上,选择“添加数据存储”以添加分层计划目标。 为“存储使用”选择“计划目标”,并选择 Azure Blob 存储作为提供程序。

添加数据存储分层界面的屏幕截图。

  1. 输入使 Komprise 连接到 Azure Blob 容器所需的适当信息。

详细的添加数据存储界面的屏幕截图。

创建新的分层计划

Komprise 计划定义了分层策略,包括确定分层的共享以及所需的文件不活动期限。 Komprise 会定期传输间隔(默认为 7 天)扫描指定的共享,并将符合计划策略(不活动期限)的任何文件分层到指定的 Azure Blob 容器。

  1. 使用屏幕右上角的“所有操作”创建新计划。

新建分层计划界面的屏幕截图。

  1. 在计划编辑器中,为第一组共享指定新的组名称。 提供组名称后,键入 Enter 打开组进行编辑。

  2. 启用用于分层的移动操作

启用移动界面的屏幕截图。

  1. 选择“添加共享”以指定用于分层的本地共享。

添加共享界面的屏幕截图。

  1. 选择“按期限筛选的文件”以指定分层非活动文件的期限策略。 右侧的热度地图(圆环图)添加了一个紫色散列区域,显示 Komprise 估计将根据计划策略移动的文件量和数量。 将鼠标悬停在紫色散列区域上即可查看值。

按年限筛选界面的屏幕截图。

  1. 可以在查看计划时单击右下角的“编辑成本模型”来自定义分析,以确保准确的成本节省估算。 在左侧输入本地存储成本信息,在右侧输入目标存储成本信息(针对 Azure Blob)。

编辑成本模型界面的屏幕截图。

  1. 这些财务价值应用于确定的分层数据,并在热度地图下方的 3 年节省数字和图表中表示。 下图突出显示了一年后的增长率和成本。 黄线显示在没有数据分层的情况下的估计成本,而蓝线表示降低的成本,包括 Komprise 的分层。

显示数据增长界面的屏幕截图。

  1. 返回计划编辑器,为分层过期文件添加分层目标。 对于“目标”字段,选择之前添加的 Azure Blob 目标。

配置分层目标界面的屏幕截图。

  1. 选择“完成编辑”以完成计划配置。

  2. 接下来选择“激活或测试”开始分层操作。 如果首先测试你的计划(推荐),Komprise 会生成一个文件列表,这些文件将从你选择的 NAS 共享移动到 Azure Blob,而无需实际移动它们。 如果选择激活计划,Komprise 会开始将满足计划中定义的条件的文件移动到 Azure Blob。

测试分层配置界面的屏幕截图。

  1. 激活后,新的计划活动选项卡将打开,其中显示分层操作结果。

显示活动显示的屏幕截图。

在任何复制或移动操作期间,Komprise 都会对文件执行 NFS 的完整 MD5 校验和和 SMB 的 SHA-1,以确保数据传输期间的数据完整性。 一个计划可以跨越多个 NAS 服务器,甚至可以来自不同的供应商。 例如,你可以在 Komprise 中为不同部门创建不同的策略组。 当中央 IT 部门管理不同业务部门的数据时,此功能非常有用。

Komprise 如何提供透明的本机数据访问

Komprise 将文件从源 NAS 共享分层到 Azure Blob,并在其原始源位置留下指向该文件的符号链接。 当用户或应用程序尝试读取或写入已分层的文件时,他们会使用符号链接访问该文件。 该链接指向 Komprise 网格观察程序,它将跟踪文件的存储位置。 观察程序从 Azure 后台检索文件,并在几秒钟内完成文件的读/写请求。 这样,用户和应用程序就可以继续访问同一位置中的这些文件,而无需重构应用程序以使用对象存储或指定不同的文件共享位置。

默认情况下,Komprise 以本机格式移动文件,且其内容保持不变。 将文件移至 Azure 后,你现在可以在 Azure 中将这些文件作为本机对象进行访问。 这将为客户开启许多新的、令人兴奋的方案。 例如,客户可以使用这些数据作为数据湖的基础,并可以使用 Azure Synapse AnalyticsAzure 机器学习等服务查询和探索数据。 可能性是无限的 — 许多客户正在以他们以前从未考虑过的方式释放冷数据的价值。

其他 Komprise 许可选项

适用于 Azure 的 Komprise 智能分层包括 Komprise 弹性数据迁移,Azure 客户可通过 Azure 迁移计划免费使用该功能。 它不包括 Komprise 深度分析,这是一个类似搜索的强大界面,可解锁 Komprise 全球文件索引和智能数据管理平台的数据管理和数据工作流功能。 如需了解有关这些功能和升级的更多信息,请联系 Komprise

为什么选择适用于 Azure 的 Komprise 智能分层?

除了节省总体成本之外,使用适用于 Azure 的 Komprise 智能分层进行混合云分层的一些优势还包括:

  • 利用现有的存储投资:你可以继续使用现有的 NAS 存储,并且 Komprise 将冷文件透明地分层到 Azure。 用户和应用程序可以继续查看和访问文件,就像它们仍在本地一样。
  • 利用 Azure 数据服务:Komprise 通过获得专利的透明移动技术 (TMT) 维护文件对象二元性。 这样就可以在 Azure 中将分层文件作为对象查看,并且可以本机使用所有 Azure 数据服务,充分利用云的全部功能。
  • 适用于异构供应商存储:Komprise 适用于所有文件和对象存储,以分析数据并将数据透明地分层到 Azure 文件和对象层。
  • Azure 中的持续生命周期管理:Komprise 继续管理 Azure 中的数据生命周期。 随着数据变冷,它可以根据你设置的策略从 Azure Blob 冷存储层移动到 Azure Blob 存档存储层。

要了解更多信息并获得自定义的节省评估,请访问 Komprise