你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站,请访问 https://docs.azure.cn。
企业和公共部门企业通常会将文件数据保留数十年,因为其中包含客户洞察、基因组模式、机器学习训练数据和合规信息等有业务价值的信息。 由于文件数据量大、种类多且增长速度快,因此文件数据的存储、备份和管理成本可能会很高。 正如 2023 年 Komprise 非结构化数据管理状况报告所示,大多数 IT 组织将 30% 到 50% 的预算用于文件数据存储和备份。
在查看文件数据的存储成本时,要考虑到文件数据的成本至少比文件存储本身的成本高 3 倍。 文件数据不仅可以存储,还需要通过备份进行保护并进行复制以进行灾难恢复。
项目 | 成本 |
---|---|
文件存储 | 1 倍 |
快照 | 0.3 倍 |
DR 镜像(FS + 快照的第二个站点副本) | 1.3 倍 |
2 到 3 个备份(更实惠的存储 + 备份软件) | 1 倍以上 |
总计 | 3.6 倍以上 |
使用云来降低文件数据成本:替代方案比较
随着文件数据增长的加速,管理数据增长的同时降低文件数据存储和备份的成本已成为企业 IT 的首要任务。 大多数(通常高达 80%)文件数据是冷数据,这意味着不经常访问。 因此,组织可以通过将本地文件数据分层到具有成本效益的对象存储层(例如 Azure Blob)来显著节省成本,这可能是文件存储成本的 1/10 到 1/100。 以下是与更高性能的本地和云文件存储选项相比 Azure Blob 存档存储层成本的细分。
项目 | 成本/GB/月 | Azure Blob 存档存储层的相对成本 |
---|---|---|
本地 Flash/SSD | 0.12 美元 | 123 倍 |
本地磁盘 | $.066 | 66 倍 |
Azure Blob 冷存储层 | $0.015 | 15x |
Azure Blob 存档存储层 | 0.00099 美元 | 1 倍 |
阅读 Azure 存储博客文章:
适用于 Azure 的 Komprise 智能分层
适用于 Azure 的 Komprise 智能分层分析文件和对象存储系统中的数据,识别非活动/冷数据。 根据你的策略,合格的文件将移动到 Azure Blob。 Komprise 透明移动技术 (TMT™) 可从数据存储、快照、备份和灾难恢复足迹中卸载整个文件,而不会改变流程或用户行为。 这种文件分层方法可以最大限度地节省数据存储和备份成本,通过防止从云访问数据时不必要的补充来降低云流出量成本,并允许为不同的数据类型和组设置不同的策略。 用户可以像以前一样从原始位置访问分层数据,并且可以直接访问 Azure Blob 中的对象,而无需任何锁定。 还可以使用所有本机 Azure 数据服务。
Komprise 会分析你的所有文件和对象数据。 可以设置策略,以透明方式将冷文件分层到 Azure,并根据你的成本和策略立即可视化节省的费用
Komprise TMT 移动的文件与以前一样,用户不会注意到任何差异,并且像桌面上的普通文件一样打开。 没有存根。 没有代理。 该图显示了 Komprise 分层之前和之后的 PDF 文件。
阅读 Azure 博客文章:如何节省 70% 的文件数据成本
适用于 Azure 的 Komprise 智能分层入门
你当地的 Komprise 团队将协助你设置 Komprise Director 控制台和本地网格。 这是一个简单的过程,包括安装前审查、部署阶段和初始培训。 从通电到看到第一个分析结果,安装准备工作大约需要 1 小时。
Komprise 网格
Komprise 软件易于设置,并且在虚拟环境中运行,可实现完全的资源灵活性。 Komprise Grid 可进行配置,以获得最佳性能、灵活性和成本,从而满足每个客户独特环境的需求。 Komprise 数据管理器(观察程序)和数据移动器(Windows 代理)可以部署在本地或云中,以满足你的要求。
- 控制器:Komprise Grid 的管理控制台。 它用于配置环境、设置策略、监视活动以及查看报告和图表。
- 观察程序:系统的核心。 观察程序与控制器通信、分析存储系统、总结报告、执行分层计划以确定要分层的数据、将数据移动到 Azure Blob,然后为最终用户提供对分层文件的持续透明访问。
- Windows 代理:这些可缩放的数据移动器可简化和加速 SMB/CIFS 数据流。 可以轻松添加 Windows 代理数据移动器,以满足不断发展的环境或紧迫的时间线不断变化的性能要求。
共享发现和分析
添加 Komprise 分析和分层的共享
- 从“数据存储”页开始。
- 使用“添加数据存储”来识别存储系统和共享以进行分析。
- 添加 NAS 共享时,为“存储使用”选择“标准”,并选择合适的存储系统平台或提供程序进行添加。 Komprise 支持标准 NAS 协议。 对于列表中未指定的存储系统,请使用“其他 NAS”选项。
提供必要的系统信息以使 Komprise 能够访问存储系统。 这通常是主机名或 IP 地址。 较大的 NAS 系统有时需要管理端口并登录。 有关详细信息,请参阅 Komprise 管理指南:简介。
启用共享以进行分析和分层。
- 然后,选择“跳过添加到计划并关闭”以完成添加数据存储向导。
添加 Azure Blob 目标
添加目标以发送分层数据。
- 在“数据存储”页面上,选择“添加数据存储”以添加分层计划目标。 为“存储使用”选择“计划目标”,并选择 Azure Blob 存储作为提供程序。
- 输入使 Komprise 连接到 Azure Blob 容器所需的适当信息。
创建新的分层计划
Komprise 计划定义了分层策略,包括确定分层的共享以及所需的文件不活动期限。 Komprise 会定期传输间隔(默认为 7 天)扫描指定的共享,并将符合计划策略(不活动期限)的任何文件分层到指定的 Azure Blob 容器。
- 使用屏幕右上角的“所有操作”创建新计划。
在计划编辑器中,为第一组共享指定新的组名称。 提供组名称后,键入 Enter 打开组进行编辑。
启用用于分层的移动操作
- 选择“添加共享”以指定用于分层的本地共享。
- 选择“按期限筛选的文件”以指定分层非活动文件的期限策略。 右侧的热度地图(圆环图)添加了一个紫色散列区域,显示 Komprise 估计将根据计划策略移动的文件量和数量。 将鼠标悬停在紫色散列区域上即可查看值。
- 可以在查看计划时单击右下角的“编辑成本模型”来自定义分析,以确保准确的成本节省估算。 在左侧输入本地存储成本信息,在右侧输入目标存储成本信息(针对 Azure Blob)。
- 这些财务价值应用于确定的分层数据,并在热度地图下方的 3 年节省数字和图表中表示。 下图突出显示了一年后的增长率和成本。 黄线显示在没有数据分层的情况下的估计成本,而蓝线表示降低的成本,包括 Komprise 的分层。
- 返回计划编辑器,为分层过期文件添加分层目标。 对于“目标”字段,选择之前添加的 Azure Blob 目标。
选择“完成编辑”以完成计划配置。
接下来选择“激活或测试”开始分层操作。 如果首先测试你的计划(推荐),Komprise 会生成一个文件列表,这些文件将从你选择的 NAS 共享移动到 Azure Blob,而无需实际移动它们。 如果选择激活计划,Komprise 会开始将满足计划中定义的条件的文件移动到 Azure Blob。
- 激活后,新的计划活动选项卡将打开,其中显示分层操作结果。
在任何复制或移动操作期间,Komprise 都会对文件执行 NFS 的完整 MD5 校验和和 SMB 的 SHA-1,以确保数据传输期间的数据完整性。 一个计划可以跨越多个 NAS 服务器,甚至可以来自不同的供应商。 例如,你可以在 Komprise 中为不同部门创建不同的策略组。 当中央 IT 部门管理不同业务部门的数据时,此功能非常有用。
Komprise 如何提供透明的本机数据访问
Komprise 将文件从源 NAS 共享分层到 Azure Blob,并在其原始源位置留下指向该文件的符号链接。 当用户或应用程序尝试读取或写入已分层的文件时,他们会使用符号链接访问该文件。 该链接指向 Komprise 网格观察程序,它将跟踪文件的存储位置。 观察程序从 Azure 后台检索文件,并在几秒钟内完成文件的读/写请求。 这样,用户和应用程序就可以继续访问同一位置中的这些文件,而无需重构应用程序以使用对象存储或指定不同的文件共享位置。
默认情况下,Komprise 以本机格式移动文件,且其内容保持不变。 将文件移至 Azure 后,你现在可以在 Azure 中将这些文件作为本机对象进行访问。 这将为客户开启许多新的、令人兴奋的方案。 例如,客户可以使用这些数据作为数据湖的基础,并可以使用 Azure Synapse Analytics 或 Azure 机器学习等服务查询和探索数据。 可能性是无限的 — 许多客户正在以他们以前从未考虑过的方式释放冷数据的价值。
其他 Komprise 许可选项
适用于 Azure 的 Komprise 智能分层包括 Komprise 弹性数据迁移,Azure 客户可通过 Azure 迁移计划免费使用该功能。 它不包括 Komprise 深度分析,这是一个类似搜索的强大界面,可解锁 Komprise 全球文件索引和智能数据管理平台的数据管理和数据工作流功能。 如需了解有关这些功能和升级的更多信息,请联系 Komprise。
为什么选择适用于 Azure 的 Komprise 智能分层?
除了节省总体成本之外,使用适用于 Azure 的 Komprise 智能分层进行混合云分层的一些优势还包括:
- 利用现有的存储投资:你可以继续使用现有的 NAS 存储,并且 Komprise 将冷文件透明地分层到 Azure。 用户和应用程序可以继续查看和访问文件,就像它们仍在本地一样。
- 利用 Azure 数据服务:Komprise 通过获得专利的透明移动技术 (TMT) 维护文件对象二元性。 这样就可以在 Azure 中将分层文件作为对象查看,并且可以本机使用所有 Azure 数据服务,充分利用云的全部功能。
- 适用于异构供应商存储:Komprise 适用于所有文件和对象存储,以分析数据并将数据透明地分层到 Azure 文件和对象层。
- Azure 中的持续生命周期管理:Komprise 继续管理 Azure 中的数据生命周期。 随着数据变冷,它可以根据你设置的策略从 Azure Blob 冷存储层移动到 Azure Blob 存档存储层。
要了解更多信息并获得自定义的节省评估,请访问 Komprise。