配置 InfiniBand 网络适配器用于分析平台系统

描述如何配置非设备客户端服务器上的InfiniBand网络适配器,以连接到并行Data Warehouse(PDW)上的控制节点。 使用以下说明进行基本连接配置和高可用性配置,以便加载操作、备份及其他进程自动连接到当前活动的 InfiniBand 网络。

Description

本说明将指导你如何在连接到 InfiniBand 的服务器上查找并设置正确的 InfiniBand IP 地址和子网掩码。 他们还会说明如何将服务器配置为使用 APS 设备的 DNS,以便您的连接解析到处于活动状态的 InfiniBand 网络。

为了高可用性,APS拥有两个InfiniBand网络,一个主动,一个被动。 每个InfiniBand网络的控制节点都有不同的IP地址。 如果主动的InfiniBand网络瘫痪,被动的InfiniBand网络将成为主动网络。 当这种情况发生时,脚本或进程会自动连接到活跃的InfiniBand网络,而不更改脚本参数。

具体来说,在本文中你:

  1. 查找APS DNS服务器(appliance_domain-AD01和appliance_domain*-AD02)的InfiniBand的IP地址。 要做到这一点,你需要登录AD01和AD02服务器,获取每个InfiniBand网络的IP地址。 AD节点上的InfiniBand IP地址就是DNS的IP地址。

  2. 配置每个网络适配器使用APS InfiniBand网络上的可用IP地址。

    1. 如果你有两个InfiniBand网络适配器,你会把一个适配器配置为第一个InfiniBand网络中的可用IP地址,称为TeamIB1;另一个适配器配置一个在第二个InfiniBand网络中可用的IP地址,称为TeamIB2。 使用appliance_domain-AD01 TeamIB1的IP地址作为首选DNS服务器,appliance_domain-AD02 TeamIB1 IP地址作为TeamIB1网络适配器的备用DNS服务器。 使用appliance_domain-AD01 TeamIB2 IP地址作为首选DNS服务器,appliance_domain-AD02 TeamIB2 IP地址作为TeamIB2网络适配器的备用DNS服务器。

    2. 如果你只有一个InfiniBand网络适配器,你需要用InfiniBand网络中的一个可用IP地址配置适配器。 然后你在该适配器上配置首选和备用DNS服务器,分别使用appliance_domain-AD01 TeamIB1和appliance_domain-AD02 TeamIB1,或者使用appliance_domain-AD01 TeamIB2和appliance_domain-AD02 TeamIB2,哪一个位于与配置适配器同一网络的DNS服务器,分别是首选和备用DNS服务器。

  3. 配置你的InfiniBand网络适配器使用APS DNS服务器,以解决你与活跃InfiniBand网络的连接。

    1. 配置时,您可以使用高级TCP/IP设置,在客户端服务器的DNS后缀列表开头添加设备域名DNS后缀。 这只需要在其中一个网络适配器上配置;该设置适用于两个适配器。

配置好 InfiniBand 网络适配器后,客户端进程可以通过服务器 PDW_region-SQLCTL01 地址连接到 InfiniBand 网络上的控制节点。 您的服务器会附加 Analytics Platform System DNS 后缀,或者您也可以输入完整地址,即 PDW_region-SQLCTL01.appliance_domain.pdw.local。

例如,如果您的PDW区域名称为MyPDW,设备名称为MyAPS,则dwloader服务器用于加载数据的规范是以下之一:

  • dwloader -S MYPDW-SQLCTL01.MyAPS.pdw.local

  • dwloader -S MYPDW-SQLCTL01

在您开始之前

要求

你需要一个APS设备域账户才能登录AD01节点。 例如,F12345*\Administrator。

你需要在客户端服务器上有一个Windows账号,并且有权限配置网络适配器。

先决条件

这些指令假设客户端服务器已经架好并连接到设备InfiniBand网络。 关于机架和布线的操作说明,请参见 获取和配置加载服务器。

一般备注

通过使用SQLCTL01,分析平台系统DNS通过活跃的InfiniBand网络将您的客户端服务器连接到控制节点。 这只适用于连接;如果InfiniBand网络在加载或备份时宕机,你需要重启进程。

为了满足自己的业务需求,你也可以将客户端服务器加入你自己的非设备工作组或 Windows 域。

步骤1:获取设备的InfiniBand网络设置

获取设备InfiniBand网络设置

  1. 通过使用 appliance_domain\Administrator 账户登录设备 AD01 节点。

  2. 在设备 AD01 节点上,打开控制面板,选择网络和互联网,选择网络和共享中心*,然后选择更改适配器设置。

  3. 在网络连接窗口中,右键点击Team IB1并选择属性。

    管理节点上的InfiniBand连接

  4. 在互联网协议版本4(TCP/IPv4)的属性窗口中,写下IP地址和子网掩码的值。 appliance_domain-AD01节点的IP地址是分析平台系统DNS服务器的IP地址。

  5. 在appliance_domain-AD02服务器上,针对 TeamIB1 适配器重复上述 1 到 5 步。

    PDW管理节点 InfiniBand 1属性

  6. 点击取消以关闭窗口。

  7. 在TeamIB1网络上找到一个未使用的IP地址,并记下来。

    要查找未使用的 IP 地址,打开命令窗口,尝试 ping 设备范围内的 IP 地址。 在这个例子中,TeamIB1网络的IP地址是172.16.14.30。 找一个以172.16.14开头但未被使用的IP地址。 例如,从命令行输入“ping 172.16.14.254”。 如果ping请求未成功,IP地址可用。

  8. 对 TeamIB2 执行相同的操作。 在*网络连接窗口,右键点击Team IB2并选择属性。

  9. 在互联网协议版本4(TCP/IPv4)的属性窗口中,写下TeamIB2的IP地址和子网掩码值。

  10. 在 appliance_domain-AD02 服务器上,对 TeamIB2 适配器重复上述第 8-9 步。

    TeamIB2 属性

  11. 在 TeamIB2 网络上找到一个未使用的IP地址,并记下来。

    要查找未使用的 IP 地址,打开命令窗口,尝试 ping 设备范围内的 IP 地址。 在这个例子中,TeamIB2网络的IP地址是172.16.18.30。 找一个以172.16.18开头但未被使用的IP地址。 例如,从命令行输入“ping 172.16.18.254”。 如果ping请求未成功,IP地址可用。

步骤2:配置客户端服务器上的InfiniBand网络适配器设置

备注

  • 这些步骤展示了如何将服务器注册到APS的DNS服务器。

  • 为了满足你自己的网络需求,你也可以将客户端服务器加入你自己的非设备工作组或 Windows 域。

  • 说明步骤是配置每台服务器上的两个网络适配器。 如果你只有一个网络适配器,选择一个网络节点在适配器上配置,然后把第二个 DNS IP 地址作为备用 DNS 服务器。

在客户端服务器上配置InfiniBand网络适配器设置

  1. 以 Windows 管理员身份登录设备 InfiniBand 网络上的加载、备份或其他客户端服务器。

  2. 打开控制面板*,选择网络和共享中心,然后选择更改适配器设置。

配置第一个网络适配器

  1. 在“网络连接”窗口中,右键单击 Mellanox 适配器的一个未识别网络连接项,然后选择“属性”。

    选择InfiniBand网络

  2. 在属性窗口中

    1. 在“常规”选项卡上,将 IP 地址设置为你在针对 TeamIB1 执行的 ping 测试中确认为未被占用的 IP 地址。 对于本文中使用的示例值,你需要输入172.16.14.254。

    2. 把子网掩码设置为你为TeamIB1写下的子网掩码。

    3. 将首选DNS服务器设置为你之前从appliance_domain*-AD01节点写下的TeamIB1的IP地址。

    4. 将备用DNS服务器设置为你之前从appliance_domain*-AD02节点写下的TeamIB1的IP地址。

      InfiniBand 1 网络适配器属性

    5. 点击确定以应用更改。

配置第二个网络适配器

  1. 如果你只有一个网络适配器,可以跳过这部分。

  2. 在“网络连接”窗口中,右键单击 Mellanox 适配器对应的第二个未识别网络连接项,然后选择“属性”。

    选择InfiniBand网络

  3. 在属性窗口中

    1. 在“通用”选项卡上,将 IP 地址设置为在 TeamIB2 的 ping 测试中确认空闲的 IP 地址。 对于本文中使用的示例值,你需要输入172.16.18.254。

    2. 把子网掩码设置为你为TeamIB2写下的子网掩码。

    3. 将首选 DNS 服务器设置为你之前从 appliance_domain*-AD01 节点记下的 TeamIB2 的 IP 地址。

    4. 将备用DNS服务器设置为你之前从appliance_domain*-AD02节点写下的TeamIB2的IP地址。

      Note

      如果你只有一个网络适配器,可以分别使用设备 AD01 TeamIB1 和设备 AD02 TeamIB1 作为首选和备用 DNS 服务器配置,或者根据 AD 虚拟机是否故障切换,使用 AD01 TeamIB2 和 AD02 TeamIB2 作为首选和备用 DNS 服务器。

      InfiniBand 1 网络适配器属性

    5. 点击确定以应用更改。

配置DNS后缀

  1. 在网络连接窗口中,右键点击Mellanox适配器的一个网络槽,选择属性。

  2. 点击进阶版......按钮。

  3. 在高级TCP/IP设置窗口中,如果“按顺序添加这些DNS后缀”选项没有灰色,请勾选“按顺序添加这些DNS后缀”的框,选择设备域名后缀,然后点击添加......设备域后缀为 appliance_domain.local

  4. 如果“追加这些 DNS 后缀(按顺序):”选项显示为灰色,则可以通过修改注册表项 HKEY_LOCAL_MACHINE\SOFTWARE\Policies\Microsoft\Windows NT\DNSClient,将 APS 域添加到此服务器。

    TCP/IP 设置

  5. 为了更快的地址解析,我们建议将“家电”后缀移到列表中顶部。

  6. 单击“确定”。

  7. 现在,您可以使用 PDW_region-SQLCTL01.appliance_domain.local 连接到设备的 InfiniBand 网络,或者直接使用 appliance_domain-SQLCTL01。 如果你用全名和DNS后缀连接,连接可能会更快。

    名为 MyAPS 的设备示例,其 MyPDW PDW 区域如下:

    • MyPDW-SQLCTL01.MyAPS.local

    • MyPDW-SQLCTL01