Azure デプロイのシステム要件

Rocky Linux:4.18.X

uio_hv_generic

有効にするには、起動時に読み込まれる次のモジュールを追加します。

cat /etc/modules-load.d/k8s.conf 
uio
uio_hv_genericib_uverbs
mlx4_ib

上記のライブラリは ibverbs パッケージで提供されています。

GRUB_CMDLINE_LINUX_DEFAULT="console=tty1 console=ttyS0 default_hugepagesz=1G hugepagesz=1G hugepages=6 intel_iommu=on iommu=pt"

grubを更新し、ホストを再起動します。例えば：

grub2-mkconfig -o /boot/grub2/grub.cfg

次のコマンドを実行して、hugepage が設定されていることを確認します。

cat /proc/cmdline
grep -i hugepages /proc/meminfo

GRUB_CMDLINE_LINUX_DEFAULT="console=tty1 console=ttyS0 default_hugepagesz=1G hugepagesz=1G hugepages=64 intel_iommu=on iommu=pt"

grubを更新し、ホストを再起動します。例えば：

grub2-mkconfig -o /boot/grub2/grub.cfg 

Cloud-Native RouterをL3モードで導入する前に、追加のカーネルモジュールをホストにロードする必要があります。これらのモジュールは通常、 linux-modules-extra または kernel-modules-extra パッケージで提供されます。次のコマンドを実行して、カーネルモジュールを追加します。

cat /etc/modules-load.d/crpd.conf
tun
fou
fou6
ipip
ip_tunnel
ip6_tunnel
mpls_gso
mpls_router
mpls_iptunnel
vrf
vxlan

Linuxホストで ip fou add port 6635 ipproto 137 コマンドを実行して、カーネルベースの転送を有効にします。

VPC ルールオプションは、ファイアウォールルールを設定して、Cloud-Native Router が接続されているサブネット範囲にソースフィルターが設定されたイングレストラフィックと、ループバックアドレスの IP 範囲またはアドレスを許可します。

例えば：

Azure コンソールで [ファイアウォール ポリシー] に移動し、次の属性を持つルールオプションは、ファイアウォールルールを作成します。

1. Name: ルールオプションは、ファイアウォールルールの名前

2. Network:VPCネットワークを選択します

3. Priority: 1000

4. Direction：イングレス

5. Action on Match：許す

6. Source filters: 10.2.0.0/24, 2.51.2.0/23, 2.51.1.0/24, 2.2.2.2/32, 3.3.3.3/32

7. Protocols：すべての

8. Enforcement：有効

ここで、10.2.0.0/24はCloud-Native Routerが接続されているサブネットで、2.51.2.0/24、2.51.1.0/24、2.2.2.2/32、3.3.3.3/32はループバックIP範囲です。

ファブリックインターフェイスで高速ネットワークが有効になっていることを確認します。高速ネットワークが適切に有効化されている場合、ファブリック インターフェイスで 2 つのインターフェイスが使用可能になります。例えば：

3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
    link/ether 00:22:48:23:3b:9e brd ff:ff:ff:ff:ff:ff
    inet 10.225.0.6/24 brd 10.225.0.255 scope global eth1
       valid_lft forever preferred_lft forever
    inet6 fe80::222:48ff:fe23:3b9e/64 scope link 
       valid_lft forever preferred_lft forever
4: enP22960s2: <BROADCAST,MULTICAST,SLAVE,UP,LOWER_UP> mtu 1500 qdisc mq master eth1 state UP group default qlen 1000
    link/ether 00:22:48:23:3b:9e brd ff:ff:ff:ff:ff:ff
    altname enP22960p0s2

Helm チャートでファブリック インターフェイスを設定する場合、 hv_netvsc がバインドされたインターフェイスを提供する必要があります。 ethtool -i interface_name コマンドを発行して確認します。例えば：

user@jcnr01:~# ethtool -i eth1
driver: hv_netvsc
version: 5.15.0-1049-azure
firmware-version: N/A
expansion-rom-version: 
bus-info: 
supports-statistics: yes
supports-test: no
supports-eeprom-access: no
supports-register-dump: yes
supports-priv-flags: no

NetworkManagerは、ネットワークインターフェイスの管理を容易にする一部のオペレーティングシステムのツールです。NetworkManagerを使用すると、デフォルトインターフェイスの操作と設定が簡単になります。ただし、Kubernetesの管理に干渉し、問題が発生する可能性があります。

NetworkManager がインタフェース設定に干渉しないようにするには、次の手順を実行します。

1. ファイルを作成します /etc/NetworkManager/conf.d/crpd.conf。
2. ファイルに次の内容を追加します。

   [keyfile]
    unmanaged-devices+=interface-name:enp*;interface-name:ens*

   注: enp* は、enp で始まるすべてのインターフェイスを示します。特定のインターフェイス名については、カンマ区切りのリストを提供します。
3. コマンド sudo systemctl restart NetworkManager を実行して、NetworkManager サービスを再起動します。
4. ホスト上の sysctl ファイルを編集し、次の内容を貼り付けます。

   net.ipv6.conf.default.addr_gen_mode=0
   net.ipv6.conf.all.addr_gen_mode=0
   net.ipv6.conf.default.autoconf=0
   net.ipv6.conf.all.autoconf=0

5. コマンド sysctl -p /etc/sysctl.conf を実行して、ホストに新しい sysctl.conf 値をロードします。

sysctl kernel.core_pattern
kernel.core_pattern = |/usr/lib/systemd/systemd-coredump %P %u %g %s %t %c %h %e

/etc/sysctl.confでcore_patternを更新できます。例えば：

kernel.core_pattern=/var/crash/core_%e_%p_%i_%s_%h_%t.gz