Azure IoT 계층화된 네트워크 관리를 위한 샘플 네트워크 환경 만들기(미리 보기)

CoreDNS 구성

DNS 설정은 여러 가지 방법으로 수행할 수 있지만 이 예제에서는 K3S 클러스터의 기본 DNS 서버인 CoreDNS에서 제공하는 확장 메커니즘을 사용합니다. 확인해야 하는 허용 목록의 URL이 CoreDNS에 추가됩니다.

수준 4 계층화된 네트워크 관리에서 configmap 만들기

수준 4 클러스터 및 계층화된 네트워크 관리가 준비되면 다음 단계를 수행합니다.

1. 다음 명령을 사용하여 계층화된 네트워크 관리 서비스의 IP 주소를 확인합니다.

   kubectl get services -n azure-iot-operations
   

   출력은 다음과 비슷합니다. 서비스의 IP 주소는 20.81.111.118입니다.

   NAME          TYPE           CLUSTER-IP     EXTERNAL-IP     PORT(S)                      AGE
   lnm-level4   LoadBalancer   10.0.141.101   20.81.111.118   80:30960/TCP,443:31214/TCP   29s
   

2. 다음 명령을 사용하여 구성 맵을 봅니다.

   kubectl get cm -n azure-iot-operations
   

   출력은 다음 예제와 같아야 합니다.

   NAME                           DATA   AGE
   aio-lnm-level4-config          1      50s
   aio-lnm-level4-client-config   1      50s
   

3. aio-lnm-level4-client-config를 사용자 지정합니다. 수준 3 클러스터에서 최상위 계층화된 네트워크 관리 인스턴스로 트래픽을 전달하려면 수준 3 설정의 일부로 이 구성이 필요합니다.

   # set the env var PARENT_IP_ADDR to the ip address of level 4 LNM instance.
     export PARENT_IP_ADDR="20.81.111.118"
   
   # run the script to generate a config map yaml
     kubectl get cm aio-lnm-level4-client-config -n azure-iot-operations -o yaml | yq eval '.metadata = {"name": "coredns-custom", "namespace": "kube-system"}' -| sed 's/PARENT_IP/'"$PARENT_IP_ADDR"'/' > configmap-custom-level4.yaml
   

   이 단계에서는 configmap-custom-level4.yaml이라는 파일을 만듭니다.

K3S의 수준 3 CoreDNS 구성

K3S 클러스터를 설정하고 수준 3 격리 계층으로 이동한 후 이전에 생성된 사용자 지정된 클라이언트 구성을 사용하여 수준 3 K3S의 CoreDNS를 구성합니다.

1. configmap-custom-level4.yaml을 수준 3 호스트 또는 클러스터에 원격으로 액세스하는 시스템에 복사합니다.

2. 다음 명령을 실행합니다.

   # Create a config map called coredns-custom in the kube-system namespace
   kubectl apply -f configmap-custom-level4.yaml
   
   # Restart coredns
   kubectl rollout restart deployment/coredns -n kube-system
   
   # validate DNS resolution
   kubectl run -it --rm --restart=Never busybox --image=busybox:1.28 -- nslookup east.servicebus.windows.net
   
   # You should see the following output.
   kubectl run -it --rm --restart=Never busybox --image=busybox:1.28 -- nslookup east.servicebus.windows.net
   Server:    10.43.0.10
   Address 1: 10.43.0.10 kube-dns.kube-system.svc.cluster.local
   
   Name:      east.servicebus.windows.net
   Address 1: 20.81.111.118
   pod "busybox" deleted
   
   # Note: confirm that the resolved ip address matches the ip address of the level 4 Layered Network Management instance.
   

3. 이전 단계에서는 DNS 구성을 설정하여 클러스터 내에서 허용 목록에 있는 URL을 수준 4로 확인합니다. 클러스터 외부의 DNS가 동일한 작업을 수행하도록 하려면 K3S 클러스터 내의 CoreDNS로 트래픽을 전달하도록 시스템 해결을 구성해야 합니다. K3S 호스트에서 다음 명령을 실행합니다. 다음 디렉터리를 만듭니다.

       sudo mkdir /etc/systemd/resolved.conf.d
   

   다음 내용이 포함된 lnm.conf라는 파일을 만듭니다. IP 주소는 kube-system 네임스페이스에서 실행되는 kube-dns 서비스의 수준 3 클러스터 IP 주소여야 합니다.

   [Resolve]
   DNS=<PUT KUBE-DNS SERVICE IP HERE> 
   DNSStubListener=no
   

   DNS 확인자를 다시 시작합니다.

   sudo systemctl restart systemd-resolved
   

DNS 서버 구성

사용자 지정 DNS는 수준 3 이하에만 필요합니다. 이 예제에서는 DNS 확인을 위해 Ubuntu에서 실행되는 dnsmasq 서버를 사용합니다.

1. 로컬 네트워크에 Ubuntu 컴퓨터를 설치합니다.

2. Ubuntu 컴퓨터에서 dnsmasq 서비스를 사용하도록 설정합니다.

   apt update
   apt install dnsmasq
   systemctl status dnsmasq
   

   참고 항목

   포트 53에서 충돌이 발생하는 경우 시스템 해결 서비스를 사용하지 않도록 설정해야 할 수 있습니다.

   systemctl disable --now systemd-resolved
   

3. 이러한 도메인을 상위 수준으로 라우팅하도록 표시된 대로 /etc/dnsmasq.conf 파일을 수정합니다.

   • IPv4 주소를 10.104.0.10에서 해당 수준의 각 대상 주소로 변경합니다. 이 경우 부모 수준에서 계층화된 네트워크 관리 서비스의 IP 주소입니다.

   다음 구성에는 Azure IoT 작업을 사용하도록 설정하는 데 필요한 엔드포인트만 포함됩니다.

   strict-order
   
   # Arc endpoints
   address=/management.azure.com/10.0.0.6
   address=/.dp.kubernetesconfiguration.azure.com/10.0.0.6
   address=/login.microsoftonline.com/10.0.0.6
   address=/.login.microsoft.com/10.0.0.6
   address=/login.windows.net/10.0.0.6
   address=/mcr.microsoft.com/10.0.0.6
   address=/.data.mcr.microsoft.com/10.0.0.6
   address=/gbl.his.arc.azure.com/10.0.0.6
   address=/.his.arc.azure.com/10.0.0.6
   address=/k8connecthelm.azureedge.net/10.0.0.6
   address=/guestnotificationservice.azure.com/10.0.0.6
   address=/.guestnotificationservice.azure.com/10.0.0.6
   address=/sts.windows.net/10.0.0.6
   address=/k8sconnectcsp.azureedge.net/10.0.0.6
   address=/.servicebus.windows.net/10.0.0.6
   address=/graph.microsoft.com/10.0.0.6
   address=/.arc.azure.net/10.0.0.6
   address=/.obo.arc.azure.com/10.0.0.6
   address=/linuxgeneva-microsoft.azurecr.io/10.0.0.6
   # Azure CLI installation endpoints
   address=/pypi.org/10.0.0.6
   address=/files.pythonhosted.org/10.0.0.6
   # Azure CLI endpoints
   address=/graph.windows.net/10.0.0.6
   address=/.azurecr.io/10.0.0.6
   address=/.blob.core.windows.net/10.0.0.6
   address=/.vault.azure.net/10.0.0.6
   # AIO endpoints
   address=/.blob.storage.azure.net/10.0.0.6
   
   # --address (and --server) work with IPv6 addresses too.
   address=/guestnotificationservice.azure.com/fe80::20d:60ff:fe36:f83
   address=/.guestnotificationservice.azure.com/fe80::20d:60ff:fe36:f833
   address=/.servicebus.windows.net/fe80::20d:60ff:fe36:f833
   address=/servicebus.windows.net/fe80::20d:60ff:fe36:f833
   
   listen-address=::1,127.0.0.1,10.102.0.72
   
   no-hosts
   

4. 또는 IPv4 주소 섹션에 address=/#/<IP of upper level Layered Network Management service>를 배치할 수 있습니다. 예시:

   strict-order
   
   # Add domains which you want to force to an IP address here.
   address=/#/<IP of upper level Layered Network Management service>
   
   # --address (and --server) work with IPv6 addresses too.
   address=/#/fe80::20d:60ff:fe36:f833
   
   listen-address=::1,127.0.0.1,10.102.0.72
   
   no-hosts
   

5. dnsmasq 서비스를 다시 시작하여 변경 내용을 적용합니다.

   sudo systemctl restart dnsmasq
   systemctl status dnsmasq