kubernetes-Istio구성정보

 

Istio Concept & Data Flow

1. Istio의 전체 Concept & Data Flow 
   
2. Concept
   1. ServiceMesh를 이용해 다양한 트래픽을 제어하는 역활
   2. http / websocket / http 등 트래픽 제어/관리에 대한 부하분산 수행
3. Component별 역활
   1. Data Plane
      • Service A / B에 구성된 Pod에는  Proxy용 Envoy Sidecar container가 배포
   2. Control Plane
      • Mixer - 정책 설정 / ACL / 인증 역활
      • Pilot : ingress routing, traffic mirroring, traffic shifting, canary deployments, circuit breaking, fault injection 역활 수행
      • Galley  : yaml을 istio용으로 변환 후 pilot으로 전송하고.
      • Citadel : 데이터 전송시 암호화 전송(TLS) 역활, 현재 내부 통신에는 암호화과정이 없어서 사용하지 않음
4. 구성시 유의사항
   • istio기반의 traffic shaping을 적용하려면, k8s에서 사용하는 ingres(or service nodeport)를 사용하면 적용이 안되고
     service는 clusterip로 적용하고, istio ingressgateway에서 port를 정의해주어야 함.

Servicemesh : MSA기반의 아키텍텨는 각각 개별기능을 수행하는데, 분산 서비스 배포의 크기와 복잡성이 증가하면서 시스템을 이해하고 관리하기 더 어려워지짐. 클러스터 내부와 외부의 통신 라우팅도 복잡해지기 때문에 이러한 복잡성을 줄기기 위해 프록시를 사용하여 모든 트래픽을 확인 후 사용자가 설정한 구성에 따라 어플리케이션 트래픽을 관리하는 역활.

Istio 설치 절차

1. 설치
   1

   $ curl -L https://istio.io/downloadIstio | sh -

   2

   $ cd istio-1.9.2

   3

   $ ./istioctl install --set profile=default

   4

   This will install the Istio 1.9.2  profile with ["Istio core"gateways"] components into the cluster. Proceed? (y/N) y

   5

   ✔ Istio core installed

   6

   ✔ Istiod installed

   7

   ✔ Ingress gateways installed

   8

   ✔ Installation complete
   
   
   # Istio기반의 proxy를 설치하기 위해서 namespace에 istio용 envoy 설치
   $ kubectl label namespace default istio-injection=enabled
   namespace/default labeled
   
2. istio profile별 제공 기능
   

   

   
   
3. istio 서비스 상태 확인
   1

   $ kubectl get all -n istio-system

   2

   NAME READY STATUS RESTARTS AGE

   3

   pod/istio-ingressgateway-78d7b9b7db-zpxxf 1/1 Running 2 19d

   4

   pod/istiod-85c8645bbc-4jkbj 1/1 Running 1 19d

   5

   ​

   6

   NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE

   7

   service/istio-ingressgateway LoadBalancer 10.233.14.72 <pending> 15021:31094/TCP,80:32134/TCP,443:31338/TCP,15012:30093/TCP,15443:30233/TCP 20d

   8

   service/istiod ClusterIP 10.233.43.248 <none> 15010/TCP,15012/TCP,443/TCP,15014/TCP 20d

   9

   service/tracing NodePort 10.233.13.45 <none> 16686:30008/TCP 17d

   10

   ​

   11

   NAME READY UP-TO-DATE AVAILABLE AGE

   12

   deployment.apps/istio-ingressgateway 1/1 1 1 20d

   13

   deployment.apps/istiod 1/1 1 1 20d

   14

   ​

   15

   NAME DESIRED CURRENT READY AGE

   16

   replicaset.apps/istio-ingressgateway-78d7b9b7db 1 1 1 20d

   17

   replicaset.apps/istiod-85c8645bbc 1 1 1 20d

   18

   ​

   19

   NAME REFERENCE TARGETS MINPODS MAXPODS REPLICAS AGE

   20

   horizontalpodautoscaler.autoscaling/istio-ingressgateway Deployment/istio-ingressgateway <unknown>/80% 1 5 1 20d

   21

   horizontalpodautoscaler.autoscaling/istiod Deployment/istiod <unknown>/80% 1 5 1 20d
4. Addon 설치
   1. Kiali : Istio 모니터링을 위한 대쉬보드
   2. Jager / zipkin : 분산 시스템 모니터링
      1. zipkin :  Twitter에서 개발한 오픈소스
      2. jaeger: Uber에서 개발하고 CNCF 프로젝트로 진행중인 오픈소스. (k8s환경에서는 jaeger가 효율적이라는...)
5. addon 설치
   1

   $ wget  http://172.21.115.91:28080/...

   2

   $ kubectl apply -f ./sample/

   3

   $ kubectl get all -n istio-system

   4

   NAME                                        READY   STATUS    RESTARTS   AGE

   5

   pod/istio-ingressgateway-78d7b9b7db-zpxxf   1/1     Running   2          19d

   6

   pod/istiod-85c8645bbc-4jkbj                 1/1     Running   1          19d

   7

   pod/jaeger-7f78b6fb65-jcrgz                 1/1     Running   1          17d

   8

   pod/kiali-dc84967d9-cqn8v                   1/1     Running   1          19d

   9

   pod/prometheus-7bfddb8dbf-vsddf             2/2     Running   4          19d

   10

   ​

   11

   NAME                           TYPE           CLUSTER-IP      EXTERNAL-IP   PORT(S)                                                                      AGE

   12

   service/istio-ingressgateway   LoadBalancer   10.233.14.72    <pending>     15021:31094/TCP,80:32134/TCP,443:31338/TCP,15012:30093/TCP,15443:30233/TCP   20d

   13

   service/istiod                 ClusterIP      10.233.43.248   <none>        15010/TCP,15012/TCP,443/TCP,15014/TCP                                        20d

   14

   service/jaeger-collector       ClusterIP      10.233.35.73    <none>        14268/TCP,14250/TCP                                                          17d

   15

   service/kiali                  NodePort       10.233.21.50    <none>        20001:30007/TCP,9090:31990/TCP                                               20d

   16

   service/prometheus             ClusterIP      10.233.24.217   <none>        9090/TCP                                                                     20d

   17

   service/tracing                NodePort       10.233.13.45    <none>        16686:30008/TCP                                                              17d

   18

   service/zipkin                 ClusterIP      10.233.34.17    <none>        9411/TCP                                                                     17d

   19

   ​

   20

   NAME                                   READY   UP-TO-DATE   AVAILABLE   AGE

   21

   deployment.apps/istio-ingressgateway   1/1     1            1           20d

   22

   deployment.apps/istiod                 1/1     1            1           20d

   23

   deployment.apps/jaeger                 1/1     1            1           17d

   24

   deployment.apps/kiali                  1/1     1            1           20d

   25

   deployment.apps/prometheus             1/1     1            1           20d

   26

   ​

   27

   NAME                                              DESIRED   CURRENT   READY   AGE

   28

   replicaset.apps/istio-ingressgateway-78d7b9b7db   1         1         1       20d

   29

   replicaset.apps/istiod-85c8645bbc                 1         1         1       20d

   30

   replicaset.apps/jaeger-7f78b6fb65                 1         1         1       17d

   31

   replicaset.apps/kiali-dc84967d9                   1         1         1       20d

   32

   replicaset.apps/prometheus-7bfddb8dbf             1         1         1       20d

   33

   ​

   34

   NAME                                                       REFERENCE                         TARGETS         MINPODS   MAXPODS   REPLICAS   AGE

   35

   horizontalpodautoscaler.autoscaling/istio-ingressgateway   Deployment/istio-ingressgateway   <unknown>/80%   1         5         1          20d

   36

   horizontalpodautoscaler.autoscaling/istiod                 Deployment/istiod                 <unknown>/80%   1         5         1          20d
6. 대쉬보드 외부 접속하기
   1. kiali :  http://{{서버IP}}:30007
   2. jaeger:  http://{{서버IP}}:30008
      1.삭제
      1

      $ istioctl x uninstall --purge

      2

      kubectl delete namespace istio-system
7. 시스템 설정을 위한 설정값 안내

   Component list

   항목	용도	기타
   gateway	http / tcp를 연결하기 위해 구성하는 로드밸런서
   virtualservice	service	게이트웨이에 바인딩 후 트래픽을 구성된 여러 엔드포인트로 전달 (트래픽 비율설정)
   virtualservice	version(a.k.a subset)	특정 서비스에 대해 어플리케이션 바이너리의 버전 변경을 실행하는 집합
   virtualservice	source	서비스를 호출하는 다운스트림용 클라이언트
   virtualservice	host	클라이언트가 서비스 연결할때 사용하는 주소
   destinationRule	라우팅 규칙을 처리한 후 연결할 네트워크 서비스를 설정
   tcproute	tcp트래픽에 대해 라우팅 규칙을 위한 조건 설정
   tcproute	match	활성화할 규칙조건
   tcproute	route	연결할 대상

8. Example yml
   1. gateway 설정 (tcp/30011에 대해 gateway 설정)
      1

      $vi gateway.yml

      2

      ---

      3

      apiVersion: networking.istio.io/v1beta1

      4

      kind: Gateway

      5

      metadata:

      6

        name: gateway

      7

        namespace: test

      8

      spec:

      9

        selector:

      10

          app: test

      11

        servers:

      12

          - hosts:

      13

              - '*'

      14

            port:

      15

              name: tcp

      16

              number: 30011

      17

              protocol: TCP
9. VirtualService 설정 (tcp/30011이 들어오면 service111-1, service111-2의 tcp/8080으로 연결하되  50%씩 트래픽 분할 처리)
   1

   $ vi vs.yaml

   2

   ---

   3

   apiVersion: networking.istio.io/v1beta1

   4

   kind: VirtualService

   5

   metadata:

   6

     name: test-vs

   7

     namespace: test

   8

   spec:

   9

     gateways:

   10

       - gateway

   11

     hosts:

   12

       - appid111

   13

     tcp:

   14

       - match:

   15

           - port: 30011

   16

         route:

   17

           - destination:

   18

               host: appid111-1

   19

               port:

   20

                 number: 3390

   21

               subset: v1

   22

             weight: 50

   23

           - destination:

   24

               host: appid111-2

   25

               port:

   26

                 number: 3390

   27

               subset: v2

   28

             weight: 50
10. destinationrule 설정 (service111에 대해 v1, v2 설정)
    1

    $ vi rule.yml

    2

    ---

    3

    apiVersion: networking.istio.io/v1beta1

    4

    kind: DestinationRule

    5

    metadata:

    6

      name: test-rule

    7

      namespace: test

    8

    spec:

    9

      host: appid111

    10

      subsets:

    11

        - labels:

    12

            version: 'v1'

    13

          name: v1

    14

        - labels:

    15

            version: 'v2'

    16

          name: v2

    17

      trafficPolicy:

    18

        loadBalancer:

    19

          simple: ROUND_ROBIN

    20

        tls:

    21

          mode: DISABLE

reference
https://istio.io/latest/docs/setup/getting-started/

http://igoni.kr/books/linux/page/kubernetes-istio