Cluster Kubernetes Multimaster na Amazon usando Kops

Primeiros passos com o Kubernetes 1.4 usando Spring Boot e Couchbase explica como começar a usar o Kubernetes 1.4 no Amazon Web Services. A
O serviço Couchbase é criado no cluster e um aplicativo Spring Boot armazena um documento JSON no banco de dados. Ele usa kube-up.sh a partir do download do binário do Kubernetes em github.com/kubernetes/kubernetes/releases/download/v1.4.0/kubernetes.tar.gz  para iniciar o cluster. Esse script é capaz de criar um cluster do Kubernetes apenas com um único mestre. Essa é uma falha fundamental dos aplicativos distribuídos, em que o mestre se torna um ponto único de falha.

Conheça kops - abreviação de Kubernetes Operations.

Essa é a maneira mais fácil de colocar um cluster Kubernetes altamente disponível em funcionamento. O kubectl é a CLI para executar comandos em clusters em execução. Pense em kops como kubectl para cluster.
Este blog mostrará como criar um cluster Kubernetes altamente disponível na Amazon usando kops. Depois que o cluster for criado, ele criará um serviço Couchbase nele e executará um aplicativo Spring Boot para armazenar o documento JSON
no banco de dados.

Muito obrigado a justinsb, sarahz, lâminas, jaygorrell, shrugs, bkpandey e outros em Canal do Kubernetes no Slack por me ajudar com os detalhes!

Faça o download do kops e do kubectl

• Baixar Última versão do Kops. Este blog foi testado com 1.4.1 no OSX.Conjunto completo de comandos para
  kops pode ser visto:
  
  kops-darwin-amd64 --help kops is kubernetes ops. It allows you to create, destroy, upgrade and maintain clusters. Usage: kops [command] Available Commands: create create resources delete delete clusters describe describe objects edit edit items export export clusters/kubecfg get list or get objects import import clusters rolling-update rolling update clusters secrets Manage secrets & keys toolbox Misc infrequently used commands update update clusters upgrade upgrade clusters version Print the client version information Flags: --alsologtostderr log to standard error as well as files --config string config file (default is $HOME/.kops.yaml) --log_backtrace_at traceLocation when logging hits line file:N, emit a stack trace (default :0) --log_dir string If non-empty, write log files in this directory --logtostderr log to standard error instead of files (default false) --name string Name of cluster --state string Location of state storage --stderrthreshold severity logs at or above this threshold go to stderr (default 2) -v, --v Level log level for V logs --vmodule moduleSpec comma-separated list of pattern=N settings for file-filtered logging Use "kops [command] --help" for more information about a command.

  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35

  kops-darwin-amd64 --help kops is kubernetes ops. It allows you to create, destroy, upgrade and maintain clusters.   Usage:   kops [command]   Available Commands:   create         create resources   delete         delete clusters   describe       describe objects   edit           edit items   export         export clusters/kubecfg   get            list or get objects   import         import clusters   rolling-update rolling update clusters   secrets        Manage secrets & keys   toolbox        Misc infrequently used commands   update         update clusters   upgrade        upgrade clusters   version        Print the client version information   Flags:       --alsologtostderr                  log to standard error as well as files       --config string                    config file (default is $HOME/.kops.yaml)       --log_backtrace_at traceLocation   when logging hits line file:N, emit a stack trace (default :0)       --log_dir string                   If non-empty, write log files in this directory       --logtostderr                      log to standard error instead of files (default false)       --name string                      Name of cluster       --state string                     Location of state storage       --stderrthreshold severity         logs at or above this threshold go to stderr (default 2)   -v, --v Level                          log level for V logs       --vmodule moduleSpec               comma-separated list of pattern=N settings for file-filtered logging   Use "kops [command] --help" for more information about a command.

• Baixar kubectl:
  
  curl -Lo kubectl https://storage.googleapis.com/kubernetes-release/release/v1.4.1/bin/darwin/amd64/kubectl && chmod +x kubectl

  1	curl -Lo kubectl https://storage.googleapis.com/kubernetes-release/release/v1.4.1/bin/darwin/amd64/kubectl && chmod +x kubectl

•  Incluir kubectl em seu PATH.

Criar registros de Bucket e NS na Amazon

No momento, há um pouco de configuração envolvida, e esperamos que isso seja resolvido nas próximas versões. Criação de um cluster no AWS fornecem etapas detalhadas e mais informações.
Aqui está o que o blog seguiu:

• Escolha um domínio onde o cluster do Kubernetes será hospedado. Este blog usa kubernetes.arungupta.me domínio. Você pode escolher um domínio de nível superior ou um subdomínio.
• Amazon Route 53 é um serviço de DNS altamente disponível e dimensionável. Faça login no Console da Amazon e criou um zona hospedada para esse domínio usando o serviço Route 53.
  
  A zona criada tem a mesma aparência:
  
  Os valores mostrados no Valor são importantes, pois serão usadas posteriormente para criar registros NS.
• Crie um bucket S3 usando Console da Amazon para armazenar a configuração do cluster - isso é chamado de loja estatal.
  
• O domínio kubernetes.arungupta.me está hospedado na GoDaddy. Para cada valor mostrado na coluna Value (Valor) da zona hospedada no Route53, crie um registro NS usando Centro de Controle de Domínios da GoDaddy para
  Selecione o tipo de registro:
  
  Para cada valor, adicione o registro conforme mostrado:
  
  O conjunto completo de registros tem a seguinte aparência:
  

Iniciar o cluster multimaster do Kubernetes

Vamos entender um pouco sobre as regiões e zonas da Amazônia:

O Amazon EC2 está hospedado em vários locais em todo o mundo. Esses locais são compostos por regiões e zonas de disponibilidade. Cada região é uma área geográfica separada. Cada região tem vários locais isolados, conhecidos como Zonas de Disponibilidade.

Um cluster Kubernetes altamente disponível pode ser criado entre zonas, mas não entre regiões.

• Descubra as zonas de disponibilidade em uma região:
  
  aws ec2 describe-availability-zones --region us-west-2 { "AvailabilityZones": [ { "State": "available", "RegionName": "us-west-2", "Messages": [], "ZoneName": "us-west-2a" }, { "State": "available", "RegionName": "us-west-2", "Messages": [], "ZoneName": "us-west-2b" }, { "State": "available", "RegionName": "us-west-2", "Messages": [], "ZoneName": "us-west-2c" } ] }

  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23

  aws ec2 describe-availability-zones --region us-west-2 {     "AvailabilityZones": [         {             "State": "available",             "RegionName": "us-west-2",             "Messages": [],             "ZoneName": "us-west-2a"         },         {             "State": "available",             "RegionName": "us-west-2",             "Messages": [],             "ZoneName": "us-west-2b"         },         {             "State": "available",             "RegionName": "us-west-2",             "Messages": [],             "ZoneName": "us-west-2c"         }     ] }

• Crie um cluster com vários mestres:
  
  kops-darwin-amd64 create cluster --name=kubernetes.arungupta.me --cloud=aws --zones=us-west-2a,us-west-2b,us-west-2c --master-size=m4.large --node-count=3 --node-size=m4.2xlarge --master-zones=us-west-2a,us-west-2b,us-west-2c --state=s3://kops-couchbase --yes

  1	kops-darwin-amd64 create cluster --name=kubernetes.arungupta.me --cloud=aws --zones=us-west-2a,us-west-2b,us-west-2c --master-size=m4.large --node-count=3 --node-size=m4.2xlarge --master-zones=us-west-2a,us-west-2b,us-west-2c --state=s3://kops-couchbase --yes

  
  A maioria dos switches é autoexplicativa. Alguns switches precisam de um pouco de explicação:
  • Especificação de várias zonas usando --zonas-mestre (deve ser um número ímpar) criar vários mestres no AZ
  • --cloud=aws é opcional se a nuvem puder ser inferida das zonas
  • -sim é usado para especificar a criação imediata do cluster. Caso contrário, somente o estado é armazenado no bucket, e o cluster precisa ser criado separadamente.

  O conjunto completo de switches da CLI pode ser visto:

  ./kops-darwin-amd64 create cluster --help Creates a k8s cluster. Usage: kops create cluster [flags] Flags: --admin-access string Restrict access to admin endpoints (SSH, HTTPS) to this CIDR. If not set, access will not be restricted by IP. --associate-public-ip Specify --associate-public-ip=[true|false] to enable/disable association of public IP for master ASG and nodes. Default is 'true'. (default true) --channel string Channel for default versions and configuration to use (default "stable") --cloud string Cloud provider to use - gce, aws --dns-zone string DNS hosted zone to use (defaults to last two components of cluster name) --image string Image to use --kubernetes-version string Version of kubernetes to run (defaults to version in channel) --master-size string Set instance size for masters --master-zones string Zones in which to run masters (must be an odd number) --model string Models to apply (separate multiple models with commas) (default "config,proto,cloudup") --network-cidr string Set to override the default network CIDR --networking string Networking mode to use. kubenet (default), classic, external. (default "kubenet") --node-count int Set the number of nodes --node-size string Set instance size for nodes --out string Path to write any local output --project string Project to use (must be set on GCE) --ssh-public-key string SSH public key to use (default "~/.ssh/id_rsa.pub") --target string Target - direct, terraform (default "direct") --vpc string Set to use a shared VPC --yes Specify --yes to immediately create the cluster --zones string Zones in which to run the cluster Global Flags: --alsologtostderr log to standard error as well as files --config string config file (default is $HOME/.kops.yaml) --log_backtrace_at traceLocation when logging hits line file:N, emit a stack trace (default :0) --log_dir string If non-empty, write log files in this directory --logtostderr log to standard error instead of files (default false) --name string Name of cluster --state string Location of state storage --stderrthreshold severity logs at or above this threshold go to stderr (default 2) -v, --v Level log level for V logs --vmodule moduleSpec comma-separated list of pattern=N settings for file-filtered logging

  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40

  ./kops-darwin-amd64 create cluster --help Creates a k8s cluster.   Usage:   kops create cluster [flags]   Flags:       --admin-access string         Restrict access to admin endpoints (SSH, HTTPS) to this CIDR.  If not set, access will not be restricted by IP.       --associate-public-ip         Specify --associate-public-ip=[true|false] to enable/disable association of public IP for master ASG and nodes. Default is 'true'. (default true)       --channel string              Channel for default versions and configuration to use (default "stable")       --cloud string                Cloud provider to use - gce, aws       --dns-zone string             DNS hosted zone to use (defaults to last two components of cluster name)       --image string                Image to use       --kubernetes-version string   Version of kubernetes to run (defaults to version in channel)       --master-size string          Set instance size for masters       --master-zones string         Zones in which to run masters (must be an odd number)       --model string                Models to apply (separate multiple models with commas) (default "config,proto,cloudup")       --network-cidr string         Set to override the default network CIDR       --networking string           Networking mode to use.  kubenet (default), classic, external. (default "kubenet")       --node-count int              Set the number of nodes       --node-size string            Set instance size for nodes       --out string                  Path to write any local output       --project string              Project to use (must be set on GCE)       --ssh-public-key string       SSH public key to use (default "~/.ssh/id_rsa.pub")       --target string               Target - direct, terraform (default "direct")       --vpc string                  Set to use a shared VPC       --yes                         Specify --yes to immediately create the cluster       --zones string                Zones in which to run the cluster   Global Flags:       --alsologtostderr                  log to standard error as well as files       --config string                    config file (default is $HOME/.kops.yaml)       --log_backtrace_at traceLocation   when logging hits line file:N, emit a stack trace (default :0)       --log_dir string                   If non-empty, write log files in this directory       --logtostderr                      log to standard error instead of files (default false)       --name string                      Name of cluster       --state string                     Location of state storage       --stderrthreshold severity         logs at or above this threshold go to stderr (default 2)   -v, --v Level                          log level for V logs       --vmodule moduleSpec               comma-separated list of pattern=N settings for file-filtered logging

• Depois que o cluster for criado, obtenha mais detalhes sobre o cluster:
  kubectl cluster-info Kubernetes master is running at https://api.kubernetes.arungupta.me KubeDNS is running at https://api.kubernetes.arungupta.me/api/v1/proxy/namespaces/kube-system/services/kube-dns To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.

  1 2 3 4 5

  kubectl cluster-info Kubernetes master is running at https://api.kubernetes.arungupta.me KubeDNS is running at https://api.kubernetes.arungupta.me/api/v1/proxy/namespaces/kube-system/services/kube-dns   To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.

• Verifique a versão do cliente e do servidor do cluster:
  kubectl version Client Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.1", GitCommit:"33cf7b9acbb2cb7c9c72a10d6636321fb180b159", GitTreeState:"clean", BuildDate:"2016-10-10T18:19:49Z", GoVersion:"go1.7.1", Compiler:"gc", Platform:"darwin/amd64"} Server Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.3", GitCommit:"4957b090e9a4f6a68b4a40375408fdc74a212260", GitTreeState:"clean", BuildDate:"2016-10-16T06:20:04Z", GoVersion:"go1.6.3", Compiler:"gc", Platform:"linux/amd64"}

  1 2 3

  kubectl version Client Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.1", GitCommit:"33cf7b9acbb2cb7c9c72a10d6636321fb180b159", GitTreeState:"clean", BuildDate:"2016-10-10T18:19:49Z", GoVersion:"go1.7.1", Compiler:"gc", Platform:"darwin/amd64"} Server Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.3", GitCommit:"4957b090e9a4f6a68b4a40375408fdc74a212260", GitTreeState:"clean", BuildDate:"2016-10-16T06:20:04Z", GoVersion:"go1.6.3", Compiler:"gc", Platform:"linux/amd64"}

• Verifique todos os nós do cluster:
  kubectl get nodes NAME STATUS AGE ip-172-20-111-151.us-west-2.compute.internal Ready 1h ip-172-20-116-40.us-west-2.compute.internal Ready 1h ip-172-20-48-41.us-west-2.compute.internal Ready 1h ip-172-20-49-105.us-west-2.compute.internal Ready 1h ip-172-20-80-233.us-west-2.compute.internal Ready 1h ip-172-20-82-93.us-west-2.compute.internal Ready 1h

  1 2 3 4 5 6 7 8

  kubectl get nodes NAME                                           STATUS    AGE ip-172-20-111-151.us-west-2.compute.internal   Ready     1h ip-172-20-116-40.us-west-2.compute.internal    Ready     1h ip-172-20-48-41.us-west-2.compute.internal     Ready     1h ip-172-20-49-105.us-west-2.compute.internal    Ready     1h ip-172-20-80-233.us-west-2.compute.internal    Ready     1h ip-172-20-82-93.us-west-2.compute.internal     Ready     1h

  Ou descobrir apenas os nós mestres:

  kubectl get nodes -l kubernetes.io/role=master NAME STATUS AGE ip-172-20-111-151.us-west-2.compute.internal Ready 1h ip-172-20-48-41.us-west-2.compute.internal Ready 1h ip-172-20-82-93.us-west-2.compute.internal Ready 1h

  1 2 3 4 5

  kubectl get nodes -l kubernetes.io/role=master NAME                                           STATUS    AGE ip-172-20-111-151.us-west-2.compute.internal   Ready     1h ip-172-20-48-41.us-west-2.compute.internal     Ready     1h ip-172-20-82-93.us-west-2.compute.internal     Ready     1h

• Verifique todos os clusters:
  kops-darwin-amd64 get clusters --state=s3://kops-couchbase NAME CLOUD ZONES kubernetes.arungupta.me aws us-west-2a,us-west-2b,us-west-2c

  1 2 3

  kops-darwin-amd64 get clusters --state=s3://kops-couchbase NAME   CLOUD ZONES kubernetes.arungupta.me aws us-west-2a,us-west-2b,us-west-2c

Complemento do painel do Kubernetes

Por padrão, um cluster criado com o kops não tem o painel da interface do usuário. Mas ele pode ser adicionado como um complemento:

Agora, os detalhes completos sobre o cluster podem ser vistos:

E o painel da interface do usuário do Kubernetes está no URL mostrado. No nosso caso, ele é https://api.kubernetes.arungupta.me/ui e se parece com isso:

As credenciais para acessar esse painel podem ser obtidas usando o Visualização de configuração do kubectl comando. Os valores são mostrados da seguinte forma:

Implantar o serviço Couchbase

Conforme explicado em Primeiros passos com o Kubernetes 1.4 usando Spring Boot e CouchbaseVamos executar um serviço do Couchbase:

Esse arquivo de configuração está em github.com/arun-gupta/kubernetes-java-sample/blob/master/maven/couchbase-service.yml. Obtenha a lista de serviços:

Descreva o serviço:

Obtenha as cápsulas:

Executar o aplicativo Spring Boot

O aplicativo Spring Boot é executado no serviço Couchbase e armazena um documento JSON nele. Inicie o aplicativo Spring Boot:

Esse arquivo de configuração está em github.com/arun-gupta/kubernetes-java-sample/blob/master/maven/bootiful-couchbase.yml. Veja a lista de todos os pods:

Verifique os registros do pod completo:

O painel atualizado agora tem a seguinte aparência:

Excluir o cluster do Kubernetes

O cluster do Kubernetes pode ser excluído como:

couchbase.com/containers fornecem mais detalhes sobre como executar o Couchbase em diferentes estruturas de contêineres. Mais informações sobre o Couchbase:

• Portal do desenvolvedor do Couchbase
• Fóruns do Couchbase
• @couchbasedev ou @couchbase