Clúster Kubernetes Multimaster en Amazon usando Kops

Introducción a Kubernetes 1.4 con Spring Boot y Couchbase explica cómo empezar a utilizar Kubernetes 1.4 en Amazon Web Services. A
El servicio Couchbase se crea en el clúster y una aplicación Spring Boot almacena un documento JSON en la base de datos. Utiliza kube-up.sh de la descarga binaria de Kubernetes en github.com/kubernetes/kubernetes/releases/download/v1.4.0/kubernetes.tar.gz  para iniciar el clúster. Este script es capaz de crear un clúster Kubernetes con un único maestro. Este es un defecto fundamental de las aplicaciones distribuidas en las que el maestro se convierte en un único punto de fallo.

Conozca kops - abreviatura de Kubernetes Operations.

Esta es la forma más sencilla de poner en marcha un clúster Kubernetes de alta disponibilidad. El sitio kubectl es la CLI para ejecutar comandos contra clusters en ejecución. Piensa en kops como kubectl para cluster.
Este blog mostrará cómo crear un clúster Kubernetes de alta disponibilidad en Amazon utilizando kops. Y una vez creado el cluster, creará un servicio Couchbase en él y ejecutará una aplicación Spring Boot para almacenar el documento JSON
en la base de datos.

Muchas gracias a justinsbsarahz, razic, jaygorrell, shrugs, bkpandey y otros en Canal Slack de Kubernetes ¡por ayudarme con los detalles!

Descargar kops y kubectl

• Descargar Última publicación de Kops. Este blog ha sido probado con 1.4.1 en OSX.Conjunto completo de comandos para
  kops se puede ver:
  
  kops-darwin-amd64 --help kops is kubernetes ops. It allows you to create, destroy, upgrade and maintain clusters. Usage: kops [command] Available Commands: create create resources delete delete clusters describe describe objects edit edit items export export clusters/kubecfg get list or get objects import import clusters rolling-update rolling update clusters secrets Manage secrets & keys toolbox Misc infrequently used commands update update clusters upgrade upgrade clusters version Print the client version information Flags: --alsologtostderr log to standard error as well as files --config string config file (default is $HOME/.kops.yaml) --log_backtrace_at traceLocation when logging hits line file:N, emit a stack trace (default :0) --log_dir string If non-empty, write log files in this directory --logtostderr log to standard error instead of files (default false) --name string Name of cluster --state string Location of state storage --stderrthreshold severity logs at or above this threshold go to stderr (default 2) -v, --v Level log level for V logs --vmodule moduleSpec comma-separated list of pattern=N settings for file-filtered logging Use "kops [command] --help" for more information about a command.

  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35

  kops-darwin-amd64 --help kops is kubernetes ops. It allows you to create, destroy, upgrade and maintain clusters.   Usage:   kops [command]   Available Commands:   create         create resources   delete         delete clusters   describe       describe objects   edit           edit items   export         export clusters/kubecfg   get            list or get objects   import         import clusters   rolling-update rolling update clusters   secrets        Manage secrets & keys   toolbox        Misc infrequently used commands   update         update clusters   upgrade        upgrade clusters   version        Print the client version information   Flags:       --alsologtostderr                  log to standard error as well as files       --config string                    config file (default is $HOME/.kops.yaml)       --log_backtrace_at traceLocation   when logging hits line file:N, emit a stack trace (default :0)       --log_dir string                   If non-empty, write log files in this directory       --logtostderr                      log to standard error instead of files (default false)       --name string                      Name of cluster       --state string                     Location of state storage       --stderrthreshold severity         logs at or above this threshold go to stderr (default 2)   -v, --v Level                          log level for V logs       --vmodule moduleSpec               comma-separated list of pattern=N settings for file-filtered logging   Use "kops [command] --help" for more information about a command.

• Descargar kubectl:
  
  curl -Lo kubectl https://storage.googleapis.com/kubernetes-release/release/v1.4.1/bin/darwin/amd64/kubectl && chmod +x kubectl

  1	curl -Lo kubectl https://storage.googleapis.com/kubernetes-release/release/v1.4.1/bin/darwin/amd64/kubectl && chmod +x kubectl

•  Incluya kubectl en su SENDERO.

Crear registros Bucket y NS en Amazon

Por el momento, hay que realizar algunos ajustes, pero esperamos que se solucionen en las próximas versiones. Crear un clúster en AWS proporcionan pasos detallados y más antecedentes.
Esto es lo que siguió el blog:

• Elija un dominio donde se alojará el clúster Kubernetes. Este blog utiliza kubernetes.arungupta.me dominio. Puede elegir un dominio de nivel superior o un subdominio.
• Ruta 53 de Amazon es un servicio DNS altamente disponible y escalable. Acceda a Consola Amazon y creó un zona alojada para este dominio utilizando el servicio Route 53.
  
  Zona creada parece:
  
  Los valores indicados en el Valor son importantes, ya que se utilizarán más adelante para crear registros NS.
• Crear un bucket S3 utilizando Consola Amazon para almacenar la configuración del cluster - esto se llama tienda estatal.
  
• El dominio kubernetes.arungupta.me está alojada en GoDaddy. Para cada valor mostrado en la columna Valor de la zona alojada en Route53, cree un registro NS utilizando Centro de control de dominios de GoDaddy para
  Seleccione el tipo de registro:
  
  Para cada valor, añada el registro como se muestra:
  
  El conjunto completo de registros tiene el siguiente aspecto:
  

Iniciar clúster multimaster Kubernetes

Entendamos un poco las regiones y zonas de Amazon:

Amazon EC2 se hospeda en varias ubicaciones de todo el mundo. Estas ubicaciones se componen de regiones y zonas de disponibilidad. Cada región es un área geográfica independiente. Cada región tiene varias ubicaciones aisladas conocidas como zonas de disponibilidad.

Se puede crear un clúster Kubernetes de alta disponibilidad entre zonas, pero no entre regiones.

• Averigüe las zonas de disponibilidad dentro de una región:
  
  aws ec2 describe-availability-zones --region us-west-2 { "AvailabilityZones": [ { "State": "available", "RegionName": "us-west-2", "Messages": [], "ZoneName": "us-west-2a" }, { "State": "available", "RegionName": "us-west-2", "Messages": [], "ZoneName": "us-west-2b" }, { "State": "available", "RegionName": "us-west-2", "Messages": [], "ZoneName": "us-west-2c" } ] }

  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23

  aws ec2 describe-availability-zones --region us-west-2 {     "AvailabilityZones": [         {             "State": "available",             "RegionName": "us-west-2",             "Messages": [],             "ZoneName": "us-west-2a"         },         {             "State": "available",             "RegionName": "us-west-2",             "Messages": [],             "ZoneName": "us-west-2b"         },         {             "State": "available",             "RegionName": "us-west-2",             "Messages": [],             "ZoneName": "us-west-2c"         }     ] }

• Crear un clúster multimaestro:
  
  kops-darwin-amd64 create cluster --name=kubernetes.arungupta.me --cloud=aws --zones=us-west-2a,us-west-2b,us-west-2c --master-size=m4.large --node-count=3 --node-size=m4.2xlarge --master-zones=us-west-2a,us-west-2b,us-west-2c --state=s3://kops-couchbase --yes

  1	kops-darwin-amd64 create cluster --name=kubernetes.arungupta.me --cloud=aws --zones=us-west-2a,us-west-2b,us-west-2c --master-size=m4.large --node-count=3 --node-size=m4.2xlarge --master-zones=us-west-2a,us-west-2b,us-west-2c --state=s3://kops-couchbase --yes

  
  La mayoría de los interruptores se explican por sí mismos. Algunos interruptores necesitan un poco de explicación:
  • Especificación de varias zonas mediante --master-zones (debe ser un número impar) crear múltiples maestros a través de AZ
  • --cloud=aws es opcional si la nube puede deducirse de las zonas
  • --sí se utiliza para especificar la creación inmediata del cluster. De lo contrario, solo se almacena el estado en el bucket y el clúster debe crearse por separado.

  Se puede ver el conjunto completo de interruptores CLI:

  ./kops-darwin-amd64 create cluster --help Creates a k8s cluster. Usage: kops create cluster [flags] Flags: --admin-access string Restrict access to admin endpoints (SSH, HTTPS) to this CIDR. If not set, access will not be restricted by IP. --associate-public-ip Specify --associate-public-ip=[true|false] to enable/disable association of public IP for master ASG and nodes. Default is 'true'. (default true) --channel string Channel for default versions and configuration to use (default "stable") --cloud string Cloud provider to use - gce, aws --dns-zone string DNS hosted zone to use (defaults to last two components of cluster name) --image string Image to use --kubernetes-version string Version of kubernetes to run (defaults to version in channel) --master-size string Set instance size for masters --master-zones string Zones in which to run masters (must be an odd number) --model string Models to apply (separate multiple models with commas) (default "config,proto,cloudup") --network-cidr string Set to override the default network CIDR --networking string Networking mode to use. kubenet (default), classic, external. (default "kubenet") --node-count int Set the number of nodes --node-size string Set instance size for nodes --out string Path to write any local output --project string Project to use (must be set on GCE) --ssh-public-key string SSH public key to use (default "~/.ssh/id_rsa.pub") --target string Target - direct, terraform (default "direct") --vpc string Set to use a shared VPC --yes Specify --yes to immediately create the cluster --zones string Zones in which to run the cluster Global Flags: --alsologtostderr log to standard error as well as files --config string config file (default is $HOME/.kops.yaml) --log_backtrace_at traceLocation when logging hits line file:N, emit a stack trace (default :0) --log_dir string If non-empty, write log files in this directory --logtostderr log to standard error instead of files (default false) --name string Name of cluster --state string Location of state storage --stderrthreshold severity logs at or above this threshold go to stderr (default 2) -v, --v Level log level for V logs --vmodule moduleSpec comma-separated list of pattern=N settings for file-filtered logging

  1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40

  ./kops-darwin-amd64 create cluster --help Creates a k8s cluster.   Usage:   kops create cluster [flags]   Flags:       --admin-access string         Restrict access to admin endpoints (SSH, HTTPS) to this CIDR.  If not set, access will not be restricted by IP.       --associate-public-ip         Specify --associate-public-ip=[true|false] to enable/disable association of public IP for master ASG and nodes. Default is 'true'. (default true)       --channel string              Channel for default versions and configuration to use (default "stable")       --cloud string                Cloud provider to use - gce, aws       --dns-zone string             DNS hosted zone to use (defaults to last two components of cluster name)       --image string                Image to use       --kubernetes-version string   Version of kubernetes to run (defaults to version in channel)       --master-size string          Set instance size for masters       --master-zones string         Zones in which to run masters (must be an odd number)       --model string                Models to apply (separate multiple models with commas) (default "config,proto,cloudup")       --network-cidr string         Set to override the default network CIDR       --networking string           Networking mode to use.  kubenet (default), classic, external. (default "kubenet")       --node-count int              Set the number of nodes       --node-size string            Set instance size for nodes       --out string                  Path to write any local output       --project string              Project to use (must be set on GCE)       --ssh-public-key string       SSH public key to use (default "~/.ssh/id_rsa.pub")       --target string               Target - direct, terraform (default "direct")       --vpc string                  Set to use a shared VPC       --yes                         Specify --yes to immediately create the cluster       --zones string                Zones in which to run the cluster   Global Flags:       --alsologtostderr                  log to standard error as well as files       --config string                    config file (default is $HOME/.kops.yaml)       --log_backtrace_at traceLocation   when logging hits line file:N, emit a stack trace (default :0)       --log_dir string                   If non-empty, write log files in this directory       --logtostderr                      log to standard error instead of files (default false)       --name string                      Name of cluster       --state string                     Location of state storage       --stderrthreshold severity         logs at or above this threshold go to stderr (default 2)   -v, --v Level                          log level for V logs       --vmodule moduleSpec               comma-separated list of pattern=N settings for file-filtered logging

• Una vez creado el clúster, obtenga más detalles sobre el clúster:
  kubectl cluster-info Kubernetes master is running at https://api.kubernetes.arungupta.me KubeDNS is running at https://api.kubernetes.arungupta.me/api/v1/proxy/namespaces/kube-system/services/kube-dns To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.

  1 2 3 4 5

  kubectl cluster-info Kubernetes master is running at https://api.kubernetes.arungupta.me KubeDNS is running at https://api.kubernetes.arungupta.me/api/v1/proxy/namespaces/kube-system/services/kube-dns   To further debug and diagnose cluster problems, use 'kubectl cluster-info dump'.

• Compruebe la versión del cliente y del servidor del clúster:
  kubectl version Client Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.1", GitCommit:"33cf7b9acbb2cb7c9c72a10d6636321fb180b159", GitTreeState:"clean", BuildDate:"2016-10-10T18:19:49Z", GoVersion:"go1.7.1", Compiler:"gc", Platform:"darwin/amd64"} Server Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.3", GitCommit:"4957b090e9a4f6a68b4a40375408fdc74a212260", GitTreeState:"clean", BuildDate:"2016-10-16T06:20:04Z", GoVersion:"go1.6.3", Compiler:"gc", Platform:"linux/amd64"}

  1 2 3

  kubectl version Client Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.1", GitCommit:"33cf7b9acbb2cb7c9c72a10d6636321fb180b159", GitTreeState:"clean", BuildDate:"2016-10-10T18:19:49Z", GoVersion:"go1.7.1", Compiler:"gc", Platform:"darwin/amd64"} Server Version: version.Info{Major:"1", Minor:"4", GitVersion:"v1.4.3", GitCommit:"4957b090e9a4f6a68b4a40375408fdc74a212260", GitTreeState:"clean", BuildDate:"2016-10-16T06:20:04Z", GoVersion:"go1.6.3", Compiler:"gc", Platform:"linux/amd64"}

• Compruebe todos los nodos del clúster:
  kubectl get nodes NAME STATUS AGE ip-172-20-111-151.us-west-2.compute.internal Ready 1h ip-172-20-116-40.us-west-2.compute.internal Ready 1h ip-172-20-48-41.us-west-2.compute.internal Ready 1h ip-172-20-49-105.us-west-2.compute.internal Ready 1h ip-172-20-80-233.us-west-2.compute.internal Ready 1h ip-172-20-82-93.us-west-2.compute.internal Ready 1h

  1 2 3 4 5 6 7 8

  kubectl get nodes NAME                                           STATUS    AGE ip-172-20-111-151.us-west-2.compute.internal   Ready     1h ip-172-20-116-40.us-west-2.compute.internal    Ready     1h ip-172-20-48-41.us-west-2.compute.internal     Ready     1h ip-172-20-49-105.us-west-2.compute.internal    Ready     1h ip-172-20-80-233.us-west-2.compute.internal    Ready     1h ip-172-20-82-93.us-west-2.compute.internal     Ready     1h

  O averigua sólo los nodos maestros:

  kubectl get nodes -l kubernetes.io/role=master NAME STATUS AGE ip-172-20-111-151.us-west-2.compute.internal Ready 1h ip-172-20-48-41.us-west-2.compute.internal Ready 1h ip-172-20-82-93.us-west-2.compute.internal Ready 1h

  1 2 3 4 5

  kubectl get nodes -l kubernetes.io/role=master NAME                                           STATUS    AGE ip-172-20-111-151.us-west-2.compute.internal   Ready     1h ip-172-20-48-41.us-west-2.compute.internal     Ready     1h ip-172-20-82-93.us-west-2.compute.internal     Ready     1h

• Comprueba todos los grupos:
  kops-darwin-amd64 get clusters --state=s3://kops-couchbase NAME CLOUD ZONES kubernetes.arungupta.me aws us-west-2a,us-west-2b,us-west-2c

  1 2 3

  kops-darwin-amd64 get clusters --state=s3://kops-couchbase NAME   CLOUD ZONES kubernetes.arungupta.me aws us-west-2a,us-west-2b,us-west-2c

Complemento Kubernetes Dashboard

Por defecto, un clúster creado usando kops no tiene el panel de control UI. Pero esto se puede añadir como un complemento:

Ahora se pueden ver todos los detalles sobre el clúster:

Y el dashboard de Kubernetes UI está en la URL mostrada. En nuestro caso, es https://api.kubernetes.arungupta.me/ui y parece:

Las credenciales para acceder a este cuadro de mandos pueden obtenerse utilizando la función kubectl config vista comando. Los valores se muestran como:

Despliegue del servicio Couchbase

Como se explica en Introducción a Kubernetes 1.4 con Spring Boot y Couchbasevamos a ejecutar un servicio Couchbase:

Este archivo de configuración se encuentra en github.com/arun-gupta/kubernetes-java-sample/blob/master/maven/couchbase-service.yml. Obtenga la lista de servicios:

Describa el servicio:

Coge las vainas:

Ejecutar aplicación Spring Boot

La aplicación Spring Boot se ejecuta contra el servicio Couchbase y almacena en él un documento JSON. Inicia la aplicación Spring Boot:

Este archivo de configuración se encuentra en github.com/arun-gupta/kubernetes-java-sample/blob/master/maven/bootiful-couchbase.yml. Ver lista de todas las vainas:

Compruebe los registros de la vaina completa:

El salpicadero actualizado tiene ahora el siguiente aspecto:

Eliminar el clúster Kubernetes

El clúster Kubernetes se puede eliminar como:

couchbase.com/contenedores proporcionan más detalles sobre cómo ejecutar Couchbase en diferentes marcos de contenedores. Más información sobre Couchbase:

• Portal para desarrolladores de Couchbase
• Foros de Couchbase
• @couchbasedev o @couchbase