Usando o Couchbase Shell para Transformar e Escrever Dados

Eu tive a chance recentemente de ir para Riviera Dev, uma conferência fantástica de desenvolvedores que acontece perto da Riviera Francesa. A Couchbase patrocinou a conferência, nós trouxemos sorvete artesanal e local de leite de cabra. As pessoas ficaram felizes, as palestras foram interessantes, brindes foram distribuídos. Foi uma conferência incrível.

Quando patrocinamos conferências com essas atividades, costumamos perguntar aos participantes se podemos escanear seus crachás para enviar algumas atualizações do Couchbase. E foi o que fizemos. E às vezes a informação é fácil de recuperar, às vezes é um pouco complicada. Aqui, o código QR continha um VCard. O propósito deles é armazenar informações de contato, informações preciosas – como você sabe, os escaneamentos são a moeda das conferências. É o que nos permite voltar no ano seguinte com ainda mais sorvete.

De qualquer forma, acabamos coletando muitos VCards, mas era difícil colocá-los no formato de marketing onipresente, o CSV. Então, o que você faz quando precisa manipular dados? Você usa o Couchbase Shell.

Couchbase Shell, Shell Yeah!

Shell do Couchbase (cbsh) é um shell moderno, produtivo e divertido para o Couchbase Server e o Capella (nosso DBaaS em nuvem). O código-fonte e as instruções para instalá-lo estão disponíveis no repositório Leia-me.

Eu pessoalmente o instalei clonando-o e compilando-o:

Você precisa ter o Cadeia de ferramentas Rust instalado, porque o Couchbase Shell é escrito em Rust e baseado no meu shell favorito, nushell.

Uma vez instalado, você pode executá-lo digitando cbsh. Ele pedirá para você configurar uma conexão com o Couchbase primeiro. Se você estiver usando a interface de gerenciamento do Capella, você obterá todas as informações necessárias no Conectar guia.

 

Nushell <3 JSON

Para constar, é assim que o meu VCard se parece:

Há muitas bibliotecas Node para transformar isso em JSON, eu usei vcard-json. Então, se eu executar node vcard2json.js, recebo um array JSON com todo o conteúdo do VCard como um objeto JSON.

O que é ótimo, mas como isso pode ser manipulado facilmente? Sendo o cbsh baseado no nushell, nós obtemos todas as coisas boas que vêm com ele, como o do json comando, ou o onde filtro, e o JSON selecionar. Então vamos ver como funcionaria passo a passo, com a saída de dados estruturados, também cortesia do nushell:

 

 

 

 

Now that the data is ready and cleaned-up, what can I do with it ? I could write this to a CSV file like this:

I could also write it to Couchbase. I have my credential all set already. The first command chooses the bucket and default scope and collection. The second one iterates through the JSON array, generates a random UUID, wraps the content under a content column and adds an ID column with the generated UUID, then inserts the result in Couchbase.

 

And just to make sure it’s working, the data can be queried with SQL++ directly:

So there you are, a practical example of using Couchbase Shell to manipulate Data, transform it and import it to Couchabse. But there are plenty of other uses for it! What’s your favorite?