Come posso convertire il mio JSON in CSV usando jq?

ho i seguenti dati JSON:Come posso convertire il mio JSON in CSV usando jq?

{"id":"111","case":"Y","custom":{"speech invoked":"no","input method":"hard","session ID":"420"}}

Come posso convertirlo in formato CSV utilizzando jq quindi il mio risultato assomiglia a questo?

id,case,session Id,speech invoked,input method 

111,Y,420,no,hard

Ho provato quanto segue, ma non ha funzionato:

{(.id),(.case),(.custom."session Id"),(.custom."speech invoked"),(.custom."input method")}

Se non è possibile alcuna soluzione Perl o shell è apprezzato.

fonte

2014-08-28 user2711819

-1

Utilizzo di Perl ed il suo modulo JSON:

#!/usr/bin/perl 
use warnings; 
use strict; 
use feature qw{ say }; 

use JSON; 

my $input = << '__JSON__'; 
{"id":"111","case":"Y","custom":{"speech invoked":"no","input method":"hard","session ID":"420"}} 
__JSON__ 

my $struct = decode_json($input); 

my @header = grep ! ref $struct->{$_}, keys %$struct; 
push @header, map keys %{ $struct->{$_} }, 
       grep ref $struct->{$_}, 
       keys %$struct; 

my @row = grep ! ref, values %$struct; 
push @row, map values %$_, grep ref, values %$struct; 

say join ',', @header; 
say join ',', @row;

fonte

2014-08-28 23:05:14 choroba

avrei ancora voglia di utilizzare Text :: CSV_XS per creare l'output nel caso in cui alcuni dei dati include le cose come gli spazi, le virgolette , virgole, ecc. – Tanktalus

@Tanktalus: certo. Basta modificare le ultime due righe. – choroba

Questo non usa 'jq' come la domanda chiede. – reinierpost

Utilizzando perl non era una buona soluzione per me, ma dopo un po 'di tentativi ed errori ho capito che si può fare con un semplice jq utilizzando l'operatore join() .

Prima creare un array dell'output necessario, quindi unire gli elementi dell'array usando le virgole.

jq -r '[.case, .custom."speech invoked", .custom."input method"] | join(", ")'

Divertiti. :)

fonte

2014-11-07 21:29:48

Ho omesso '.custom." ID sessione "' in modo che le persone possano vedere 'join()' senza scorrere. –

Grazie Joe, sarebbe utile a molti altri. – user2711819

Utilizzando JQ, è possibile utilizzare questo filtro:

with_entries(select(.key != "custom")) + .custom 
    | to_entries 
    | map(.key), map(.value) 
    | @csv

Basta notare che scritto in questo modo, le proprietà di "custom" saranno sempre scritti alla fine, non importa in che ordine le proprietà sono in .

fonte

2014-11-25 16:59:10

È bello perché ottiene automaticamente le chiavi senza conoscerle in anticipo e emette le intestazioni delle colonne. Ma il problema è che le intestazioni sono * ripetute * per ogni riga. Se hai un input variabile puoi tranquillamente emettere solo i valori ma se l'input è variabile avrai bisogno delle intestazioni. Stash l'input e l'output delle intestazioni solo nel file prima e quindi aggiungere i valori in un secondo passaggio. Impedirà però il piping dell'output a gzip. –

costruzione alla risposta Joe Harris', è possibile utilizzare il filtro @csv in modo che le stringhe siano correttamente citati e sono fuggiti quando necessario:

jq -r '[.case, .custom."speech invoked", .custom."input method"] | @csv'

fonte

2015-07-02 09:41:47

Fantastico! Bella scoperta. –

Sembra migliore del join ma produce sempre virgolette doppie attorno ai valori. – eventhorizon

Ecco un'altra soluzione. Se data.json contiene i dati di esempio poi

jq -M -s -r 'map(.+.custom|del(.custom)) | (.[0]|keys_unsorted), (.[]|[.[]]) | join(",")' data.json

produrrà

id,case,speech invoked,input method,session ID 
111,Y,no,hard,420

fonte

2017-09-01 21:53:31 jq170727

Come posso convertire il mio JSON in CSV usando jq?

risposta

Problemi correlati