☰

Passe matrizes associativas Bash como argumento para o filtro jq

tag-icon • tag-icon bash array arguments jq
Passe matrizes associativas Bash como argumento para o filtro jq

Estou trabalhando com alguns dados de localização e consultando uma API com códigos postais dos EUA e retornando um resultado como:

{ 
 "resultStatus":"SUCCESS",
  "zip5":"30301",
  "defaultCity":"ATLANTA",
  "defaultState":"GA",
  "defaultRecordType":"PO BOX",
  "citiesList":[],
  "nonAcceptList":[{"city":"ATL","state":"GA"}]
}

Preciso analisar isso para criar uma saída que também inclua o nome completo do estado, como: ATLANTA, Georgia, GA, 30301

Criei um array associativo chamado States para que ${States[GA]}retornasse o valor Georgiae tentei passar o array para jq como um argumento como:

curl -sS <enpoint> |jq -r '"${States[\(.defaultState)]}, \(.defaultState), \(.defaultCity), \(.zip5)"'

O que resultou na saída${States[GA]}, GA, ATLANTA, 30301

Existe alguma maneira de passar e avaliar matrizes bash em filtros jq ou similares?

A única opção que estou vendo é capturar a saída e passar por eval, mas é claro que eval é ruim... Também farei isso milhares de vezes e combinarei com outros dados externos de um arquivo, então prefiro um opção melhor do que construir strings complicadas com argumentos bash incorporados e avaliá-las.

EDITAR

Esqueci de mencionar que tentei pesquisarmanual do jq 1.6sem sorte e encontrei issoPostagem SOo que me levou a tentar passar o array States como jq arg assim:

curl -sS <enpoint> |jq -r --arg states $States '"$states[\(.defaultState)], \(.defaultState), \(.defaultCity), \(.zip5)"'

mas ainda sem sorte.

Script viável que implementa a resposta dos steeldrivers:

#! /bin/bash

# Do once and save
statesJson=$(for state in "${!StatesArray[@]}"; do 
                printf '{"name":"%s",\n"value":"%s"}\n' $state "${StatesArray[$state]}";
            done \
            | jq -s 'reduce .[] as $i ({}; .[$i.name] = $i.value)');

# Read zip and 6 other values from SourceDataFile.csv
while IFS=',' read -r zip fileValue02 fileValue03 fileValue04 fileValue05 fileValue06 fileValue07; do 

    # Use zip from file to get expanded location data.
    expandedLocationData=$(curl -sS '<apiEndpoint>' -H <Headers> --data "zip=$zip" |jq -r --argjson states "${statesJson}" '"\United States, US, ($states[.defaultState]), \(.defaultState), \(.defaultCity), \(.zip5)"');

    # Do useful things with the completed data set.
    echo "${expandedLocationData}, ${fileValue02} ${fileValue03}, ${fileValue04}, ${fileValue05}, ${fileValue06}, ${fileValue07}" > ./DestinationDataFile.csv

done < ./SourceDataFile.csv

Responder1

Se você puder transformar o array bash em um objeto JSON válido, então (com pequenos ajustes na interpolação de string) você poderá passá-lo usando --argjson. Por exemplo, dado

$ declare -p States
declare -A States=([GA]="Georgia" [NY]="New York" [ME]="Maine" )

então referindo-se a

então

$ for k in "${!States[@]}"; do printf '{"name":"%s",\n"value":"%s"}\n' $k "${States[$k]}"; done | jq -s 'reduce .[] as $i ({}; .[$i.name] = $i.value)'
{
  "GA": "Georgia",
  "NY": "New York",
  "ME": "Maine"
}

para que

$ jq -r --argjson states \
    "$(for k in "${!States[@]}"; do printf '{"name":"%s",\n"value":"%s"}\n' $k "${States[$k]}"; done | jq -s 'reduce .[] as $i ({}; .[$i.name] = $i.value)')" \
    '"\($states[.defaultState]), \(.defaultState), \(.defaultCity), \(.zip5)"' file.json
Georgia, GA, ATLANTA, 30301

informação relacionada