☰

Bash 連想配列を jq フィルターの引数として渡す

tag-icon • tag-icon bash array arguments jq
Bash 連想配列を jq フィルターの引数として渡す

私は位置データを使用しており、米国の郵便番号で API をクエリすると、次のような結果が返されます。

{ 
 "resultStatus":"SUCCESS",
  "zip5":"30301",
  "defaultCity":"ATLANTA",
  "defaultState":"GA",
  "defaultRecordType":"PO BOX",
  "citiesList":[],
  "nonAcceptList":[{"city":"ATL","state":"GA"}]
}

これを解析して、次のように完全な州名も含む出力を作成する必要があります。 ATLANTA, Georgia, GA, 30301

${States[GA]}値を返すStates という連想配列を作成しGeorgia、次のようにその配列を引数として jq に渡そうとしました。

curl -sS <enpoint> |jq -r '"${States[\(.defaultState)]}, \(.defaultState), \(.defaultCity), \(.zip5)"'

その結果、出力は${States[GA]}, GA, ATLANTA, 30301

jq フィルターなどで bash 配列を渡して評価する方法はありますか?

私が見ている唯一のオプションは、出力をキャプチャして eval を渡すことですが、もちろん eval は悪です... また、これを何千回も実行し、ファイルからの他の外部データと組み合わせる予定なので、埋め込まれた bash 引数を使用して複雑な文字列を構築し、それを eval するよりも良いオプションを希望します。

編集

検索を試みたことを忘れていましたjq 1.6 マニュアル運が悪くこれを見つけたSOポストそこで、次のように States 配列を jq 引数として渡すことにしました。

curl -sS <enpoint> |jq -r --arg states $States '"$states[\(.defaultState)], \(.defaultState), \(.defaultCity), \(.zip5)"'

しかし、まだ運がありません。

Steeldrivers を実装する実用的なスクリプトの回答:

#! /bin/bash

# Do once and save
statesJson=$(for state in "${!StatesArray[@]}"; do 
                printf '{"name":"%s",\n"value":"%s"}\n' $state "${StatesArray[$state]}";
            done \
            | jq -s 'reduce .[] as $i ({}; .[$i.name] = $i.value)');

# Read zip and 6 other values from SourceDataFile.csv
while IFS=',' read -r zip fileValue02 fileValue03 fileValue04 fileValue05 fileValue06 fileValue07; do 

    # Use zip from file to get expanded location data.
    expandedLocationData=$(curl -sS '<apiEndpoint>' -H <Headers> --data "zip=$zip" |jq -r --argjson states "${statesJson}" '"\United States, US, ($states[.defaultState]), \(.defaultState), \(.defaultCity), \(.zip5)"');

    # Do useful things with the completed data set.
    echo "${expandedLocationData}, ${fileValue02} ${fileValue03}, ${fileValue04}, ${fileValue05}, ${fileValue06}, ${fileValue07}" > ./DestinationDataFile.csv

done < ./SourceDataFile.csv

答え1

bash配列を有効なJSONオブジェクトに変換できる場合は、（文字列補間に少し調整を加えることで）を使用して渡すことができます--argjson。たとえば、

$ declare -p States
declare -A States=([GA]="Georgia" [NY]="New York" [ME]="Maine" )

次に参照する

それから

$ for k in "${!States[@]}"; do printf '{"name":"%s",\n"value":"%s"}\n' $k "${States[$k]}"; done | jq -s 'reduce .[] as $i ({}; .[$i.name] = $i.value)'
{
  "GA": "Georgia",
  "NY": "New York",
  "ME": "Maine"
}

となることによって

$ jq -r --argjson states \
    "$(for k in "${!States[@]}"; do printf '{"name":"%s",\n"value":"%s"}\n' $k "${States[$k]}"; done | jq -s 'reduce .[] as $i ({}; .[$i.name] = $i.value)')" \
    '"\($states[.defaultState]), \(.defaultState), \(.defaultCity), \(.zip5)"' file.json
Georgia, GA, ATLANTA, 30301

関連情報