シェルスクリプト内で変数をその場で解釈するにはどうすればよいですか？

Question

JQを使ってシェルスクリプトでJSONを読んでいます。ここでは、シェルスクリプトの変数$ HOME、$ HOST、$ PEMFILEをその場で解釈することができません。

JSONファイル：

{ 
    "script": { 
    "install": "${HOME}/lib/install.sh $HOST $PEMFILE", 
    "Setup": "${HOME}/lib/setup.sh $HOST $PEMFILE $VAR1 $VAR2" 
    } 

} 

シェルスクリプト：

#!/bin/bash 
examplefile="../lib/example.json" 
HOST=ec2-..-...-...-...us-west-2.compute.amazonaws.com 
PEMFILE=${HOME}/test.pem 

installScript=($(jq '.script.install' $examplefile)) 
bash "$installScript" 

私はJSONを変更せずにその場でこれらの変数を解釈できる方法はありますか？

P.S私はevalを使用したくありません。ここ

Answer 1

は交換を実行するためにenvとgsubを用いた溶液です。

envは、変数がシェル変数ではなく環境変数として渡される必要があることに注意してください。

#!/bin/bash 

examplefile="../lib/example.json" 
HOST=ec2-..-...-...-...us-west-2.compute.amazonaws.com 
PEMFILE=${HOME}/test.pem 

export HOST 
export PEMFILE 
installScript=$(jq -Mr ' 
    .script.install | gsub("(?<x>[$][{]?\\w+[}]?)"; env[.x|gsub("[${}]+";"")]) 
' $examplefile) 

echo $installScript 

サンプル出力

/home/runner/lib/install.sh ec2-..-...-...-...us-west-2.compute.amazonaws.com /home/runner/test.pem 

Try it online!

Answer 2

#!/bin/sh 

TMP=$(mktemp /tmp/$$.XXX) 

cat<<E_O_F > $TMP 
cat <<EOF 
$(cat so-dollar-variables.json) 
EOF 
E_O_F 

. $TMP 

/bin/rm "$TMP" 

Answer 3

それはGNUユーティリティenvsubst使用して簡単です：

installScript=$(jq -r '.script.install' "$examplefile" | envsubst) 

Answer 4

具体的な解決策を

ここで述べた問題に対するjqの解決法がありますが、 "グローバルな"環境変数に対してのみ機能します。

def substitute: 
    gsub("\\${HOME}"; env.HOME) 
    | gsub("\\$HOST"; env.HOST) 
    | gsub("\\$PEMFILE"; env.PEMFILE) 
    | gsub("\\$VAR1"; env.VAR1) 
    | gsub("\\$VAR2"; env.VAR2) 
    ; 

walk(if type=="string" then substitute else . end) 

あなたJQは、すでに示したように、上記の溶液は少し脆いですが、それは簡単にロバストまたは一般化することができ、あなたのJQをアップグレードするか、https://github.com/stedolan/jq/blob/master/src/builtin.jq

からデフをSNARFしてくださいいずれか、walk/1を持っていない場合次のセクションで説明します。

一般的なソリューション

walk(if type == "string" 
    then gsub("\\$(?<x>[A-Za-z_][A-Za-z0-9_]+)"; "\(env[.x])") 
      | gsub("\\${(?<x>[A-Za-z_][A-Za-z0-9_]+)}"; "\(env[.x])") 
    else . end) 

Answer 5

私は年間のオンとオフこれを打ってきました。私はようやくまともな純粋なbashのソリューションを持っていると思う：

1. 正規表現：正規表現のマッチングと間接的なパラメータ置換

   # read the file 
   json=$(< file.json) 
   echo step 0 
   echo "$json" 
   
   # set the relevant vars, just plain shell variables 
   HOST=_host_ 
   PEMFILE=_pemfile_ 
   VAR1=_var1_ 
   VAR2=_var2_ 
   
   # replace '$var' forms 
   while [[ $json =~ ("$"([[:alnum:]_]+)) ]]; do 
       json=${json//${BASH_REMATCH[1]}/${!BASH_REMATCH[2]}} 
   done; 
   echo 
   echo step 1 
   echo "$json" 
   
   # replace '${var}' forms 
   while [[ $json =~ ("$""{"([[:alnum:]_]+)"}") ]]; do 
       json=${json//${BASH_REMATCH[1]}/${!BASH_REMATCH[2]}} 
   done 
   echo 
   echo step 2 
   echo "$json" 
   

   出力

   step 0 
   { 
       "script": { 
       "install": "${HOME}/lib/install.sh $HOST $PEMFILE", 
       "Setup": "${HOME}/lib/setup.sh $HOST $PEMFILE $VAR1 $VAR2" 
       } 
   
   } 
   
   step 1 
   { 
       "script": { 
       "install": "${HOME}/lib/install.sh _host_ _pemfile_", 
       "Setup": "${HOME}/lib/setup.sh _host_ _pemfile_ _var1_ _var2_" 
       } 
   
   } 
   
   step 2 
   { 
       "script": { 
       "install": "/home/jackman/lib/install.sh _host_ _pemfile_", 
       "Setup": "/home/jackman/lib/setup.sh _host_ _pemfile_ _var1_ _var2_" 
       } 
   
   } 
   

   魔法があるを使用していますここで私は$VARとVARをキャプチャし、

   [[ $json =~ ("$"([[:alnum:]_]+)) ]] 
   # ..........1 2    21 
   

2. 私は、文字列"$VAR"を検索し、間接的な変数の展開と${!VAR}

   ${json//${BASH_REMATCH[1]}/${!BASH_REMATCH[2]}}