CSVを変数に変換するのに役立ちます。 IFSを試してみましたが、フィールド数を定義する必要があるようです。さまざまな数のフィールドを処理できることが必要です。
*行、セクションなどの代わりに型を使用して、更新された変数名を含む現在使用されているコード（hschouによって提供された回答から取得）で元の質問を修正しています。
私は私のコードで知ることができると確信していますが、私はスクリプトが初めてなので、別のループを追加するか、typeCデータを解析するための異なるアプローチを取るかどうかを調べるのに役立ちます。 format、typeA、およびtypeBデータにはそれぞれ1つの項目しかありませんが、typeCデータには1〜15個の項目があります。目標は、各データ型に対して1つずつ合計3つのファイルのみを持つことです。
データ型：
Container: PL[1-100]
TypeA: [1-20].[1-100].[1-1000].[1-100]-[1-100]
TypeB: [1-20].[1-100].[1-1000].[1-100]-[1-100]
TypeC (1 to 15 entries): [1-20].[1-100].[1-1000].[1-100]-[1-100]
*CSVにヘッダーはありませんが、ヘッダーがある場合は次のようになります。 （Container、typeA、typeBデータは常に1、2、3位置にあり、その後はtypeCデータがすべて位置にあります。）：Container、typeA、B型、C型、C型、C型、C型、 C型、...
CSV：
PL3,12.1.4.5-77,13.6.4.5-20,17.3.577.9-29,17.3.779.12-33,17.3.802.12-60,17.3.917.12-45,17.3.956.12-63,17.3.993.12-42
PL4,12.1.4.5-78,13.6.4.5-21,17.3.577.9-30,17.3.779.12-34
PL5,12.1.4.5-79,13.6.4.5-22,17.3.577.9-31,17.3.779.12-35,17.3.802.12-62,17.3.917.12-47
PL6,12.1.4.5-80,13.6.4.5-23,17.3.577.9-32,17.3.779.12-36,17.3.802.12-63,17.3.917.12-48,17.3.956.12-66
PL7,12.1.4.5-81,13.6.4.5-24,17.3.577.9-33,17.3.779.12-37,17.3.802.12-64,17.3.917.12-49,17.3.956.12-67,17.3.993.12-46
PL8,12.1.4.5-82,13.6.4.5-25,17.3.577.9-34
パスワード：
#!/bin/bash
#Set input file
_input="input.csv"
# Pull variables in from csv
# read file using while loop
while read; do
declare -a COL=( ${REPLY//,/ } )
echo -e "containerID=${COL[0]}\ntypeA=${COL[1]}\ntypeB=${COL[2]}" >/tmp/typelist.txt
idx=1
while [ $idx -lt 10 ]; do
echo "typeC$idx=${COL[$((idx+2))]}" >>/tmp/typelist.txt
let idx=idx+1
#whack off empty variables
sed '/\=$/d' /tmp/typelist.txt > /tmp/typelist2.txt && mv /tmp/typelist2.txt /tmp/typelist.txt
#set variables from temp file
. /tmp/typelist.txt
done
sleep 1
#Parse data in this loop.#
echo -e "\n"
echo "Begin Processing for $container"
#echo $typeA
#echo $typeB
#echo $typeC
#echo -e "\n"
#Strip - from sub data for extra parsing
typeAsub="$(echo "$typeA" | sed 's/\-.*$//')"
typeBsub="$(echo "$typeB" | sed 's/\-.*$//')"
typeCsub1="$(echo "$typeC1" | sed 's/\-.*$//')"
#strip out first two decimils for extra parsing
typeAprefix="$(echo "$typeA" | cut -d "." -f1-2)"
typeBprefix="$(echo "$typeB" | cut -d "." -f1-2)"
typeCprefix1="$(echo "$typeC1" | cut -d "." -f1-2)"
#echo $typeAsub
#echo $typeBsub
#echo $typeCsub1
#echo -e "\n"
#echo $typeAprefix
#echo $typeBprefix
#echo $typeCprefix1
#echo -e "\n"
echo "Getting typeA dataset for $typeA"
#call api script to pull data ; echo out for test
echo "API-gather -option -b "$typeAsub" -g all > "$container"typeA-dataset"
sleep 1
echo "Getting typeB dataset for $typeB"
#call api script to pull data ; echo out for test
echo "API-gather -option -b "$typeBsub" -g all > "$container"typeB-dataset"
sleep 1
echo "Getting typeC dataset for $typeC1"
#call api script to pull data ; echo out for test
echo "API-gather -option -b "$typeCsub" -g all > "$container"typeC-dataset"
sleep 1
echo "Getting additional typeC datasets for $typeC2-15"
#call api script to pull data ; echo out for test
echo "API-gather -option -b "$typeCsub2-15" -g all >> "$container"typeC-dataset"
sleep 1
echo -e "\n"
done < "$_input"
exit 0
スピードは問題になりませんが、そこで本当に愚かなことをしたら、楽に正しい方向に打ってください。 :)
答え1
このスクリプトはその行をデフォルト変数としてのみ読み込みます$REPLY。次に、カンマを空白に置き換えて${REPLY//,/ }arrayに入れますdeclare -a COL=()。次に、部分セクションはループを使用して処理され、列インデックスは次のように計算されます$((idx+2))。
#! /bin/bash
while read; do
declare -a COL=( ${REPLY//,/ } )
echo -e "container=${COL[0]}\nrow=${COL[1]}\nshelf=${COL[2]}"
idx=1
while [ $idx -lt 10 ]; do
echo "section$idx=${COL[$((idx+2))]}"
let idx=idx+1
done
done
答え2
各CSVレコードに連想配列を使用します。データが次のファイルにあるとします。input.csv
#!/usr/bin/env bash
counter=1 # provides index for each csv record
while read
do
IFS=',' a=( $REPLY ) # numeric array containing current row
eval "declare -A row$counter" # declare an assoc. array representing
# this row
eval "row$counter+=( ['row']=${a[0]} )"
a=( "${a[@]:1}" )
eval "row$counter+=( ['shelf']=${a[0]} )"
a=( "${a[@]:1}" )
eval "row$counter+=( ['section1']=${a[0]} )"
a=( "${a[@]:1}" )
eval "row$counter+=( ['section2']=${a[0]} )"
a=( "${a[@]:1}" )
eval "row$counter+=( ['section3']=${a[0]} )"
a=( "${a[@]:1}" )
eval "row$counter+=( ['section4']=${a[0]} )"
a=( "${a[@]:1}" )
eval "row$counter+=( ['section5']=${a[0]} )"
a=( "${a[@]:1}" )
eval "row$counter+=( ['section6']=${a[0]} )"
a=( "${a[@]:1}" )
declare -p row$counter
(( counter = counter + 1 ))
done < <( cat input.csv )
# access arbitrary element
printf "\n---------\n%s\n" ${row3["section4"]}
これは私に次のような結果を与えます：
declare -A row1='([section6]="6" [section5]="5" [section4]="4" [section3]="4" [section2]="2" [section1]="1" [shelf]="12" [row]="PL3" )'
declare -A row2='([section6]="" [section5]="" [section4]="" [section3]="2" [section2]="1" [section1]="4" [shelf]="13" [row]="PL4" )'
declare -A row3='([section6]="" [section5]="" [section4]="3" [section3]="2" [section2]="1" [section1]="5" [shelf]="14" [row]="PL5" )'
declare -A row4='([section6]="5" [section5]="4" [section4]="3" [section3]="2" [section2]="1" [section1]="6" [shelf]="15" [row]="PL6" )'
declare -A row5='([section6]="5" [section5]="4" [section4]="3" [section3]="2" [section2]="1" [section1]="7" [shelf]="16" [row]="PL7" )'
declare -A row6='([section6]="5" [section5]="4" [section4]="3" [section3]="2" [section2]="1" [section1]="8" [shelf]="15" [row]="PL8" )'
declare -A row7='([section6]="5" [section5]="4" [section4]="3" [section3]="2" [section2]="1" [section1]="7" [shelf]="16" [row]="PL9" )'
---------
3
答え3
私は次のように始めます：
while IFS=, read -ra fields; do
for (( i = ${#fields[@]} - 1; i >= 0; i-- )); do
[[ -z "${fields[i]}" ]] && unset fields[i] || break
done
declare -p fields
done < file
declare -a fields='([0]="PL3" [1]="12" [2]="3" [3]="1" [4]="2" [5]="3" [6]="4" [7]="5" [8]="6")'
declare -a fields='([0]="PL4" [1]="13" [2]="4" [3]="1" [4]="2")'
declare -a fields='([0]="PL5" [1]="14" [2]="5" [3]="1" [4]="2" [5]="3")'
declare -a fields='([0]="PL6" [1]="15" [2]="6" [3]="1" [4]="2" [5]="3" [6]="4" [7]="5" [8]="6" [9]="7" [10]="8")'
declare -a fields='([0]="PL7" [1]="16" [2]="7" [3]="1" [4]="2" [5]="3" [6]="4" [7]="5" [8]="6" [9]="7" [10]="8" [11]="9")'
declare -a fields='([0]="PL8" [1]="15" [2]="8" [3]="1" [4]="2" [5]="3" [6]="4" [7]="5" [8]="6" [9]="7" [10]="8")'
declare -a fields='([0]="PL9" [1]="16" [2]="7" [3]="1" [4]="2" [5]="3" [6]="4" [7]="5" [8]="6" [9]="7" [10]="8" [11]="9")'
ファイルに後ろにスペースがないことを確認してください。
数値的に増加する変数名が必要かどうかを尋ねます。 bashにはないデータ構造である2D配列が必要なようです。 Bashがその仕事に適したツールだと確信していますか？
答え4
データが「単純な」CSV形式（特別なCSV参照フィールドは不要）であると仮定すると、ヘッダーなしのCSVデータを構造化JSONファイルに比較的簡単に変換できます。次のコードは、CSVファイルの各入力行に対して1つずつ別々のJSONオブジェクトのセットを作成します。
$ jq -R 'split(",") | {container:.[0], typeA:.[1], typeB:.[2], typeC:.[3:]}' file file.csv
{
"container": "PL3",
"typeA": "12.1.4.5-77",
"typeB": "13.6.4.5-20",
"typeC": [
"17.3.577.9-29",
"17.3.779.12-33",
"17.3.802.12-60",
"17.3.917.12-45",
"17.3.956.12-63",
"17.3.993.12-42"
]
}
{
"container": "PL4",
"typeA": "12.1.4.5-78",
"typeB": "13.6.4.5-21",
"typeC": [
"17.3.577.9-30",
"17.3.779.12-34"
]
}
[...] # output truncated for brevity
このJSONデータがに保存されていると仮定すると、file.jsonさまざまな方法でクエリできます。
$ jq -r --arg container PL7 --arg type typeA 'select(.container==$container)[$type]' file.json
12.1.4.5-81
$ jq -r --arg container PL8 --arg type typeB 'select(.container==$container)[$type]' file.json
13.6.4.5-25
$ jq -r --arg container PL6 --arg type typeC 'select(.container==$container)[$type][]' file.json
17.3.577.9-32
17.3.779.12-36
17.3.802.12-63
17.3.917.12-48
17.3.956.12-66
（[]上記の式の最後に、配列を別の要素に拡張することを追加しました。）
$ jq -r --arg container PL3 --arg type typeC --arg sub 60 'select(.container==$container)[$type][] | select(endswith("-"+$sub))' file.json
17.3.802.12-60