2021-07-22

【読書メモ】シェルスクリプト+データベース活用テクニック―Bourne ShellとSQLiteによるDBシステム構築のすすめ

読書メモ bash sql

シェルスクリプト+データベース活用テクニック―Bourne ShellとSQLiteによるDBシステム構築のすすめ

作者:雄二, 広瀬
カットシステム

結構前から、システムを作るときにはシェルスクリプト on Bashな構成で作っています。
保存はファイルにやってたのですが、IoTなのだと流石にデータ量が増えすぎて、ある時刻のグラフを出すといった用途では正直少し大変でした*1。

で、そんな折に本屋を徘徊していて見つけたのがこちらの本。
著者は大学のセンセ……というか、以前読んだEmacsLispの本の著者さんでした。
大学の成績管理等で使うシステムを作る際にRails等のフレームワーク更新に対応するのが大変だったのでBash系での構築を試したという経緯で作られた内容であるため、問題意識も実際的です。

データベースの部分はSQLite3系統を使っています。
RubyやPythonのラッパーでしかSQLを触れてない軟弱者なのですが、本書で幾分使い方が分かったかも。

シェルスクリプトについても、知らないかったネタが載っていて中々勉強になりました。
以前紹介した「フルスクラッチから1日でCMSを作るシェルスクリプト高速開発手法入門」で忌み嫌われていたwhileの上手な使い方が書いてあったりして、
やや流儀が違うのが分かるのも面白いです。
私は原理主義より問題解決を優先するタイプなので、理解できている範囲で良いとこ食いしようと思います。

printf(1)の"-v"オプションで生成文字列を変数に格納する

bash

実際のところ

今までは、こんな感じで変数の代入で式展開というようなアクロバットな事をしていました。

$ OURVAL=`printf "%x" 254`
$ echo $OURVAL
fe

これが、"-v"オプションでこう書けます。

$ printf -v OURVAL "%x" 255
$ echo $OURVAL
ff

参考もと

Convert decimal to hexadecimal in UNIX shell script - Stack Overflow

2021-07-20

foldコマンドで数文字毎に折りたたむ

bash

ソレなりに長い１６進数ダンプの文字列があって、それを４バイトごとに折り返して格納する必要がでてきました。
awkでやろうかとも思いましたが、そういうコマンドがあるんじゃないかと調べたところ……foldコマンドを発見。
早速使ってみることに。

実際のところ

$ echo $PLCVAL=C0000200090000060000

先ほどの文字を４バイトごとに切り出す場合

~$ echo $PLCVAL | fold -b4 
C000
0200
0900
0006
0000

16進数な文字列にするなら

~$ echo $PLCVAL | fold -b4 | printf "0x%s\n" $(cat)
0xC000
0x0200
0x0900
0x0006
0x0000

参考もと

Blog | 俺的備忘録〜なんかいろいろ〜
man fold

2021-07-19

ヒアドキュメント中で16進数として格納された文字列を10進数にパースし格納する

bash

ヒアドキュメントとtrで長めな文字列を成形 - Bye Bye Moore
と
bash内の算術置換で16進数の数値をつかう - Bye Bye Moore
の発展的話題。

実際のところ

NetcatでUDPでウケたデータをhexdumpでベタ文字列にし、それをパースする例。

Bashの基数記法を使って、cutコマンドで整えた文字列をバリバリつなぐ。

BASESTR=$(echo -ne $DATACMD | nc -u -w 1 $IPADDR $PORT | hexdump  -v -e '/1 "%02X"')

STR_NUMs=$( tr -d '\n' << EOF
"A":"$((16#$(echo $BASESTR | cut -b 22-23)))",
"B":"$((16#$(echo $BASESTR | cut -b 41)))",
"C":"$((16#$(echo $BASESTR | cut -b 54-55)))"
EOF
)