The Nominomicon の非公式翻訳を作った。
GitLab Pages でホスティングしてます。 https://nogiro.gitlab.io/nominomicon-unofficial-japanese-translation/
意訳・超訳が多いと思うので、指摘などあれば GitLab に issue を作ってもらえるとありがたいです。 8 章は内容はあったけど SUMMARY からリンクされておらずビルドされないので、翻訳せずそのままにしています。
New GitLab Issue: https://gitlab.com/nogiro/nominomicon-unofficial-japanese-translation/-/issues/new
英語へたくそなので中々大変だったけど、翻訳作業そのものが nom の理解の助けになって良かった。
npm の dotenv パッケージと cargo-make の --env-file オプションで、パース方法に違いがあったので調べた結果をまとめました。
調査に利用したソースは https://gitlab.com/nogiro/dotenv-inspection に配置しています。
違いがあったのは ' (シングルクォート) と # (シャープ) まわりです。
この記事で比較するのは以下の 2 個です。
上記リポジトリーを clone すると、以下の .env ファイルを用意してあります。
DOTENV_INSPECTION_NOT_QUOTED=foo#bar DOTENV_INSPECTION_SINGLE_QUOTED='foo#bar' DOTENV_INSPECTION_DOUBLE_QUOTED="foo#bar"
npm install・cargo install cargo-make の後で、npm run env と cargo make --env-file .env env を実行するとそれぞれの違いが確認できます。
npm run --silent devDOTENV_INSPECTION_NOT_QUOTED=foo DOTENV_INSPECTION_SINGLE_QUOTED=foo#bar DOTENV_INSPECTION_DOUBLE_QUOTED=foo#bar
クォートされていない場合は、# 以降がコメントとして削除されていることが確認できます。
cargo make --quiet --env-file .env envDOTENV_INSPECTION_SINGLE_QUOTED='foo#bar' DOTENV_INSPECTION_NOT_QUOTED=foo#bar DOTENV_INSPECTION_DOUBLE_QUOTED=foo#bar
シングルクォートでクォーテーションした場合に、シングルクォートが残っていることが確認できます。(また、逆順にソートされるようです。)
npm の dotenv と cargo-make を同時に利用するプロジェクトでは、# を含む値はダブルクォートで囲むと良いようです。
(リポジトリーでは envmnt (cargo-make が利用してる crate) と Rust の dotenv crate、python-dotenv も比較しています。)
スズを主成分とする古くからある低融点合金である。成分の一例はスズ93%、アンチモン7%
ビロン（billon）は、合金の一種で、貴金属（主に銀だが、金の場合もある）と主成分となる金属（銅など）を混ぜたものである。硬貨、メダル、代用貨幣などの製造に用いられる。
仮想マシンで提供していた plantuml-server を Docker コンテナーに変更します。
plantuml-server は↓を tomcat で稼働させていました。 github.com
https://example.com/plantuml/ で plantuml サーバーを提供しています。
/plantuml にアクセスすると nginx が仮想マシン (192.0.2.170) に転送するようにしています。1
location /plantuml/ {
# etc...
proxy_pass http://192.0.2.170:8080;
}
plantuml/Dockerfile を作成Docker Hub に plantuml-server があります。
が、サブディレクトリー (/plantuml) に対応していないため、そのままでは利用できません。
https://example.com にアクセスすると plantuml server が見られる状態を https://example.com/plantuml に変えたいです。
Jetty は war の名前を変えると対応できるので、以下の Dockerfile を書きます。
FROM plantuml/plantuml-server:jetty ARG BASE_URL=plantuml RUN mv /var/lib/jetty/webapps/ROOT.war /var/lib/jetty/webapps/$BASE_URL.war
(ROOT.war は特殊なファイル名のようです。https://example.com/ROOT ではなく https://example.com へのアクセスで公開されるアプリケーションになります。)
docker-compose.yml からの相対パスが plantuml/Dockerfile の位置に、先程の Dockerfile を配置します。
docker-compose.yml に plantuml サービスを追加します。
plantuml: build: ./plantuml/ restart: always
また、nginx サービスに plantuml へのネットワーク接続を追加します。
nginx:
image: nginx:1.14.2-alpine
volumes:
- ./files/nginx/etc/letsencrypt:/etc/letsencrypt
- ./nginx/conf.d:/etc/nginx/conf.d
ports:
- 192.0.2.146:443:443
restart: always
+ links:
+ - plantuml
docker-compose を再起動します。
docker-compose build && (docker-compose down; docker-compose up -d)
nginx/conf.d/default.conf を修正します。
- proxy_pass http://192.0.2.170:8080; + proxy_pass http://plantuml:8080;
nginx プロセスの設定を更新します。
docker-compose exec nginx nginx -s reload
plantuml/plantuml-server:jetty の Dockerfile では ARG でサブディレクトリーが指定されています。
docker-compose で args を指定できるのは build (image ではなく) のときなので使いませんでした。
docker-compose.yml で完結せずに Dockerfile を作らないといけないのは収まりが悪いですが、実はどうにかできるのでしょうか。
192.0.2.0/24 は例示用 IPv4 アドレス https://tools.ietf.org/html/rfc5737↩
apt-cacher-ng 環境下では download.docker.com へ接続できず Docker をインストールできないので
echo 'Acquire::HTTP::Proxy::download.docker.com "DIRECT";' > /etc/apt/apt.conf.d/70docker
して直接ダウンロードするようにしましょう。
毎回毎回忘れていて Twitter で 「docker from:nogiro_iota」を検索して↓を探すハメになるので自分用メモとして書いています。
apt-cacher-ng 噛ませてると docker の apt リポジトリが 403 出る、という謎の現象に遭遇した
— のぎろ (@nogiro_iota) 2018年12月16日
apt の設定に 「Acquire::HTTP::Proxy::https://t.co/UQZSFhEv2s "DIRECT";」 を追加して、docker のリポジトリだけキャッシュ噛ませないようにすると良いみたい https://t.co/IHePah6unK
パッケージマネージャー apt には、パッケージのダウンロードをプロキシしてキャッシュしてくれる仕組みの apt-cacher-ng があります。
apt-cacher-ng 環境下で Docker をインストールすると download.docker.com へ接続できずに失敗します。
以下の公式のインストール手順にしたがって進めていると
docs.docker.com
INSTALL DOCKER ENGINE - COMMUNITY セクションの apt update が失敗します。（add-apt-repository の次）
$ sudo apt update Err:1 https://download.docker.com/linux/debian buster InRelease Reading from proxy failed - read (115: Operation now in progress) [IP: 192.0.2.0 3142] Hit:2 http://deb.debian.org/debian buster InRelease Hit:3 http://deb.debian.org/debian buster-updates InRelease Hit:4 http://security.debian.org/debian-security buster/updates InRelease Reading package lists... Done Building dependency tree Reading state information... Done All packages are up to date. W: Failed to fetch https://download.docker.com/linux/debian/dists/buster/InRelease Reading from proxy failed - read (115: Operation now in progress) [IP: 192.0.2.0 3142] W: Some index files failed to download. They have been ignored, or old ones used instead.
当時調べたところ、apt の設定で apt-cacher-ng を回避する方法が出てきました。
github.com
ので設定します。（Twitter からコピーすると http:// がついてめんどかったのですよね。）
$ echo 'Acquire::HTTP::Proxy::download.docker.com "DIRECT";' > /etc/apt/apt.conf.d/70docker
apt update が成功します。
$ sudo apt update Hit:1 http://deb.debian.org/debian buster InRelease Get:2 http://deb.debian.org/debian buster-updates InRelease [49.3 kB] Get:3 https://download.docker.com/linux/debian buster InRelease [44.4 kB] Get:4 https://download.docker.com/linux/debian buster/stable amd64 Packages [10.3 kB] Hit:5 http://security.debian.org/debian-security buster/updates InRelease Fetched 104 kB in 1s (79.5 kB/s) Reading package lists... Done Building dependency tree Reading state information... Done All packages are up to date
この記事を書いているときに調べたところ、HTTPS だと失敗するようです。
wiki.debian.org
apt-cacher-ng 側の設定で回避できそうなのでストレスフリーになりそうです。
第 41 回シェル芸勉強会の問題の Python ワンライナーでの解答です。
真面目なほうは 第41回シェル芸勉強会に参加しました。 - nogiro_iotaのメモ を参照してください。
けっこう改訂しています。(解説も追加する予定です。しました。)
改訂履歴を最下段に載せています。
python3 -c 'import sys; [print(x[:-1]) for x in sorted(sys.stdin, key=lambda x:hoge)]' で hoge をいじれば標準入力を好き勝手ソートできる。
第 41 回シェル芸勉強会はソート回とのことでした。
Python でのソートは sort()・sorted() の 2 種類です。この記事中の回答ではすべてsorted()を使用しています。sorted()は引数として iterable なオブジェクト (sys.stdin やリスト) を受け取って、ソート済みのリストを返すためワンライナーで扱い易いためです。（sort() はリスト型クラスのメソッドで、呼ぶとリスト内部をソートして返り値は None になります。）
Python は短絡評価してくれて print() は None を返すので、値を見たい部分で print(hoge) or hoge すると printf デバッグできます。
以下は A4-2 を例にしています。
$ python3 -c '[print(x.strip()) for x in sorted(open("ShellGeiData/vol.41/sjis", "r", encoding="cp932"), key=lambda x:print(int(x.split()[0])) or int(x.split()[0]))]'
123
31
20
2242
２０ ほじぱんふんじこみ
３１ こきたてひーひー
１２３ ずんごるももう
２２４２ うえってきたかるとらまん
sorted() の key でソート基準を決める関数を渡せるのでけっこう簡単でした。
次のファイルについて、2列目をキーにしてエクセルの横列の記号（A, B, ..., Z, AA, AB, ...のやつ）順に並べ替えてください。
$ cat excel 114514 B 1192296 AA 593195 CEZ 4120 TZ 999 QQQ
$ cat ShellGeiData/vol.41/excel | python3 -c 'import sys; [print(x[:-1]) for x in sorted(sys.stdin, key=lambda x:("%%%"+x.split()[1])[-4:])]'
114514 B
593195 AA
4120 TZ
1192296 CEZ
999 QQQx.split()[1] で得られるので、前部分に"%%%"をつけて後ろ 4 文字 ([-4:]) を返すようにします。
次のファイルのレコードを干支順にソートしてください。
$ cat eto_yomi 申 さる 子 ね 寅 とら 卯 う 巳 み 辰 たつ 丑 うし 酉 とり 戌 いぬ 亥 い 午 うま 未 ひつじただし、次のファイルを補助に使って良いこととします。
$ cat eto 子丑寅卯辰巳午未申酉戌亥
$ cat ShellGeiData/vol.41/eto_yomi | python3 -c 'import sys; [print(x[:-1]) for x in sorted(sys.stdin, key = lambda x:open("ShellGeiData/vol.41/eto", "r").read().index(x.split()[0]))]'
子 ね
丑 うし
寅 とら
卯 う
辰 たつ
巳 み
午 うま
未 ひつじ
申 さる
酉 とり
戌 いぬ
亥 いただ上の回答だと、eto_yomi を 1 行読むたびに eto を読み直しているのでファイルが大きくなると遅くなりそうですね。。。
以下のように、先に変数に入れておけば良いですね。
cat ShellGeiData/vol.41/eto_yomi | python3 -c 'import sys; eto = open("ShellGeiData/vol.41/eto", "r").read(); [print(x[:-1]) for x in sorted(sys.stdin, key=lambda x:eto.index(x.split()[0]))]'
次のファイルのレコードを数字（第一フィールドの計算結果）が小さい順に並べてください。
$ cat kim_calc 1+2+4 金正日 4*3 金正男 3-1-5 金日成 495/3 金正恩 0x1F 金正哲
$ cat ShellGeiData/vol.41/kim_calc | python3 -c 'import sys;[print(x.strip()) for x in sorted(sys.stdin, key=lambda x:eval(x.split()[0]))]' 3-1-5 金日成 1+2+4 金正日 4*3 金正男 0x1F 金正哲 495/3 金正恩
eval() がつよい。
次のファイルはシフトJISのテキストですが、これを1) 辞書順、2) 数字の小さい順、にソートしてください。出力もシフトJISとします。
$ cat sjis | nkf -g Shift_JIS $ cat sjis | nkf -wLux １２３ ずんごるももう ３１ こきたてひーひー ９ ほじぱんふんじこみ ２２４２ たまもとやろう
$ python3 -c 'import codecs;[print(x.strip()) for x in sorted(codecs.open("ShellGeiData/vol.41/sjis", "r", "cp932"))]'
１２３ ずんごるももう
２０ ほじぱんふんじこみ
２２４２ うえってきたかるとらまん
３１ こきたてひーひーcodecs.open() を使うか open() に encoding を渡します。
$ python3 -c '[print(x.strip()) for x in sorted(open("ShellGeiData/vol.41/sjis", "r", encoding="cp932"), key=lambda x:int(x.split()[0]))]'
２０ ほじぱんふんじこみ
３１ こきたてひーひー
１２３ ずんごるももう
２２４２ うえってきたかるとらまんサイズの小さい順にソートしてください。
$ cat size 2GB 1.2GB 40000MB 1000000000kB 0.4GB 410MB
$ cat ShellGeiData/vol.41/size | python3 -c 'import sys; d = {"k":1,"m":2,"g":3}; [print(x.strip()) for x in sorted(sys.stdin, key=lambda x:eval("".join([j.replace(i,"*1000" * d[i]) if i in j else "" for j in [x[:-2].lower()] for i in d.keys()])))]'
0.4GB
410MB
1.2GB
2GB
40000MB
1000000000kBd = {"k":1,"m":2,"g":3})、その値の数 "*1000" をつけたものを eval() しています。想像しにくいように思うので、 eval() で計算する前の文字列を出力したものを以下に貼ります。（改行していますが cat ～ ()])))]' までコピペで動きます。）
$ cat ShellGeiData/vol.41/size | python3 -c 'import sys; d = {"k":1,"m":2,"g":3}; [print(x.strip()) for x in sorted(sys.stdin, key=lambda x:
print("".join([j.replace(i,"*1000" * d[i]) if i in j else "" for j in [x[:-2].lower()] for i in d.keys()])) or
eval("".join([j.replace(i,"*1000" * d[i]) if i in j else "" for j in [x[:-2].lower()] for i in d.keys()])))]'
2*1000*1000*1000
1.2*1000*1000*1000
40000*1000*1000
1000000000*1000
0.4*1000*1000*1000
410*1000*1000
0.4GB
410MB
1.2GB
2GB
40000MB
1000000000kB途中で出てくる for j in [x[:-2].lower()] はリスト内包表記内で変数を使う方法です。
次のローマ数字をソートしてください。
$ cat roman IV XI LXXXIX IX XLIII XX VIII
$ cat ShellGeiData/vol.41/roman | python3 -c 'import sys;d={"I":1,"V":5,"X":10,"L":50};[print(x[:-1]) for x in sorted(sys.stdin, key=lambda x:eval("+".join([[a[j]+"*-1" if j < len(a) - 1 and a[j] < a[j+1] else a[j] for j in range(len(a))] for a in [[str(d[i]) for i in x[:-1]]]][0])))]'
IV
VIII
IX
XI
XX
XLIII
LXXXIXIVやXL などの減算則の部分に "*-1" をつける処理 ([a[j]+"*-1" if j < len(a) - 1 and a[j] < a[j+1] else a[j] for j in range(len(a))]) が主な違いです。
次のファイルを辞書順にソートしてください。ただし、濁点がついているものが先に来るようにしてください。できる人はワンライナー中で「かきくけこがぎぐげご」の文字を使わないでください。
$ cat gagigugego かき氷 ぎ・おなら吸い込み隊 きつねうどん ぐりこもりなが事件 きききりん がきの使い くその役にも立たない げんしりょく発電 ごりらいも こじんてきにはクソ
- 例
がきの使い かき氷 ぎ・おなら吸い込み隊 きききりん きつねうどん ぐりこもりなが事件 くその役にも立たない げんしりょく発電 ごりらいも こじんてきにはクソ
$ cat ShellGeiData/vol.41/gagigugego | python3 -c 'import sys; from unicodedata import normalize; c=u"\U00003099"; [print(x[:-1]) for x in sorted(sys.stdin, key=lambda x:["".join(c in a and a.insert(a.index(c), u"\U00000000") or a) for a in [[i for i in normalize("NFD",x)]]])]'
がきの使い
かき氷
ぎ・おなら吸い込み隊
きききりん
きつねうどん
ぐりこもりなが事件
くその役にも立たない
げんしりょく発電
ごりらいも
こじんてきにはクソunicodedata.normalize()で Unicode 正規化できます。そのままソートすると期待どおりにソートされないので、濁点 (u"\U00003099") の前に小さな値 (u"\U00000000") を追加してソートしています。
a[a.index(c):]+[u"\U00000000"] + a[:a.index(c)] -> a.insert(a.index(c), u"\U00000000")[j for j in [i for i in open("ShellGeiData/vol.41/eto", "r")][0]] -> [i for i in open("ShellGeiData/vol.41/eto", "r")][0]lambda x:("%%%"+x[1])[:-4] -> lambda x:("%%%"+x[1])[-4:] eban on Twitter: "最後は[-4:]じゃないでしょうか？… "
sorted([i for i in sys.stdin], key= -> sorted(sys.stdin, key=[i for i in open("ShellGeiData/vol.41/eto", "r")][0] -> open("ShellGeiData/vol.41/eto", "r").read()cat ShellGeiData/vol.41/size | python3 -c 'import sys;[print(x.strip()) for x in sorted(sys.stdin, key=lambda x:eval(x[:-2].replace("k","*1000").replace("M","*1000"*2).replace("G","*1000"*3)))]'cat ShellGeiData/vol.41/size | python3 -c 'import sys; d = {"k":1,"m":2,"g":3}; [print(x.strip()) for x in sorted(sys.stdin, key=lambda x:eval("".join([j.replace(i,"*1000" * d[i]) if i in j else "" for j in [x[:-2].lower()] for i in d.keys()])))]'LXXXIX が 89 ではなく 91 に計算されていた。)
eval("+".join([[a[0]+"*-1"]+a[1:] if a[0] < a[1] else a for a in [[str(d[i]) for i in x[:-1]]]][0])) or xeval("+".join([[a[j]+"*-1" if j < len(a) - 1 and a[j] < a[j+1] else a[j] for j in range(len(a))] for a in [[str(d[i]) for i in x[:-1]]]][0]))第41回シェル芸勉強会の参加レポートです。
だいぶ久々に参加させていただいたように思います。
本日使用した資料はこちらです。
— Hidekazu Toriumi (@hid_tori) 2019年4月27日
全6回にもなってしまった文字コードの勉強会にお付き合い下さり、ありがとうございました。https://t.co/v4kBvnZLSk#シェル芸
ついに文字コードのお話が最終回になりました。今回は主に Unicode の結合文字列の話でした。
結合文字列をざっくり言うと、 Unicode 上では同じ「ポ」を表すにも以下の 2 通りの方法があるということです。
また、上の単一のコードでひとつの文字になる表現を合成済み文字、下の複数コードの組み合わせで表現するものを結合文字列と呼びます。
同一文書中に符号化方式が混在していると不便なので統一することを Unicode 正規化といい、合成済み文字に統一した形式を NFC、結合文字列に分解した形式を NFD と言います。
CLI で Unicode 正規化するには uconv が便利 (uconv -x NFD・uconv -x NFC) ということを知りました。
$ echo -n ポ | uconv -x NFC | iconv -t ucs-2be | xxd -ps 30dd $ echo -n ポ | uconv -x NFD | iconv -t ucs-2be | xxd -ps 30db309a
余談ですが結合文字列といえば Mac OS X がめんどくさい印象です。Windows から OS X に濁点 (・半濁点) がファイル名に入ったファイルを送って、編集して送り返してもらうと濁点が分割されます。
メールなどであれば、おそらくファイル名を変更してやり取りするのでまだ良いですが、DropBox などのファイル同期を取るソフトウェアで OS が混在すると同名のファイルが 2 つできるという悪夢が発生します。
しかも保存しないと増えないのでタイミングがよくわからなくなって原因究明が大変です。
私の回答のうち、 Twitter のものはその場での回答です。
pre タグで囲まれている部分は記事執筆の際に WSL で再度実行しています。
次のファイルについて、2列目をキーにしてエクセルの横列の記号（A, B, ..., Z, AA, AB, ...のやつ）順に並べ替えてください。
$ cat excel 114514 B 1192296 AA 593195 CEZ 4120 TZ 999 QQQ
# A1 awk 縛り
— のぎろ (@nogiro_iota) 2019年4月27日
cat ShellGeiData/vol.41/excel | xargs printf '%s %4s\n' | tr \ % | sed 's#%%# %#' | sort -k2 | tr -d % #シェル芸
$ cat ShellGeiData/vol.41/excel | xargs printf '%s %4s\n' | tr \ % | sed 's#%%# %#' | sort -k2 | tr -d % 114514 B 593195 AA 4120 TZ 1192296 CEZ 999 QQQ
他の方の回答を見ていると、 awk の length 関数で列番号の桁数を求める解法が多かったみたいですね。
次のファイルのレコードを干支順にソートしてください。
$ cat eto_yomi 申 さる 子 ね 寅 とら 卯 う 巳 み 辰 たつ 丑 うし 酉 とり 戌 いぬ 亥 い 午 うま 未 ひつじただし、次のファイルを補助に使って良いこととします。
$ cat eto 子丑寅卯辰巳午未申酉戌亥
# A2
— のぎろ (@nogiro_iota) 2019年4月27日
cat ShellGeiData/vol.41/eto | grep -o . | sed 's#.#grep & ShellGeiData/vol.41/eto_yomi#e' #シェル芸
$ cat ShellGeiData/vol.41/eto | grep -o . | sed 's#.#grep & ShellGeiData/vol.41/eto_yomi#e' 子 ね 丑 うし 寅 とら 卯 う 辰 たつ 巳 み 午 うま 未 ひつじ 申 さる 酉 とり 戌 いぬ 亥 い
$ cat ShellGeiData/vol.41/eto | grep -o . | sed 's#.#grep & ShellGeiData/vol.41/eto_yomi#' grep 子 ShellGeiData/vol.41/eto_yomi grep 丑 ShellGeiData/vol.41/eto_yomi grep 寅 ShellGeiData/vol.41/eto_yomi grep 卯 ShellGeiData/vol.41/eto_yomi grep 辰 ShellGeiData/vol.41/eto_yomi grep 巳 ShellGeiData/vol.41/eto_yomi grep 午 ShellGeiData/vol.41/eto_yomi grep 未 ShellGeiData/vol.41/eto_yomi grep 申 ShellGeiData/vol.41/eto_yomi grep 酉 ShellGeiData/vol.41/eto_yomi grep 戌 ShellGeiData/vol.41/eto_yomi grep 亥 ShellGeiData/vol.41/eto_yomi
# A2.2 亜種 grep 縛り
— のぎろ (@nogiro_iota) 2019年4月27日
cat ShellGeiData/vol.41/eto_yomi | awk '{print "/"$1"/s_.*_"$0"_"}' | sed -f - <(sed 's_._&\n_g' ShellGeiData/vol.41/eto) #シェル芸
$ cat ShellGeiData/vol.41/eto_yomi | awk '{print "/"$1"/s_.*_"$0"_"}' | sed -f - <(sed 's_._&\n_g' ShellGeiData/vol.41/eto)
子 ね
丑 うし
寅 とら
卯 う
辰 たつ
巳 み
午 うま
未 ひつじ
申 さる
酉 とり
戌 いぬ
亥 い
grepを使わないことを目標にしました。
以下のようにしたら grep -o . みたいなことしてる部分も消せますね。
$ cat ShellGeiData/vol.41/eto_yomi | awk '{print "s_"$1"_"$0" _"}' | sed -f - ShellGeiData/vol.41/eto | xargs -n 2
子 ね
丑 うし
寅 とら
卯 う
辰 たつ
巳 み
午 うま
未 ひつじ
申 さる
酉 とり
戌 いぬ
亥 いA2.1 の sed 部分を xargs でやるのが方がいました。そっちのほうがスマートですね。
次のファイルのレコードを数字（第一フィールドの計算結果）が小さい順に並べてください。
$ cat kim_calc 1+2+4 金正日 4*3 金正男 3-1-5 金日成 495/3 金正恩 0x1F 金正哲
# A3
— のぎろ (@nogiro_iota) April 27, 2019
cat ShellGeiData/vol.41/kim_calc | sed 's_\(.*\) \(.*\)_echo $((\1)) \1 \2_' | sh | sort -n #シェル芸
$ cat ShellGeiData/vol.41/kim_calc | sed 's_\(.*\) \(.*\)_echo $((\1)) \1 \2_e' | sort -n | cut -d\ -f2-3 3-1-5 金日成 1+2+4 金正日 4*3 金正男 0x1F 金正哲 495/3 金正恩
bcで計算しようとしたところ0x1Fが変換できませんでした。
$ cat ShellGeiData/vol.41/kim_calc | cut -d\ -f1 | bc 7 12 -3 165 (standard_in) 5: syntax error
bash で式評価すれば 0x 形式を変換できたのでそうしました。
printf でも 0x の変換はできますが計算はできないので、今回の問題では手順が増えますね。
$ printf %d\\n 0x1F 31
次のファイルはシフトJISのテキストですが、これを1) 辞書順、2) 数字の小さい順、にソートしてください。出力もシフトJISとします。
$ cat sjis | nkf -g Shift_JIS $ cat sjis | nkf -wLux １２３ ずんごるももう ３１ こきたてひーひー ９ ほじぱんふんじこみ ２２４２ たまもとやろう
# A4 1
— のぎろ (@nogiro_iota) April 27, 2019
cat ShellGeiData/vol.41/sjis | iconv -f cp932 | sort -k2 | iconv -t cp932 #シェル芸
# A4 2
— のぎろ (@nogiro_iota) April 27, 2019
cat ShellGeiData/vol.41/sjis | iconv -f cp932 | sed 'y/０１２３４/01234/' | sort -n | sed 'y/01234/０１２３４/' | iconv -t cp932 #シェル芸
$ cat ShellGeiData/vol.41/sjis | iconv -f cp932 | sed 'y/０１２３４/01234/' | sort -n | sed 'y/01234/０１２３４/' ２０ ほじぱんふんじこみ ３１ こきたてひーひー １２３ ずんごるももう ２２４２ うえってきたかるとらまん
サイズの小さい順にソートしてください。
$ cat size 2GB 1.2GB 40000MB 1000000000kB 0.4GB 410MB
# A5.1 計算列消すの忘れててすみません
— のぎろ (@nogiro_iota) April 27, 2019
cat ShellGeiData/vol.41/size | sed p | sed '2~2s_.*_echo & | tr -d B | tr k K | numfmt --from=si_e' | paste - - | sort -k2 -n | cut -f1 #シェル芸
$ cat ShellGeiData/vol.41/size | sed p | sed '2~2s_.*_echo & | tr -d B | tr k K | numfmt --from=si_e' | paste - - | sort -k2 -n | cut -f1 0.4GB 410MB 1.2GB 2GB 40000MB 1000000000kB
以下のツイートを見てnumfmtを知ったのでそのまま使ったら解けました。
numfmtでもとに戻すのがいいか…？ #シェル芸
— Blacknon@通勤電車リハビリ中 (@blacknon_) April 27, 2019
sleepと内部コマンドだけを使って次の数を小さい順にソートしてください。$ cat nums 5.4 0.34 2.3 0.9 6
# A6 cat 消した版
— のぎろ (@nogiro_iota) April 27, 2019
(while read a; do (sleep $a; echo $a) & done) < ShellGeiData/vol.41/nums #シェル芸
$ (while read a; do (sleep $a; echo $a) & done) < ShellGeiData/vol.41/nums $ 0.34 0.9 2.3 5.4 6
非同期で動くので表示がずれるのが気になる場合はwaitをかませば良いです。() でサブシェル内で実行すればジョブ開始のメッセージも出ないのでより見やすくなります。
$ (while read a; do (sleep $a; echo $a) & done && wait) < ShellGeiData/vol.41/nums 0.34 0.9 2.3 5.4 6
sleepとソートを見た瞬間スリープソートだと思いました。
次のローマ数字をソートしてください。
$ cat roman IV XI LXXXIX IX XLIII XX VIII
# A7 ごり押し版
— のぎろ (@nogiro_iota) April 27, 2019
cat ShellGeiData/vol.41/roman | sed -E 'p;s_I([XV])_(-1)\1_;s_X([LC])_(-10)\1_;s_I_(1)_g;s_V_(5)_g;s_X_(10)_g;s_L_(50)_g' | sed 's_)(_)+(_g; 2~2s_.*_bc <<< "&"_e' | paste - - | sort -k2 -n #シェル芸
$ cat ShellGeiData/vol.41/roman | sed -E 'p;s_I([XV])_(-1)\1_;s_X([LC])_(-10)\1_;s_I_(1)_g;s_V_(5)_g;s_X_(10)_g;s_L_(50)_g' | sed 's_)(_)+(_g; 2~2s_.*_echo "&" | bc_e' | paste - - | sort -k2 -n | cut -f1 IV VIII IX XI XX XLIII LXXXIX
IV・XL など) を先に負の値に置き換える上記手順を偶数列で行って、paste - - で行を揃えてソートする。という流れですね。
今見ると sed の s_I([XV])_(-1)\1_;s_X([LC])_(-10)\1_ 部分を s_I[XV]_(-1)*&_;s_X[LC]_(-1)*&_; に置き換えたいですね。つまり、負の値そのものに置き換えるのではなく -1 をかけるのでもできます。
動作としては、以下の途中結果がわかりやすいかと思います。
$ cat ShellGeiData/vol.41/roman | sed 'p;s_I[XV]_(-1)*&_;s_X[LC]_(-1)*&_;s_I_(1)_g;s_V_(5)_g;s_X_(10)_g;s_L_(50)_g' | sed 's_)(_)+(_g; 2~2s_.*_echo "&" | bc_' IV echo "(-1)*(1)+(5)" | bc XI echo "(10)+(1)" | bc LXXXIX echo "(50)+(10)+(10)+(10)+(-1)*(1)+(10)" | bc IX echo "(-1)*(1)+(10)" | bc XLIII echo "(-1)*(10)+(50)+(1)+(1)+(1)" | bc XX echo "(10)+(10)" | bc VIII echo "(5)+(1)+(1)+(1)" | bc
手元では動いていたのですがシェル芸 bot では動いていませんでした。
Ubuntu の sh が dash だったのが動かなかった理由だったようです。
Ubuntuの/bin/shはdashなんですよ
— eban (@eban) May 4, 2019
ls -l /bin/sh#シェル芸
numconv がすごい便利そうでした。珍しく AUR になかったのでその場では試せませんでした。 (AUR: Arch Linux の半公式ユーザーリポジトリ。ソースからビルドしたり、.debを展開してインストールするエキセントリックなパッケージがあったりする。)
numconv だと以下のように解けます。
$ cat ShellGeiData/vol.41/roman | sed 'p; s_.*_echo & | numconv_e' | paste - - | sort -k2n | cut -f1 IV VIII IX XI XX XLIII LXXXIX
次のファイルを辞書順にソートしてください。ただし、濁点がついているものが先に来るようにしてください。できる人はワンライナー中で「かきくけこがぎぐげご」の文字を使わないでください。
$ cat gagigugego かき氷 ぎ・おなら吸い込み隊 きつねうどん ぐりこもりなが事件 きききりん がきの使い くその役にも立たない げんしりょく発電 ごりらいも こじんてきにはクソ
- 例
がきの使い かき氷 ぎ・おなら吸い込み隊 きききりん きつねうどん ぐりこもりなが事件 くその役にも立たない げんしりょく発電 ごりらいも こじんてきにはクソ
# A8 できた
— のぎろ (@nogiro_iota) April 27, 2019
cat ShellGeiData/vol.41/gagigugego | uconv -x NFD | iconv -t utf16be | xxd -ps | tr -d \\n | sed 's_000a_&\n_g' | sed 's_...._& _g' | sed 's_ 3099 _ 13099 _g' | sort | sed 's_ 13099 _3099_g' | xxd -r -p | iconv -f utf16be #シェル芸
$ cat ShellGeiData/vol.41/gagigugego | uconv -x NFD | iconv -t utf16be | xxd -ps | tr -d \\n | sed 's_000a_&\n_g' | sed 's_...._& _g' | sed 's_3099 _-&_g' | sort -n | sed 's_-3099_3099_g' | xxd -r -p | iconv -f utf16be | uconv -x NFC がきの使い かき氷 ぎ・おなら吸い込み隊 きききりん きつねうどん ぐりこもりなが事件 くその役にも立たない げんしりょく発電 ごりらいも こじんてきにはクソ
3099 -> -3099)-3099 -> 3099) など、いろいろ逆手順で戻す
uconv -x NFD | iconv -t utf16be | xxd -ps | ... | sed 's_3099 _-&_g' -> sed 's_-3099_3099_g' | xxd -r -p | iconv -f utf16be | uconv -x NFC その場では -3099 ではなく 13099 に置き換えていましたが、U+0xxx の文字が 2 文字目にあると期待どおりにソートされないので -3099 のほうが汎用的です。
午前の部が活きそう #シェル芸
— のぎろ (@nogiro_iota) April 27, 2019
cat ./ShellGeiData/vol.41/gagigugego|uconv -x NFD|sort#シェル芸
— たいちょー (@xztaityozx_001) April 27, 2019
U+3099(゛) が先にソートされる理由がよくわかりませんが・・・・・・
久々の参加だったのですが、今回は比較的簡単で良かったです。（スリープソート以外は「これを知ってないと解けない」問題がないので。）
簡単でしたがそれでも疲れるのと、相変わらず全然知らないこと (uconv・numfmt・numconv など) が出てくるのがすごいです。
あと、もとの表現を残したまま計算したいときに sed 'p;s/.*/echo & | hoge/e' | paste - - のパターンが使えますね。A5・A7で使用しています。
