シェルスクリプトを何万倍も遅くしないためには —— ループせずフィルタしよう - Qiita
🐚 🐚 🐚 🐚 シェルスクリプトは遅すぎて使えない 普通の「速い言語」より何百、いや、何千倍も遅い 他のプログラミング言語を経験してからシェルスクリプトに入門し、このような感想を持つ方も多いのではないでしょうか。 実際、こういったことは往々にして起こり得ますので、「速い言語」を使うべきか否か見極めることは大事だと思います。 しかし、本当にシェルスクリプトというのは、そこまで遅いのでしょうか？ データ量が多い場合は常に最初から「速い言語」で書いた方がよいのでしょうか？ 実は、そうとも限りません。 シェルスクリプトにはシェルスクリプトなりの「速い書き方」があります。 この「速い書き方」で処理できる問題に関しては、シェルスクリプトは「速い言語」なのです。 では、「速い書き方」とは何かというと、端的には「たくさん繰り返されるループはシェルスクリプトで記述しない」ことです。 以下でこれを説明
カレントディレクトリより一つ上のディレクトリ名を取得する - tomoyamkungの日記
DIR_NAME=`pwd | xargs dirname` echo $DIR_NAME
シェルスクリプトで空文字列かどうか調べる。 - masa.edw the ハバネロブリーダー
シェルスクリプト(sh)で、ある変数が空文字列かどうかを調べるには、testコマンドの -n (Nonzero length) または -z (Zero length) を使う……と書いてあるんだけど、コツがいる。 if [ -n $HOGE ]; then echo "nonzero だよ。" fi ↑これはダメ if [ -n "$HOGE" ]; then echo "nonzero だよ。" fi これならOK。 要は、変数が文字列埋め込みされてないと上手く動かない。何故か？はよくわからない。(シェルに於ける変数の概念はどういうものなのか？) 真理表にまとめると、こんな感じ。 -n -z $UNDEFINED T T $ZEROLEN T T $NONZEROLEN T F "$UNDEFINED" F T "$ZEROLEN" F T "$NONZEROLEN" T F 検証用ス
$PATH から特定のパスだけを削除する - Qiita
今まで ~/sh に自分で書いたシェルスクリプトを入れてたんだけど、 ~/bin に入れといたほうがlinuxっぽい気がするので ~/sh/foo.bash を作っといて ~/sh/foo にリンクを置くことにしました。 それで環境変数PATHに入ってる ~/sh を消したいので ~/.profile を編集して $ . .profile すりゃ消えるだろうと思ってたら消えない！ 消し方 調べてみたら結構めんどくさそうだったけど、頭の良い人が既に解決策として関数を用意してくれてたのでそれを使うことにしました。自分の頭を使わなくて済むって素晴らしい。ヽ(´ー｀)ノ path_append () { path_remove $1; export PATH="$PATH:$1"; } path_prepend () { path_remove $1; export PATH="$1:$PATH"
【Linux】シェルスクリプトの関数の使い方！一通りまとめ
プログラミングをやったことがある人にはお馴染みだろうが、シェルスクリプトでも関数を作ることができる。 関数とは処理をまとめて、何度も使えるようにしたものだ。 シェルスクリプトは、もともとあまり複雑なプログラムを組むのに適してはいないが、関数を少し使って効率良く作成するくらいであれば構わないだろう。 このページでは関数の使い方についてご紹介する。参考にしてほしい。 簡単に関数とは？ 簡潔にいえば「処理をまとめたものが関数」である。中学校のとき習った次のような関数と同じだ。 y = 2x xに何かを代入したら、yの値も決まる。 基本的に「引数を受け取り、それを処理し結果を返す」というのが役割である。とはいえ、引数を受け取らなくても動く関数もあるので、同じ動作を何度も書かないでしてくれる便利な方法だと思っておけばいい。 関数を使用すると同じ処理をするコードを繰り返し記述する必要がなくなるのである
文字列から特定の文字を抽出する - Linux シェルスクリプト プログラミング
Linux シェル (sh) で、文字列から任意の文字を取り出す方法としては、外部コマンド sed を利用する方法があります。 方法としては、sed コマンドの -e オプションを使って正規表現を使用して、必要な文字列に置き換えるという方法をとります。sed に渡す文字列は echo コマンドを使って渡します。 DATA1="IP Address: 192.168.0.1/255.255.255.0 RETVAL=`echo "$DATA1" | sed -e "s/^IP Address:[ \t]\+\([0-9\.]\+\)\/[0-9\.]\+$/\1/g"` このようにすることで、DATA1 から "192.168.0.1" の部分を切り取って RETVAL 変数に取得することが可能になります。 他にもたとえば、次のような抽出が、sed を使ってできると思います。
「アット・ア・グランス性」確保のための8つの原則
シェルスクリプトで読みやすく、後から変更しやすいプログラミングを行うには、手続き型のプログラミング言語とは違ったポイントを押さえなくてはならない。筆者はそのコツを「アット・ア・グランス性」と表現している。（編集部） シェルスクリプトのコツ「アット・ア・グランス性」 シェルスクリプトのプログラミングには、手続き型のプログラミング言語とは違った癖がある。 CやJava、または人気のほかのスクリプト言語を使ってきたユーザーがシェルスクリプトを記述する場合、意識する、しないにかかわらず、これまでのプログラミング言語の流儀をスクリプトの書き方に持ち込むものだ。しかし、シェルスクリプトではそのアプローチはあまりうまくいかない。ちょっとばかり視点を変える必要がある。 シェルスクリプトは、一見すると手続き型のプログラミング言語のように見える。実際、そういった使い方ができる。しかしながらこれまでの経験から、
初心者向け、「上手い」シェルスクリプトの書き方メモ - Qiita
ここ最近、沢山シェルスクリプトを書くようになりました。 元々あまりシェルスクリプトを書いたこと無かったので、色々と勉強しつつ書いてるのですが、 他のプログラミング言語とはちょっと違って独特なクセというか、発見の度におぉー！ってなることが沢山あって楽しいです。 そんなわけで、最近学んだり参考にした中で特に感動したシェルの上手い書き方をまとめてみます。 きっとまだ知らないこととかもっと上手くやる方法なんかが沢山見つかりそうなので、 もっといいやり方あるよ！って方はコメントください 何もしない : (コロン)コマンド シェルを書いていた時に非常に欲しかったコマンドがこれ！何もしない！ : というコマンド(？)を利用すると、何もせずに終了ステータス0(つまり正常終了)を返します。 これが様々な事に使える万能コマンドで、これによって面倒なエラー処理を簡潔にできたり、 入力や出力のリダイレクト元/先と
tr コマンド | コマンドの使い方(Linux) | hydroculのメモ
tr コマンド 文字の置換や削除などを行うコマンド。 インストール 2016/03/17 Coreutilsというパッケージに入っているので、CentOSにもUbuntuにも始めから入っている。 特定の文字を改行に全置換するには 2013/09/21 cat ./src.txt | tr '>' '\n' > ./dst.txt この例だと、'>' という1文字を削除してかわりに改行にする。 trでは特定の1文字を別の1文字に置換する、という処理なので、 '>' の後ろに改行を付ける、ということができない。 改行を特定の文字に全置換するには 2014/08/01 以下は、改行をカンマに変換して全部で1行にする例。 cat ./src.txt | tr '\n' ',' > ./dst.txt ファイルの特定の文字を削除するには 2013/12/16 以下は、改行をすべて削除する例。 cat
read コマンドの使い方 - 拡張 POSIX シェルスクリプト Advent Calendar 2013 - ダメ出し Blog
拡張 POSIX シェルスクリプト Advent Calendar 2013、13日目の記事です。 今日のネタは組込みコマンド read の解説と使い方を紹介します。 read コマンドとは? read の基本仕様・動作は次の通りです。 シェルの組込みコマンドである。 標準入力を読み、一行読み込むか EOF になると終了する。 終了コードは、行を読み込めたときは 0、 読み込めなかったとき (EOF も含む) は 1 となる。 引数にシェル変数名が指定されていたら読み込んだ行を変数に格納する。 読み込んだ行の末尾に改行が付いていたら削除した値となる。 引数のシェル変数名が複数指定されていたら区切り文字 (デフォルトはスペースとタブ。シェル変数 $IFS の値) で分割して変数に格納する。 入力の区切り文字はバックスラッシュ \ で分割をエスケープすることができる。 代表的なオプションは次の
bashの正規表現マッチングの使い方 - adsaria mood
あるフリーウェアのインストール用bashプログラムを見ていたら次の様なものがあった。（以下の例は簡略化してある。） STRING="abc" if [[ "$STRING" =~ "^ab[cd]$" ]]; then echo "matched" else echo "unmatched" fi if文の条件表現の中に“=~”というオペレータがある。manを見ると =~ オペレータは文字列を正規表現と比較するとある。知らなかった。bashの文字列比較で正規表現が使えるとは。私は正規表現比較が必要な時はgrepに喰わせて判断していたのだが、これを使えば簡単にできる。 ところが、だ。上のプログラムが期待通りに動かない。上の例では =~ の左辺と右辺の正規表現はマッチするはずだが、結果は“unmatched”。色々と正規表現を変えてみたが、どれとしてマッチングしない。しかし、if文を次のように
bash でカンマ区切り文字を split して変数に代入
bash のシェルスクリプト内で、カンマ区切りテキストを分割して変数に入れたい場合。Perl や PHP の split みたいな動作をさせる方法です。 IFS 変数に区切り文字をセットしたうえで set コマンドを使用します。 #!/bin/bash TEXT='AAA,hoge,2345' IFS=',' set -- $TEXT echo $1 echo $2 echo $3 set コマンドはタブや空白区切りの値を $1, $2, $3, ……に代入します。IFS を変更することによりカンマ区切りに対応できます。 もしくは tr コマンドでカンマを空白に置き換えて配列に代入します #!/bin/bash TEXT='BBB,データ,3456' arr=( `echo $TEXT | tr -s ',' ' '`) echo ${arr[0]} echo ${arr[1]} echo
shell scriptでのgetoptsの使い方メモ - Qiita
#!/bin/sh while getopts l:a: OPT do case $OPT in "l" ) echo "$OPTARG";; "a" ) echo "$OPTARG";; esac done getopts l:a: の部分がオプションの指定。 :(コロン)をつけることで、引数があることを明示。 引数があることを明示した場合、$OPTARGでその引数を取得することができる。 $ ./test.sh -l hoge -a fuga ↓ $ hoge $ fuga と出力される。 参考: http://tech.lampetty.net/tech/index.php/archives/373 Register as a new user and use Qiita more conveniently You get articles that match your needs
Shellでgetoptsを使ってコマンドライン引数の解析 - oinume journal
だいぶ前の話、Perlを使わないでShellスクリプトで頑張っていた頃、Shellでコマンドラインオプションの解析をやる時は #!/bin/sh for OPT in $* do case $OPT in '-x' ) FLAG_X="TRUE" ;; '-y' ) shift FLAG_Y="TRUE" VALUE_Y=$1 ;; esac shift done if [ "$FLAG_X" = "TRUE" ]; then echo "Option -x specified." fi if [ "$FLAG_Y" = "TRUE" ]; then echo "Option -y $VALUE_Y specified." fi という感じで $* と shift を使ってやっていたのですが、最近 getopts なる素敵なビルトインコマンドを知りました。これを使うと上のスクリプトは下のよ
timeout - 時間制限付きでコマンドを実行する
timeout - 時間制限付きでコマンドを実行する こんなコマンドがあったのね。$ man timeout名前 timeout - 時間制限付きでコマンドを実行する書式 timeout [OPTION] DURATION COMMAND [ARG]... timeout [OPTION]説明 COMMAND を開始し、DURATION 経過後も実行中の場合は終了させます。 ... DURATION は浮動小数点数で指定し、追加で次の接尾辞を指定できます: 秒を表す 's' (デフォルト)、分を表す 'm'、時間を表す 'h'、日を表す 'd'。一定時間経過したら処理を自動で終わらせたい時に便利です。 【参考】 ・cron でうごかしているコマンドをタイムアウトさせる - tokuhirom's blog. ・Man page of TIMEOUT
My Future Sight for Past: How to initialize POSIX shell script
#posixismadvent この記事はPOSIX原理主義Advent Calendarの15日目だ。 POSIX原理主義によるシェルスクリプトの実行環境の最善と思われる初期化方法を解説する。結論としては，シェルスクリプトの冒頭に常に以下のコードを記述すれば，安全でより互換性が高くなる。 set -eu umask 0022 export LC_ALL='C' PATH="$(command -p getconf PATH):$PATH"Introduction POSIX原理主義の解説書である「Windows/Mac/UNIX すべてで20年動くプログラムはどう書くべきか」（以下「すべてで20年動く」と略記）のp. 37「1-9 環境変数などの初期化」において，シェルスクリプトの環境変数などの初期化方法として以下のコードが記述されている。 set -u umask 0022 PATH=
ShellScriptで作るウェブサーバー - Qiita
これだけで今いるディレクトリのファイルを http://localhost:3000 にアクセスするだけで見ることができます！ 知らない人もいると思うので書きました！ ぜひ役立ててください！ で終わると思ったか この世界では……shellscriptだけで動くか動かないかなんだよ！ なので、標準で入っているコマンドだけでウェブサーバーを立ててみようと思います。 Netcatというコマンド Netcat(nc)とは、Unix系のOSには大体標準で入っている、TCPやUDPのパケットを読み書きすることができるツールです。 例えば。tcpの通信を待ち受けることができます。 次のコマンドでcurlからのリクエストを読み取ってみましょう。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
逆引きシェルスクリプト/シェルスクリプトのインクルー の編集 - Linuxと過ごす
逆引きシェルスクリプト/スペース区切りの文字列を配列 の編集 - Linuxと過ごす
Linuxでのmkdirのm,pオプションの同時使用時の注意 - Qiita
