07/07/10 23:17:13 qGthZdME
UNIX板のスレを見ている方も多数おられるかと思いますが、
まあそれはそれとして、BASHウゼーとか言われる心配なく
平和にLINUX的スクリプト談義しましょうよ。
初めての自作スクリプト、自信ないから見てください。な初心者から
トリッキーな技を駆使した作品を披露したい、蘊蓄を語りたい上級者まで
いろいろな人に参加して頂けると嬉しいです。
perlやらPythonやらの話が混ざっても良いんでない？
【sed】シェルスクリプト総合@LINUX Part2【awk】
ｽﾚﾘﾝｸ(linux板)
ｽﾚﾘﾝｸ(linux板)
>>2-5あたりに色々と。
2:login:Penguin
07/07/10 23:18:45 qGthZdME
関連スレ
おまいら！ sed の使い方教えて下さいm(_ _)m@linux板
ｽﾚﾘﾝｸ(linux板)
【Shell】どのシェル使ってる？【Script】@LINUX板
ｽﾚﾘﾝｸ(linux板)
シェルスクリプト総合 その8
ｽﾚﾘﾝｸ(unix板)
sed@UNIX板
ｽﾚﾘﾝｸ(unix板)
２ちゃん画像落としまくりスクリプト@UNIX板
ｽﾚﾘﾝｸ(unix板)
連番のＨ画像/動画を一気にダウンロードする2
ｽﾚﾘﾝｸ(unix板)
ログを読みたい人はこちら
URLﾘﾝｸ(makimo.to)
3:login:Penguin
07/07/10 23:20:21 qGthZdME
参考リンク
bashで始めるシェルスクリプト基礎の基礎 @IT
URLﾘﾝｸ(www.atmarkit.co.jp)
シェルスクリプト（Bash）入門 CYBERAM Documents Project
URLﾘﾝｸ(cyberam.dip.jp)
IBM developerWorks
実例でわかるsed
URLﾘﾝｸ(www-06.ibm.com)
URLﾘﾝｸ(www-06.ibm.com)
URLﾘﾝｸ(www-06.ibm.com)
実例でわかるawk
URLﾘﾝｸ(www-06.ibm.com)
URLﾘﾝｸ(www-06.ibm.com)
URLﾘﾝｸ(www-06.ibm.com)
コマンドラインからのグラフィックス操作
URLﾘﾝｸ(www-06.ibm.com)
洗練されたPerl: MP3とPerlで遊ぶ
URLﾘﾝｸ(www-06.ibm.com)
URLﾘﾝｸ(www-06.ibm.com)
4:login:Penguin
07/07/14 09:56:17 42ZxWwqP
EUCで入力された文字列をＳｈｉｆｔＪＩＳに置き換える方法ってありませんか？
5:login:Penguin
07/07/14 11:17:49 29sQfd47
>>4
nkf とか iconv とか。
6:login:Penguin
07/07/14 22:31:28 Lb+uQxni
シェルスクリプトの引数にワイルドカードを渡すと、
該当するファイルがファイルシステム上にある場合はそのファイルが変わりに
引数として渡されるみたいですが、ワイルドカード自体を取得したいのです。
何か方法はないでしょうか？
ちなみにダブルクォーテーションをつければ展開されないのは知っていますが、面倒で。。
（例）
$ test.sh *.txt
$ echo $1
とするとカレントにあるXXX.txtを表示するのではなく
「*.txt」を表示したいのです。
7:login:Penguin
07/07/14 22:53:16 29sQfd47
>>6
呼ばれるスクリプトの側でなんとかしたいってことなら
無理だよ。
8:login:Penguin
07/07/14 23:13:50 Lb+uQxni
>>7
そんな気はしていましたが、そうですか。。
残念です。
9:login:Penguin
07/07/14 23:26:42 29sQfd47
呼ぶシェル側でなんとかするなら
$ set -o noglob
$ test.sh *.txt
とか。
10:login:Penguin
07/07/15 05:00:56 OzInTFfn
>>6
test.sh '*.txt'
(シングルコーテーションならてんかいされないはず)
11:login:Penguin
07/07/15 11:22:44 oGW94xFn
>2
おまけの関連スレ
シェルスクリプト相談室
ｽﾚﾘﾝｸ(tech板)
awkについて語るスレ $2
ｽﾚﾘﾝｸ(tech板)
12:login:Penguin
07/07/15 12:37:56 llPpP8sT
>>8
よく仕様がわからんが、スクリプトの多段階呼び出しで展開されたくないんだったら、
$ test.sh @.txt
みたいに、擬似ワイルドカード指定指定しておいて
使ううときに、
fs=`eco $1 | sed 's/@/*/'`
echo $fs
13:login:Penguin
07/07/15 22:24:45 ZpXAubZ6
>>6
complete とかで、補完のルールを作れるんじゃないか?
bashで補完スレ [UNIX板]
ｽﾚﾘﾝｸ(unix板)
14:login:Penguin
07/07/16 12:28:16 MK2VLXxK
すみませんちょっとヘルぽ
/homeの中にある複数のファイル・ディレクトリーをrm -rf したいのですが
/home/hogeとlost+found だけは消したくないので
何とかそれ以外を消す方法をご教示頂きたいのですが
おしえてたもれ
15:login:Penguin
07/07/16 13:05:49 fC+1yCpQ
>14
shell script関係ないが、lsでリストとって、リストから削除したくないファイル・ディレクトリを削除し、
その後 rm -rf `cat ～` なんかするのが間違いなくて確実だとおもー。
16:login:Penguin
07/07/16 13:13:37 hTbLQxc+
>>14
bashだったら、GLOBIGNORE="hoge:lost+found" に賭けてみたまえ
17:login:Penguin
07/07/16 13:32:26 xW/HZyHj
/home/hogeとlost+foundに書き込み禁止属性をつけてから一気に rm -rf
その後戻せばいいのでわ
18:login:Penguin
07/07/16 21:41:14 J/qZmNrt
>>14？!(xxx|yyy)
19:login:Penguin
07/07/17 03:37:44 I2w4SVYd
awk の出力をコマンドとして実行したいでつ。
どうやればいいでつか？
20:login:Penguin
07/07/17 10:02:57 ZxaQD0ZF
awk ... | sh
21:login:Penguin
07/07/18 08:18:48 Dw+iZryL
>>5
遅くなりましたが、ありがとうございます。
試してみたいと思います。
22:login:Penguin
07/07/18 16:34:40 cvC9pUm6
>>20
ありがとう。
できまちた。
23:login:Penguin
07/07/19 07:38:39 gg1Is+TJ
>>16 >>17 >>18
㌧クス
とりあえず、試験機でゴリゴリしてみます
24:login:Penguin
07/07/19 07:41:44 gg1Is+TJ
あ、>>15 も㌧クスです
その方法でやってみたいと思います
25:login:Penguin
07/07/20 01:54:45 bZea7ZdA
スクリプトに実行時間制限を設けたいんですが、いい方法はないですか？
厳密さは求めていません。暴走防止程度です。
（因みにLinux初心者のプログラマです、あまり複雑な概念は未だ理解できていないと思います。
今は大体こんな感じでやろうとしています、
(sleep 10; kill $$)&
時間制限を設けたいコマンド
これだと、時間内に終了しなかったとき、スクリプトのみ終了し、実際に終了させたいコマンドは生き残ります。
時間内に終了したときにkillさせないために最後に kill `jobs -p` すると「(sleep 10; kill $$)&」は終了しますが、sleepだけが残ります（自然消滅はする
だからといって kill 0 とするとこのスクリプトの呼び出し元まで死んでしまいます。
プロセスを kill するときに、その子も殺せればいいんですが如何でしょうか。
26:login:Penguin
07/07/20 02:25:54 zucTG+iZ
>>25
ps --ppid とか pstree -p とかで
子の pid を調べれば
kill できると思う。
27:login:Penguin
07/07/20 07:34:06 0zbWXhyq
ulimit -tはだめ?
CPU使った時間になっちゃうけど。
28:login:Penguin
07/07/20 13:11:40 VbE5NJtk
killのman見ればprocess groupを殺す方法書いてあるだろうに。
29:login:Penguin
07/07/22 01:17:56 MkzMxIYh
>>26
pstree -p からpidだけ取り出す方法が分かりません。
ps --ppid の再起で殺すようにしてみましたが思い通り動いてくれません。
間違えている可能性は大いにありますが。
>>27
CPU時間でも構いません。寧ろその方が良いかもしれません。
ありがとうございます。調べてみます。
>>28
でしょうね。
30:login:Penguin
07/07/24 02:36:44 TdZoIfh3
>>29
% pstree -p 親PID
親cmd(親PID)-+-子cmd(子PID)
と表示されるんだから、
% pstree -p 親PID | perl -nle '/親PID\)[^\(]+\((\d+)\)/ && print $1'
子PID
とならないかな？awkでもsplitを使えば同じようにできると思う。
そもそもperl使うならpstreeもkillも内部で呼び出せば済むけど。
それ以前にプロセスをアレコレする関数かmodがあるんだろうな．．．
31:login:Penguin
07/08/04 23:01:23 prsNz29A
awkの区切り文字に'|'を指定するにはどうすればいいですか
awk -F'|'
ではパイプとみなされてしまいます
32:login:Penguin
07/08/04 23:37:42 dhi36EzE
やってみた。
% echo 'a|b|c' | gawk -F'|' '{print $2}'
b
33:login:Penguin
07/08/05 03:46:06 a+1tcmkL
>>31
-F'[|]' とか
34:login:Penguin
07/08/05 23:10:51 ftJrAaPL
非rootのアカウントからシェルを実行して
規定のHDDをマウントしたいと思っています。
問題は非rootなのでmountの実行権が無い点です。
sudo は設定方法がよく分からないので、
もちょっと簡単なやり方ないかと探しているのですが
何かよい方法ないもんでしょうか？
スクリプトの中でrootでログインして、そのまま
実行してほしい。(passwd入力はOK)
ちなみにSuSE 10.2を使ってます。
35:login:Penguin
07/08/05 23:39:27 YQ3bjemY
>>34
sudo の設定くらいわかれ。
そんなに難しくないよ。
36:login:Penguin
07/08/06 01:50:25 xhWrZGpQ
sudo -u USER /dev/hd ...
いかん、だるい。
37:login:Penguin
07/08/06 02:18:34 AKmvozj+
>>34
/etc/fstabの規定のHDDのエントリ内に user というオプションを書いておけば、
そこは一般ユーザでもmount/unmountできるようになる。
もちろんこの場合、mountコマンド自体のxビットは、一般ユーザが実行できるように
設定する必要がある。
38:login:Penguin
07/08/06 22:17:00 LTHEPNn8
テキストファイルが2つあると仮定して、(a.log、b.txt)
a.logはソフトのログファイル。
b.txtはerror、badなどの複数行の文字列が入っています。
で、a.logに対して、b.txtの中を一行ずつgrepさせたいときはどうすればいいの？
↓のようにしたい。b.txtは50行程度の行数があるとする。
grep -i error a.log
grep -i bad a.log
grep -i ...... a.log
などをしたい。
39:login:Penguin
07/08/06 22:32:01 kQOiX48t
$ cat b.txt | while read keyword; do grep -i "$keyword" a.log; done
bshしか知らね。
40:login:Penguin
07/08/06 22:50:29 q2/C5Z+3
grep -f b.txt a.log
41:login:Penguin
07/08/09 03:57:05 q+NJZ5PJ
スクリプトの中から、
スクリプト自身のパスを知るにはどうすればいいですか?
42:login:Penguin
07/08/09 06:28:33 EHaDR+6/
echo $0
43:login:Penguin
07/08/09 08:01:28 NwjhxE+f
>>42
URLﾘﾝｸ(www.nurs.or.jp)
44:login:Penguin
07/08/09 11:34:05 EHaDR+6/
>>43
俺？ $0で十分だと思うけど？
45:login:Penguin
07/08/09 21:51:00 8UsjPRp6
うわ。あさたくの文章、久しぶりに見た。
46:login:Penguin
07/08/10 18:42:50 hRezB52r
こんなの作った。
#!/bin/sh
for i in "$@"
do
a="$(echo $i | nkf -w)"
mv $i $a
done
convmv は元の文字コードを指定しなきゃならないのが面倒なので。
良かったらどぞ。
47:46
07/08/10 18:44:30 hRezB52r
書き忘れたので一応。
./myconvmv.sh *
とかで使える。
48:38
07/08/11 02:02:30 h4twNLWe
>>39
>>40
できました。神様ありがとう。
49:login:Penguin
07/08/15 18:16:19 oxw3opBU
・ファイルを指定フォルダ内へコピー
・同名ファイルが存在する場合は、
既に存在するファイル名を「ファイル名.1」へ変更し、
既にファイル名.1が存在しているのであれば、それをさらにファイル名.2へ変更し、、、（繰り返し）
というコピーシェルスクリプトがほしいんですが、
簡単な記述方法などがあったらおながいします。
50:login:Penguin
07/08/15 18:22:48 vI6OWTR9
>>49
自分ではどこまでできたの?
51:49
07/08/15 18:30:05 oxw3opBU
シェルスクリプト自体ほとんど作成経験がないので、
mv とかのオプションでそんな機能ないかな～と
調べている程度の状態です。
--------------------------------------------------
・同名ファイルが存在する場合は、
既に存在するファイル名を「ファイル名.1」へ変更し、
既にファイル名.1が存在しているのであれば、それをさらにファイル名.2へ変更し、、、（繰り返し）
--------------------------------------------------
この部分を数行で教えていただけるとありがたいでつ。
ループ処理が必要になるのはなんとなく予想がつくのですが、、、
52:login:Penguin
07/08/15 18:34:51 vI6OWTR9
>>51
ファイルが何番まであるかを先にチェックして
番号大きい方から順に mv してくのが楽かな。
[ とか expr 使え。
53:login:Penguin
07/08/15 23:30:14 BP+0zqca
番号をrotateすることに大した意味がないことに気付き、--backupオプションとかで安易に済ます。
そんな自堕落な道を私は選びました。
54:login:Penguin
07/08/16 07:16:56 D/eLf54Q
ディレクトリにあるすべての*.cファイルを
全部*.cppにするにはどういう風に書いたらよいのでしょうか？
mv *.c *.cpp
としてみましたがだめでした
どなたかお知恵を...
55:login:Penguin
07/08/16 07:57:42 Uoi1O64b
rename コマンドで出来そうな気がする。
56:login:Penguin
07/08/16 10:10:37 MWEjh3WB
まあそうだけど。シェルスクリプトスレであることだし
for f in *.c; do mv "$f" "${f}pp"; done
57:login:Penguin
07/08/16 13:33:29 D/eLf54Q
>>56
Thx，できますた！
58:login:Penguin
07/08/23 16:17:17 n9QZBMiJ
flashの動画をダウンロードできる
シェルスクリプトある？
59:login:Penguin
07/08/23 16:36:59 lPn22JjI
kurekure厨
60:login:Penguin
07/08/23 16:53:47 C+I5hIDu
>>58
普通にwgetでダウンロードすればいいだけでは？
youtubeから簡単に落としたいとかであればyoutube-dlとかが便利。
61:login:Penguin
07/08/24 19:56:13 k2Yrnokn
すごく基本的なことなんだろうけど、
いくつかのディレクトリの中にあるファイルのそれぞれの名前を変数に入れたいんだけど、
files=ls dir* | sort
for i in files
do
done
みたいなことは出来ませんか？
要するに標準出力する内容を変数に入れたいだけなんだけど。
62:login:Penguin
07/08/24 20:25:50 iKvrTLai
>>61
「コマンド置換」でぐぐってみ
63:login:Penguin
07/08/24 20:43:22 k2Yrnokn
>>62
理解できました。どうもありがとりんこです。
64:login:Penguin
07/08/26 16:36:55 sDCP6Pah
ファイル一覧だと長大になって溢れるので
ls ... | sort | while read i; do echo $i; done
とかも定番。
65:login:Penguin
07/08/27 08:44:07 mTK43/6/
for i in dir*
do
done
sortを挟むのは良くわからんが、単純にこんなんで済む話じゃね？
66:login:Penguin
07/08/27 18:32:24 Vup2OsE3
>>64
それだとlsの時点ですでに溢れる
67:login:Penguin
07/08/27 20:04:00 5Y4ThyNx
find DIR -exec (ここで好きなことやれ) \;
68:login:Penguin
07/08/28 00:17:04 Gt/lw90m
/home/200708/1200・・・1300･･･1400/と100刻み1800までディレクトリーがあるとして
A.PDFとかファイルが格納されてて
0KB～150MBなら 「ne-yo」
500～600MBなら 「OK」 とfile.txtを出力したいのでつが・・・・・
if,thenの繰り返ししかないでしょうかね？
69:login:Penguin
07/08/28 00:58:46 is4Tjxw4
なんのバイト数？ そのディレクトリ内ファイルの総和？
70:login:Penguin
07/08/28 08:13:17 k11zEdxe
こんな感じ？
$ du -s * | awk '{ print $2," ", ($1 > 10000 ? "ne-yo" : "OK") }'
条件文のところは自分で書き換えてくれ。
71:login:Penguin
07/08/28 09:07:28 LHhLJxDo
なるほどdu か。。。。と、>68とはちがう漏れ様が感心しますたーｗ
72:login:Penguin
07/08/28 14:07:23 LHPFC9xp
du 以外だと例えば何が？
73:login:Penguin
07/08/28 16:21:13 N3nQTqrG
すいません、初心者の質問です。
# time = 0.1000000000000000E-01
0 0.0000000000000000E+00 0.9108669739482692E-01 0.2058642824721793E-04 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00
1 0.3175362884490020E+01 0.5150471547462544E+01 0.2241689225773500E-03 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00
# time = 0.2000000000000000E-01
0 0.0000000000000000E+00 0.9108669739482692E-01 0.8246429583076927E-04 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00
1 0.3176583636040012E+01 0.5152080697165893E+01 0.8959185481550624E-03 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00
2 0.1132676183258557E+01 0.5482797684864557E+01 0.1300893227929982E-03 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00
# time = 0.3000000000000000E-01
0 0.0000000000000000E+00 0.9108669739482692E-01 0.1858117181080544E-03 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00
1 0.3178027531327324E+01 0.5153971284976635E+01 0.2013740280923297E-02 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00 0.0000000000000000E+00
という形式で出力されるデータで、# time = 0.2000000000000000E-01からはじまって、# time = 0.3000000000000000E-01の手前までを切り出すスクリプトを教えてもらえないでしょうか。できればawk(perlかrubyでも構いません)で教えていただけるとありがたいです。
74:login:Penguin
07/08/28 16:31:19 kk6ZVe0N
>>73
つcsplit
75:login:Penguin
07/08/28 22:47:28 WiEkAmOg
cat /tmp/test.txt | gawk '/^# time = 0\.3/{exit} /^# time = 0\.2/{flag=1} flag==1 { str = str$0"\n" } END{print str}'
こんな漢字か。酔っているので合っているのかどうだか。
0.000000．．．の部分は付け足してクレイ
76:login:Penguin
07/08/28 23:05:57 WiEkAmOg
cat /tmp/test.txt | gawk '/^# time = 0\.20+E-01 *$/,/^ *$/ {print $0}'
あと仕様の意味が、#time=...から始まる一ブロックだけ出す（空行が出たらオシマイ）
という意味ならもっと単純になる
77:login:Penguin
07/08/28 23:48:14 Gt/lw90m
>>70 すげーまさにOK!ですた！
awk の ? と : の使い方に感動
>>71-72 ls -lh とかでやろうとしたのは漏れ様も同じｗｗ
78:login:Penguin
07/08/29 12:08:46 NEtL1MxO
>>74
>>75
さっそくにありがとうございます。
試してみます。
79:login:Penguin
07/08/29 22:41:00 4pERO676
再帰的に２つのディレクトリをdiffしたいのですが存在するかしないか
と違うファイルだということだけわかればいいので
わかりやすく比較する方法はありませんか？
diffのマニュアルみてもそれらしいのはないようで
80:login:Penguin
07/08/29 22:50:35 UIgvqpQI
>>79
diff -rq dir1 dir2 ではだめなの？
81:login:Penguin
07/08/29 22:51:26 N3MeiS9e
>>79
URLﾘﾝｸ(www.gnu.org)
$ LANG=C diff -r dir1 dir2 | grep Only
とかである程度分かるかも。
82:login:Penguin
07/08/29 22:52:42 N3MeiS9e
む、-qで違いが分かるのか orz
83:login:Penguin
07/08/29 23:16:46 9GyP78LH
デジャヴなんだが俺だけか？
84:login:Penguin
07/08/30 01:02:14 F11xsKF5
パッケージようなのバージョンを比較する方法がわかりません。
イメージ的には、こんなことがしたいんです↓
----------------------------------
hoge="1.3.37"
foo="1.11.12"
if [ "$hoge" -gt "$foo" ]; then
echo "OK"
else
echo "NG"
fi
----------------------------------
これだと、以下のようjにエラーになってしまいます。。。。
[: 1.3.37: bad number
NG
85:login:Penguin
07/08/30 04:22:00 GmS5dPb3
hoge="1.3.37"
foo="1.11.12"
hoge=`echo $hoge | gawk -F. '{print (($1*100+$2)*100)+$3}'`
foo=`echo $foo | gawk -F. '{print (($1*100+$2)*100)+$3}'`
if [ "$hoge" -gt "$foo" ]; then
echo "OK"
else
echo "NG"
fi
ピリオド区切りの数が固定（この場合は3)
ピリオド内の桁数が固定（この場合は1-2桁）
という条件付だけど。これらが不定なら、$1,$2,$3．．．を$iにして、
NFまでループさせればいいと思う
86:login:Penguin
07/08/30 07:19:55 QpfKAJKg
そのバージョン表記の書式にもよるけど、
oldv=1.11.12
newv=1.3.37
として
if [ `echo $newv -gt $oldv | sed 's/\.//g'` ]; then
echo OK;
fi
もしくは、
if [ `echo $newv.$oldv | tr . ' ' | xargs printf "%d%.3d%.3d -gt %d%.3d%.3d"` ]; then
echo OK
fi
あたりでどうかな。
87:login:Penguin
07/08/30 18:00:56 bHskgKzh
>>84
rpmver ってのがある。
$ rpmver -v 1.3.37 1.11.12
RPM version 1.3.37 is lesser than version 1.11.12.
Vine,VineSeed の RPMS.main SRPMS.main にある。
他のディストリは知らないけど
パッケージが用意されてるかもしれない。
88:login:Penguin
07/08/30 23:05:03 nhWZyH15
$ which rpmver
rpmver not found
うえーん。。。
89:login:Penguin
07/08/31 00:47:12 U99N+hxP
>>84
Linux板だからbashでもいいよね。
#!/bin/bash
v2n () {
local IFS=.
set $1
echo -n $(($1 * 1000000 + $2 * 1000 + $3))
}
hoge="1.3.37"
foo="1.11.12"
echo $(v2n $hoge) $(v2n $foo)
if [ $(v2n $hoge) -gt $(v2n $foo) ]; then
echo "OK"
else
echo "NG"
fi
添削してぇ
90:73ですが
07/09/01 15:15:18 uwRTp3HZ
>>76
おくればせながらありがとうございました。
91:73ですが
07/09/01 22:39:45 uwRTp3HZ
>>76
仕様はおっしゃるとおりです。
その際のスクリプトも教えてくだされば幸いです。
なお、他のスクリプトは現在のところ動作していません。わたしの知識不足なのだろうと思うのでもうすこし調べてみます。
#0は補ってはあるのですが...
ついでといってはなんですが、awkの本でおすすめの本などありましたら教えていただけませんか？
92:login:Penguin
07/09/02 04:19:30 WMH1r7G1
>>91
オライリーの sed & awk
てかawkの本なんて何冊もないって。
93:login:Penguin
07/09/02 08:46:56 ToB27R8d
本命 足立さんの訳してる awk 本
大穴 awk 256 本
94:login:Penguin
07/09/02 20:47:44 VmAuZafy
awk256倍はDOS時代からある骨董本で内容もふざけまくっているが、初心者が
「正規表現」「連想配列」という二つのキモを学習するにふさわしい内容。
読み終わったあとも、巻末の関数一覧がずっと使える。未だに刷を重ねてるけど
愛用者もおおいんじゃない？
大して御本家3人の書いたawk本は内容が高度な上に散発的で、調べたいことが
すぐに出てこなくて使いにくい
>>91
>>76のがその仕様のスクリプトなんだけど。うまく動かないのは、スペースとかが
ちゃんとコピペされてないからなんじゃないの？
95:73ですが
07/09/02 21:37:03 71yMDj2y
>>92-94
本の紹介ありがとうございました。
>>94
気づきませんでした。すいません。スペースの問題などを再確認してみます。
またなにかあったら伺うかもしれません。よろしくおねがいします。
96:login:Penguin
07/09/02 21:40:05 QLbcFUyG
DOS時代ってのはいつまでを言うんだ？
97:login:Penguin
07/09/02 21:55:05 ToB27R8d
awk 256 本の話の文脈としては、MS-DOS上のawk実装の時代かな
98:login:Penguin
07/09/02 22:03:47 VmAuZafy
>>97
そう。今の版じゃ改訂されてるのかもしれないが、俺の持ってるのだと
gawkをDOSに移植したjgawkとかいうのを下敷きにしていて、中には486を乗せたキューハチだと
スクリプトの速度が向上したとか、パイプの実行速度が遅いのはUNIXみたいな本物のパイプじゃないからとか、
そんな話題が満載
99:login:Penguin
07/09/02 22:04:37 QLbcFUyG
MS-DOS上のawk実装の時代ってのはいつを言うんだ？
100:>>84
07/09/04 00:34:58 3rxVdbk9
おくらばせながら、ありがとうございますm(_ _)m
101:login:Penguin
07/09/06 08:15:09 33eRwNa2
指定されたディレクトリ以下にあるディレクトリ一覧を返してくれるコマンドはありませんか？
/data/ をTOPディレクトリとしますと
/data/hoge/
/data/piyo/
/data/moge/
等が帰ってくるコマンドです。で、この際 /data/hoge/direc/ みたいに、TOPディレクトリの
孫ディレクトリ以下は返さないで欲しいんです。TOPディレクトリの子ディレクトリのみを
返して欲しいのです。そして for TARG in command; do 処理; done のように
for文で1つ1つのディレクトリを処理したいのです。
それからもう1つ、指定されたディレクトリ以下の子ディレクトリの数を返すには
ls -l /data/ | grep ^d | wc -l
でいいのでしょうか？ディレクトリだと ls -l した時に必ず最初が dから始まるので
これでディレクトリのみがマッチして、後はwcでその行数を数えればいいかと思っているのですが
今の所これでちゃんと動作していますが、不具合が発生するようなケースは想定されますか？
ディレクトリの数も孫ディレクトリ以下は数えません(再帰処理しない)。
昨日 basename と言う便利なコマンドを知った程度のレベルの人間ですので
awk や sed 等の難しいコマンドはなるべく使わずに実現したいのですが、出来ませんかねぇ？
宜しくお願い致します。
102:login:Penguin
07/09/06 08:27:57 QTrKtnCG
>>101
ls -d /data/*/
103:login:Penguin
07/09/06 08:30:08 QTrKtnCG
/data/.x/ とかも考慮したいなら find で。
104:login:Penguin
07/09/06 08:31:55 33eRwNa2
>>102
あっちゃー・・・・そんな簡単なコマンドでこんな素晴らしい出力が得られるんですか！
LinuxのCUIって本当に高機能ですね・・・素晴らしいです。本当にありがとうございます。
ls -l /data/ | grep ^d | wc -l
ってやるより
ls -ld /data/*/ | grep ^d | wc -l
ってやる方が良いのでしょうか？どんなファイルやディレクトリがあっても確実に動作するような
書き方をしたいのですが・・・。
105:login:Penguin
07/09/06 08:32:01 QFjDOBHf
属性が見えて良ければ
ls -d /data/*|grep "^d"
106:login:Penguin
07/09/06 08:33:56 QFjDOBHf
-l忘れてた
107:login:Penguin
07/09/06 10:26:24 QTrKtnCG
>>104
> ls -ld /data/*/ | grep ^d | wc -l
なんで grep するんだ?
108:login:Penguin
07/09/06 11:58:40 rZQRUej8
ls -1d /data/*/ /data/.*/
/data/../ もヒットするのが難点だけどな。ってかあれだ。つ「man ls」
109:login:Penguin
07/09/06 16:47:27 40ywKZW4
>>101
求めてることが出来たのであればどんなコマンドでもいいけど
find の使い方も知っておいたほうがいいと思う。
> 不具合が発生するようなケースは想定されますか？
> ディレクトリだと ls -l した時に必ず最初が dから始まる
ディレクトリへのシンボリックリンクがあった場合の扱いをどうするか。
さらに言えばリンクの対象がどこにあるか
ln -s /data/A /data/B と ln -s /tmp/C /data/B の違いとか。
110:login:Penguin
07/09/06 16:55:32 QTrKtnCG
ls -Ap /data | grep /$
でよかったか。
>>109
> find の使い方も知っておいたほうがいいと思う。
同意。
111:login:Penguin
07/09/06 17:08:55 ZccH/OF/
なのに誰もfindを使った答を書かないのはなんでだw
101への課題?
112:login:Penguin
07/09/06 20:00:39 QTrKtnCG
>>111
それもあるし、単にめんどうだし。
113:login:Penguin
07/09/07 11:30:33 BZSReuYl
んじゃ、俺の回答に採点してくれ
find /data -type d -maxdepth 1
114:109
07/09/07 17:14:59 NgwMB5/h
>>113
二ヶ所で減点。
1) find の出力に TOPディレクトリ(/data 自身)も含まれてる。
>>101 を読むとTOPディレクトリそのものは不要だと思う。
2) GNU find version 4.2.27 だと -maxdepth の位置で warning が出た。
find: warning: you have specified the -maxdepth option after a non-option argument -type, but options are not positional (-maxdepth affects tests specified before it as well as those specified after it). Please specify options before other arguments.
115:login:Penguin
07/09/07 17:35:19 BZSReuYl
>>114
なるほど。非常に参考になった。
模範解答を頼む。
116:login:Penguin
07/09/07 17:39:52 aiZtBudz
>>115
もう一回自分で書いてみたら?
117:login:Penguin
07/09/07 19:24:55 Txvf/Wl4
find /data -mindepth 1 -maxdepth 1 -type d -exec ...
shopt -s nullglob
for i in /data/{,.{[!.],.?}}*/
do ...
こんなんでいかが
118:login:Penguin
07/09/07 19:45:52 ezpNZgi5
cat hoge | awk
に似ている。
119:login:Penguin
07/09/07 20:30:25 BZSReuYl
>>116
OK。これでどうだ？
find /home/* -maxdepth 0 -type d
120:login:Penguin
07/09/08 04:46:18 WlyFgm6n
>>117 でもう答え出てるじゃん。
>>119
/home/.xxx/ とかが出ない。
* 使うなら find 使う意味ない。
121:login:Penguin
07/09/08 14:42:47 vllGfkN4
>120
>* 使うなら find 使う意味ない。
上下別々の回答なんじゃないの？
122:login:Penguin
07/09/11 03:08:21 997sWGjJ
bashrc の書き方もこのスレでいいですか？
123:login:Penguin
07/09/12 11:40:47 EatE1MlG
#!/bin/sh -f
ls *.dat > list.txt
なぜか走らん。
124:login:Penguin
07/09/12 17:16:53 A49nKXNq
>>123
子プロセスとして(?)起動するシェルに -f が渡らないんだと思う。
/bin/sh -f hoge.sh とか
あらかじめ /bin/sh -f で起動したシェルで
./hoge.sh みたいにすると
-f が有効になる。
125:login:Penguin
07/09/12 17:21:21 EatE1MlG
>>124
エラーで *.dat： ファイルもディレクトリもありません とでる
ワイルドカードが原因かと思ったけど、hoge*でも同様のエラー
シェルにしたら走らず、コマンドラインで直接投げたら走る
なんでだろ
126:124
07/09/12 17:27:12 A49nKXNq
>>125
/bin/sh -f の -f がどんな意味かわかってる?
あと、シェルとシェルスクリプトはちゃんと区別したほうがいい。
127:login:Penguin
07/09/12 17:33:44 EatE1MlG
!/bin/cshで走ったわ
コンソールがcshだった
128:login:Penguin
07/09/12 20:01:20 9HkBr7tD
複数のpasswdファイル(passwd_A、passwd_B)を結合して、同じユーザ名があった場合
passwd_Aのものだけを残すというようなことをしたいのですがどうすればよいでしょうか？
129:login:Penguin
07/09/12 20:12:55 nfcPR4Gc
いったんファイルを結合する
一行ずつ上から順に読んでパスワードファイルに書き込む
書き込んだらそのユーザー名を別ファイルに書き出す
その別ファイルにユーザー名がないことを確認してから
パスワードファイルに書き込めばよい
130:login:Penguin
07/09/12 22:19:22 qqfxe9V8
while read t ;do
if [ "`grep ^${t%%:*}: passwd_A`" ];then
continue
else
echo $t >>passwd_A
fi
done <passwd_B
131:login:Penguin
07/09/12 22:53:21 SML918nz
んだば awk で。
awk -F: '{
t[$1] = $0;
}
END {
for (e in t)
print t[e];
}' passwd_B passwd_A
132:login:Penguin
07/09/12 23:49:46 lhLTsTba
awk -F: '!($1 in t){print;t[$1]=1;}' passwd_A passwd_B
133:login:Penguin
07/09/13 21:53:28 8j1+julM
aaa.txtの中身
20070109,170000,170000,167000,170000,4
20070110,168000,168000,168000,168000,10
20070115,171000,171000,163000,169000,500
を
2007/01/09,170000,170000,167000,170000
2007/01/10,168000,168000,168000,168000
2007/01/15,171000,171000,163000,169000
のように
YYYY/MM/DDと表示を変更する
最後の,からあとを削除してbbb.txtとして出力したいと思っています
どのようにすればいいものでしょうか
４文字目と５文字目の間に/を挿入するということがsedでできなくて悩んでおります
よろしくお願いいたします
134:login:Penguin
07/09/13 22:06:02 OVx1tSlg
cat /tmp/aaa.txt | gawk -F, '{printf("%04d/%02d/%02d,%s,%s,%s,%s\n", substr($0,1,4),substr($0,5,2),substr($0,7,2),$2,$3,$4,$5)}' > bbb.txt
135:login:Penguin
07/09/13 22:08:03 G9V8Phhb
\(\)でグルーピング、\{\}でマッチする回数の指定。
グルーピングしたパターンは後で\1,\2で参照出来る。
\を忘れるなよ。
136:login:Penguin
07/09/13 22:09:20 G9V8Phhb
あ、ごめん、>135はGNU sedの話
137:login:Penguin
07/09/13 22:25:32 8j1+julM
>>134
ありがとうございます
gwakというのも勉強してみようと思います
138:login:Penguin
07/09/13 22:52:13 8j1+julM
>>134
manを見てみたら いろんなところで使用できそうです
本当にありがとう
139:login:Penguin
07/09/13 23:24:02 saILvvtf
>>134
catは要らんだろ。
140:login:Penguin
07/09/14 00:50:00 uh85VpLs
正規表現も勉強した方がよろしいかと>>138
141:login:Penguin
07/09/14 12:28:52 hH9EcwDJ
ある XXX っていう名前を含んだプロセスを全て殺したい時、
ps aux | grep XXX | grep -v grep | awk '{print $2}' | kill
ではだめなのに
ps aux | grep XXX | grep -v grep | awk '{print $2}' | xargs kill
ではOKなのはなぜですか？
142:login:Penguin
07/09/14 12:34:24 18sjQ9F0
>>141
kill って標準入力を受け付けないんじゃない。
ところで pkill XXX じゃだめなの？
143:login:Penguin
07/09/14 12:37:30 hH9EcwDJ
>>142
そうなのかなと思って
for p in $(ps aux | grep XXX | grep -v grep | awk '{print $2}'); do
kill "$p"
done
ってのもやってみたんですが、だめだったんですよ。
144:login:Penguin
07/09/14 17:32:35 Ney/3ygS
スクリプトでタイマー作れませんか？
一定間隔ごとに単純にコマンド出すだけじゃなくて
処理ごとに条件分岐してタイマーを止めたりコマンドが成功
するまで繰り返したりしたいのですが
145:login:Penguin
07/09/14 20:21:33 KxObz0sB
>>144
sleep使って、て程度で良いなら作れるような気しかしないんだけど、具体的にどうしたいのか書いたのが良いと思うぞ。
146:login:Penguin
07/09/14 20:32:43 RM0kquC+
>>144
どこまで出来たの?
147:login:Penguin
07/09/14 23:57:41 XHXILi6a
>>143
だめってどうダメだったのかわからんと。
for p in $(ps aux | grep smbd | grep -v grep | awk '{print $2}'); do
"kill "$p"
done
これでやったらちゃんと動いたよ。スクリプトの問題じゃなくて
単に権限がなくてkillできなかっただけでは？
148:login:Penguin
07/09/15 16:55:13 /cIKvz/T
>>147
さっきやってみたら出来た。。。
間違って mplayer を40個くらい起動してしまって、そこでそのスクリプトを
叩いたつもりだったんだけど、焦ってなんか間違ってたのかもしれない。
とりあえず今度からは xargs のほうを使うようにするよ。
149:login:Penguin
07/09/15 17:28:32 YiwEKkpX
いやだからpkill使えって
150:login:Penguin
07/09/15 17:49:23 X+i1f7J3
command | command みたいな
例
cat hoge.txt | grep piyo
書き方があるじゃないですか？ cat hoge.txt で出力される標準出力をパイプかませて
その出力内容に対して grep piyo をかける と言うような。
これと
xargs ってコマンドがあるじゃないですか？その違いがよく分からないのですが・・。
cat hoge.txt | xargs grep piyo
みたいな？
151:login:Penguin
07/09/15 18:13:14 YiwEKkpX
「cat hoge.txt | xargs grep piyo」＝「grep piyo `cat hoge.txt`」
152:login:Penguin
07/09/15 18:42:58 X+i1f7J3
>>151
ほぉほぉ・・・・
cat hoge.txt | xargs grep piyo が
grep piyo `cat hoge.txt`
と同じならば
cat hoge.txt | grep piyo
は
grep piyo hoge.txt
ん？なんか混乱してきた・・・イマイチはっきりと分からない・・・
153:login:Penguin
07/09/15 19:03:27 8eNJORpc
argっていうぐらいだから引数に展開してくれるのだろ
その場合hoge.txtの中身はファイル名でないとだめ
154:login:Penguin
07/09/15 19:15:07 jJyNjt7I
もう分かってるかもしれないけど、xargsは標準入力をコマンドライン引数に変換するだけ。
echo 'file1 file2 hoge' | xargs rm
↓
rm file1 file2 hoge
155:login:Penguin
07/09/15 19:47:59 X+i1f7J3
むぅ・・・
echo `file1 file2 hoge` | xargs rm
が
rm file1 file2 hoge
となるならば
echo `file1 file2 hoge` | rm
は
どう展開されるんですか？ すみません、ほんと頭弱くて。
156:login:Penguin
07/09/15 19:51:39 YiwEKkpX
引数と標準入出力の区別がまだついてなくて、全部「入力」として
ごちゃまぜの段階でしょ？まずそれを考えてみるんだ＞155
157:login:Penguin
07/09/15 23:18:03 +DsxitZ3
>>154の echo 'file1 file2 hoge' | xargs rm
>>155の echo `file1 file2 hoge` | xargs rm
どこが違うか理解してからにしろ
158:login:Penguin
07/09/15 23:25:38 PpA5ThvC
こんな初歩の初歩みたいなことに、どうしてそんなに高飛車になれるんだ。
159:login:Penguin
07/09/16 01:01:56 S5o7UTSR
初歩の初歩は自力で身に付けてから来てくれよ。
160:login:Penguin
07/09/16 01:06:18 BSYCrrV+
タコタコ
161:login:Penguin
07/09/17 04:16:34 nqz563FT
convmv -r -f sjis -t utf-8 * --notest
で、再帰的にカレントディレクトリ以下のファイル、ディレクトリ全てに対して
sjisからutf-8に変換をかけるコマンドを打ったのですが、sjisとeuc-jpが混在していて
convmvの仕様だと 1ファイルでも -f で指定した文字コード以外の文字コードのファイルが
存在した場合はそこで全ての変換処理が実行されなくなってしまいます。
違う文字コードの場合は除外して残りを全て処理してくれるオプションは無いかとman convmv
を読んで見ましたが、無いようです。
仕方が無いので、これをシェルスクリプトで実現したいと思います。
実際にやりたいコマンドは
convmv -r -f sjis -t utf-8 /data/* --notest で、これで変換できないファイルは
convmv -r -f euc-jp -t utf-8 /data/* --notest で、全てのeuc-jpとsjisをutf-8にする事です。
for TARG in `find /data | nkf -w8`
do
convmv -f sjis -t utf-8 ${TARG} --notest
convmv -f euc-jp -t utf-8 ${TARG} --notest
done
これで、sjisのファイルだろうがeuc-jpのファイルだろうが必ずutf-8になると思われますが
いけると思いますか？ | nkf -w8 をかませているのは、こうしないとターミナルで見た限りだと
文字化けしたファイル名でそのまま表示されるので、これだと多分ファイルにアクセスできないだろう
との配慮から、ちゃんとしたファイル名で見えるようにしたつもりです。
162:login:Penguin
07/09/17 08:49:52 hnYIly1T
>>161
ｑｋｃ最強伝説
163:login:Penguin
07/09/17 11:57:35 nqz563FT
>>162
URLﾘﾝｸ(hp.vector.co.jp)
これですよね？
しかしこれはconvmvとは全く別物のようです。
convmv => ファイル"名"の文字コードを変換する ←私はコレが必要
qkc => テキストファイルの"中身"の文字コードを変換する ←これは違う・・・
なので使えないみたいです。
ちなみに >>161で書いたスクリプトを実際に動かしてみた所、LinuxサーバのCPU使用率が
100%になって固まっちゃいました。無限ループをしているかファイル名取得に失敗しているか
よく分かりませんがダメでしたOTL
164:login:Penguin
07/09/17 12:18:44 CDwJTqgj
よくわからんのだが、nkf -gで文字コードの判別してやりゃ良いんじゃねぇの？
165:login:Penguin
07/09/17 12:56:16 RA5G8Fdp
while ! convmv -f sjis -t utf-8 -r /data --notest ; do
convmv -f euc-jp -t utf-8 -r /data --notest
done
なんか、どうよ？
文字コード判定がいまいちなのか誤認してくれたりするので --notest とって、ざっと眺めてからやる事を推奨。
166:login:Penguin
07/09/17 13:00:08 85s13mgP
--notest 外して試してみればーじゃん。
167:login:Penguin
07/09/17 13:21:00 hplwR1nR
echo $RANDOM
で結果に乱数を返したいんですけど、
0～9までの一桁の結果のみ返したい場合の指定方法とかってありますか？
168:login:Penguin
07/09/17 13:53:15 MlIRuyKv
$RANDOM % 10
169:login:Penguin
07/09/17 15:09:07 nqz563FT
>>164
nkf はファイル"名"ではなくて、ファイルの"中身"についての文字コードを
調べるんですよね？テキストファイルに対して実行するとShift-JISと言う出力が得られ、
.exeファイル等に実行すると Binary と表示されました。
なので、これは全く別物です。
>>165
おお・・・
それはつまり
convmv -f sjis -t utf-8 -r /data --notest
で、元ファイルがsjisじゃなかったときは元ファイルがeuc-jpとして処理を繰り返すんですね。
しかしその場合、仮に1つでも元ファイルがsjisだった場合は？と言うか・・・
それ実行してみたのですが、無限ループに陥りました。何度も同じファイルを判定して
これsjisじゃないよ～って帰ってきます。
よくよく考えると -r /data で既に再帰的に繰り返す処理なのに、それをさらにwhileでループさせて
いるんですよね。二重ループ状態ですか。
while ! convmv -f sjis -t utf-8 -r /data --notest ; do
これで、とりあえず convmv -f sjis -t utf-8 -r /data --notest が実行される
→実行された時に1つでも違うファイルが存在していてエラー
→convmv -f euc-jp -t utf-8 -r /data --notest が実行される
→実行された時に1つでも違うファイルが存在していてエラー
またconvmv -f sjis -t utf-8 -r /data --notest が、最初にエラーで止まったファイルも含んで
最初から実行される＞当然また同じファイルでエラーを起こす＞convmv -f euc-jp -t utf-8 -r /data --notest が
また実行されてまたこれも最初から処理してしまう＞これを永遠に繰り返して無限ループに陥る。
ダメみたいですOTL
>>166
--notestはずして試してみてますが、エラーで弾かれます。
170:login:Penguin
07/09/17 15:30:26 kUn2DAgf
>>169
いや、ファイル名のコードをnkfで調べりゃいいじゃん、てことだったんだけど。
171:login:Penguin
07/09/17 15:35:55 kUn2DAgf
念のため。
for T in `ls ~`
do
C=`echo "$T" | nkf -g`
echo $T,$C
done
ファイル名の文字コードを調べてると思うんだが。
172:login:Penguin
07/09/17 16:38:42 nqz563FT
>>170-171
違うと思うなぁ・・・。
>>171のスクリプト実行してみたけど
これは ls ~ で表示されるファイル名リスト全体、、、そうだなぁ、、例えば
a.txt
b.mp3
c.tar
d.gz
e.tar.gz
とか日本語も含むファイル名全てが列挙されると思うけど、それらのファイル名リスト
全体を1つのテキストファイルとみなして、テキストファイルの中身(つまりファイル名が列挙されてる)
に対して文字コード変換をかけた結果を echo で出力しているんじゃないですか？
だからnkf は ファイル"名"の文字コードを調べるんじゃなくて、あくまでもテキストファイルの中身
の文字コードを調べるんだと思いますが。それこそqkcみたいな動作？
convmvは全くそれとは性格が異なる物だと思いますが、、非常にこの辺ややこしい・・・。
173:login:Penguin
07/09/17 16:45:55 8vN1DPCo
なんでこんなに全然わかってないのに自信満々なのだろうか
174:login:Penguin
07/09/17 16:47:06 rlyHM/pf
>>161
>>164 の意見を採用して書いてみた。
for を while に変えたのは俺の趣味。
find /data | while read TARG ; do
File=$( nkf -g <<< "$TARG" )
case "$File" in
Shift_JIS*) Code=sjis ;;
EUC-JP*) Code=euc-jp ;;
UTF-8*) continue ;;
esac
echo "$File: Convert to $Code" ## お好みで
convmv -f "$Code" -t utf-8 "$TARG" --notest
done
ファイル名程度の短い文字列だと nkf の文字コード判定の
精度はあまりよくないが、やらないよりはマシだろう。
175:login:Penguin
07/09/17 16:52:30 HxbR0j5A
文字コードが違うファイル名が混在しているディレクトリって。
どうしてそうなったかが気になる
176:login:Penguin
07/09/17 16:55:54 4XOwAbVo
ローカルで作ってSambaで作ってWebDAVあたりで作ってとやってしまうと
起きるな？＞混在。
後はデータ中の文字列を元にファイルを作ったりすると、うっかり
混在状態になったり。
177:login:Penguin
07/09/17 17:22:02 kUn2DAgf
>>172
>>173と同意なんだが、想像の斜め上な方向に理解してるのね。と理解。
なして>>171を実行してみた上で>>172になるのかわからん。。。
つまり、>>172としては、「a.txt あ.txt い.txt」の3つのファイルがあると、
a.txt, ASCII
あ.txt,UTF-8(とか)
い.txt,EUC-JP(とか)
てならず、
a.txt,BINARY
あ.txt,BINARY
い.txt,BINARY
となった、てこと？
>>174
半角ｶﾅ使ってなけりゃ、それなりの精度なんじゃねぇかと思うんだけど、どうだろ。
178:login:Penguin
07/09/17 17:29:26 kUn2DAgf
>半角ｶﾅ使ってなけりゃ、～
↑勘違い。すま。
179:login:Penguin
07/09/17 19:31:50 nqz563FT
>>173
すみませんOTL。
>>174
そのスクリプト動かしてみたのたですが、 echo ${File}を加えて確認した所
ほとんどのファイルが ASCII と出力されていて、少しだけ Shift-JISという出力が得られました。
って事は？Shift-JISとASCIIが混在しているという事でしょうか？
と言うかそもそもASCIIっていったいどういう・・？
euc-jp sjis utf-8 の3種類しか基本的には知らなくていいと思っていたのですが、4つ目の文字コード
も混在している(というよりeuc-jpのファイルは存在しなくてsjisとASCIIの2つが混在？)と言う事でしょうか。
と言うか convmv --list してみたら asciiってあるし・・・・。
>>176
そうそう、さらにFTPも混ざったりssh + rsyncとかでファイル持ってきたりすると
もう今ぐちゃぐちゃになってて、UTF-8に統一したいんですよ。。。
>>177
.txtの拡張子のファイルは BINARYはでません。
ん？って事は nkf -g ではファイル"名"の文字コードを判別しているって事ですか？
で、その出力がASCIIとShift-JIS、その他としてはBINARYの3種類の状態(だと思う)の場合は
convmv -f ascii -t utf-8
convmv -f sjis -t utf-8
でそれぞれ変換かければいいのかな・・・。なんか難しすぎて頭痛くなってきたOTL。
でもなんか全面的に私が間違っていた感じがするので、その点については皆様方には
大変ご迷惑をお掛けしておりまして申し訳ありません。
180:login:Penguin
07/09/17 20:51:38 kUn2DAgf
>>179
なんていうか、なぁ。
ASCIIってのは日本語使ってなけりゃASCIIだわな。ちと語弊あるけど。「a.txt」とか。
で、オレの>>177で示したのは、>>174をオレ解釈したところ、
「a.txt」と「(UTF-8な)あ.txt」と「(EUC-JPな)い.txt」が混在してると、いっしょくたになったのが
コード判別にかかって、結局コード判別できなくって「BINARY」って判別されるってことか？ と。
オレの説明わかり難かったとは思うけどな。
でもってnkf -gだが、たんに「入力された」のの文字コード体系を調べるだけであって、それが
「ファイルの中身」なのか「ファイル名」なのかは、どっちを指定、てか、nkfに入力したか、て
違いだけ。わかる？
ついでに日本語のファイル名がShift-JISだけなら、SJIS→UTF8に変換指定するだけでokやな。
そんなわけで、まちっと勉強しれ。
181:login:Penguin
07/09/17 21:22:34 rlyHM/pf
>>179
ああ、そういや ASCII を忘れてた。w
解説は >>180 を見てもらうとして、
それを踏まえて >>174 を改良すると、こんな感じかな。
後は自分で調べてみな。
find /data | while read TARG ; do
File=$( nkf -g <<< "$TARG" )
case "$File" in
Shift_JIS*) Code='sjis' ;;
EUC-JP*) Code='euc-jp' ;;
ISO-2022-JP*) Code='iso-2022-jp' ;;
ASCII*|UTF-8*) echo "$TARG: $File"; continue ;;
*) echo "$TARG: $File: Not supported format."; continue ;;
esac
echo "$File: Convert from $Code to UTF-8." ## お好みで
convmv -f "$Code" -t utf-8 "$TARG" --notest
done
>>180
> 「a.txt」と「(UTF-8な)あ.txt」と「(EUC-JPな)い.txt」が混在してると
判定はファイルごとに行うからこれで「BINARY」にはならないはず。
「(UTF-8)あ(EUC-JP)い.txt」とか、複数の文字コードで構成された
ファイル名だと誤判定と言うか、期待通りにはならないと思う。
こういうのもきちんと判定したいのなら ack がお勧め。
こんなファイル名に出くわす事はまずないだろうけどな。w
182:login:Penguin
07/09/17 22:20:42 nqz563FT
>>180
なるほど、英数字だけの場合はASCIIなんですね・・。
では、 a.txt(ASCIIですよね) を convmv -f ascii -t utf-8 a.txt --notest
なんて有り得ないわけですよねぇ。
BINARYって判別されたのは 例えば vncviewer.exe とかのファイルです。バイナリファイルだし。。。
この結果を見て私は vncviewer.exe と言うファイル名自体は英数字のみなので ASCIIかと
思いますが、しかしvncviewer.exeのファイルの"中身"はBINARYなので、nkf ってのは
ファイルの中身を見てコードを判別して返してくれるんだなぁと思った次第です。
(nkf がファイル"名"を見て返してくれるのなら vncviewer.exeはBINARYではなくASCIIで
かえって来ないといけないからです。) でも nkf に対して何を入力するかによって
返してくるものは違うんですね。ファイル"名"をnkfに入力すればファイル"名"のコードが帰ってくるし
ファイルの内容を入力すればファイルの内容のコードが帰ってくると。
>>181
度々具体的なスクリプトを示して頂いて本当にありがとうございます。
しかしですね・・・よくエラーを見てみると no such file or directory が帰ってきてるんですよね・・・。
つまり find /data をした結果、文字化けしたファイル名が返ってくるわけじゃないですか。
その文字化けしたファイル名の場合、そのファイルにはアクセスする事が出来ないですよね。
文字化けしたファイルに唯一アクセスする手段があるとすれば、それは "*" を使う事ですよね。
だから for や while で1ファイルずつ処理するっていう最初のアイディア自体がそもそも不可能
だったと言う事に今更ながら気づきました。ほんと文字化け問題って大変ですね・・。
"*"を使うと言っても find /data/* だと結局1ファイルずつ文字化けしたものが帰ってくるので
ダメっぽいです。 convmv に 直接 * を渡す必要があるみたいで、そうすると混在している場合に
全く処理をしてくれなくて結局ダメと。。。参ったなぁ・・・OTL。
それと1つシェルスクリプトスレなのでお聞きしておきたいのですが
File=$( nkf -g <<< "$TARG" ) ←これなんですが、 <<< って何ですか？普通 < か << ですよね。
<<<は初めて
183:165
07/09/17 22:30:38 RA5G8Fdp
>>169
エラーの起こる直前までは変換してくれるのかと思ってた。
いらぬ時間をとらせてすまねぇ。
んで(ｗ)、また懲りずに考えてみたんだが、nkf使うんだったら
find work/ -type f -exec sh -c 'FN="`dirname \"{}\"`"/"`basename \"{}\" | nkf -w`"; [ -f "$FN" ] || mv -v "`echo \"{}\"`" "$FN"' \;
とかいかが？
ディレクトリ含まれてないんだけど、含むと末端からやらないといけないからシェルスクリプトでやるのは面倒くさそうだなァ、と思って逃げたｗ
184:login:Penguin
07/09/17 23:04:07 nqz563FT
>>183
うぐぅ・・・・
そのfind 以下のスクリプト難しすぎて私には何をどうしているのかさっぱり分かりませんです。。
awkとか正規表現とかそこら辺全然知らないので、なんかそれっぽいコードに見えて読めないOTL。
ディレクトリを含まないって言うのも問題ですねぇ・・・。
例えばですが hoge.txt と piyo/ っていうディレクトリが存在していて、それぞれのファイル名
もしくはディレクトリ名の文字コードを知りたい場合はnkfではどのようにコマンド入力したらいいんですか？
ls -d piyo/ | nkf -g
nkf -g < hoge.txt
nkf -g | `ls -d piyo/`
nkf -g <<< hoge.txt
等など色々試してみましたが、文字コードが見えませんでした。
# convmv ももう少し気を利かせて --force オプションなんて作ってくれて処理できないファイルは
スキップして処理可能なファイルだけ全部処理するみたいな機能盛り込んでくれてれば助かったんだけどなぁ・・・。
185:login:Penguin
07/09/17 23:10:07 kLzbccVO
無理してシェルで書くより
perl かなんかで書いちゃった方が早い気がする。
186:login:Penguin
07/09/17 23:26:23 hplwR1nR
すいません、いろいろやってみたけど出来ないので教えてください。
aaaa,bbbb,cccc,"hoge,hoge",ddd,eee,ffff
みたいなCSVが有ります。
※カンマがある列は必ず「""」で括られています。
# cut -d, -ｆ 4
とかでカンマが含まれる行を出力しようとすると 結果に「"hoge」とのみ出力されてしまいます。
本当は「"hoge,hoge"」が出力されてほしいのです。
「"hoge,hoge"」の出力結果を得るためにはどの様にすれば良いですか？
自分的には、
sedコマンドでいったんワークファイルwor.csvなどに「"hoge\,hoge"」と
エスケープシーケンスを追加してからcutコマンドを実行すればうまく行くような気がしているのですが、
sedをどのように記述して良いのかすら解りません（泣）
どなたか教えてください。。。。
187:login:Penguin
07/09/17 23:42:08 kUn2DAgf
実は混在なんかしてない、ていうことはないのんか？ もしくはかなり偏っている。
なら、ある程度手作業でその他一括、のが楽かも知れん。
188:login:Penguin
07/09/17 23:45:48 msAJx7Dr
結局カンマ関係なしに""で括られたのが欲しいんじゃねぇのか？
189:login:Penguin
07/09/18 00:04:13 hplwR1nR
186です。
>>187
1000行近くのCSVファイルで確実に混在しています。
例えば、↓↓↓みたいな行です。
（「US」の後ろにカンマがありますよね？）
75,0,,,-,,-,"LOG3\.0.*123456 .....5.*\(US, 21\): NOTICE:.*",,,,,,,AAAA,BBB,"TEST",WARN,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,,1,,,,1,,,,,,,,,,,,,,,,,,,75
この行から特定の列だけ抜き出し＆抜き出しした列を引数にコマンドを実行しています。
>>188
そんなことないです。
実際には初期値の列も多いので。
190:login:Penguin
07/09/18 00:16:17 u/C4qzX6
>>182
read に -r オプションつけたらどう？
旧) find /data | while read TARG ; do
新) find /data | while read -r TARG ; do
^^^
> File=$( nkf -g <<< "$TARG" ) ←これなんですが
man bash のヒア・ストリングス (Here Strings) の項を参照。
191:login:Penguin
07/09/18 00:35:05 u/C4qzX6
>>189
う～ん、難しいね。
クォートされたエントリが一行に一つだけなら
↓で取り出すことはできるけど。
sed '/"/ s/.*\(".*"\).*/\1/'
俺なら一度 csv を Excel に放り込んでから
特定の列を抜き出すかな。w
192:login:Penguin
07/09/18 02:15:13 AGCqK3mV
sed -n 's/\(\("[^"]*"\)\|\([^,]*\)\)\(,\|$\)/\n\1\n/4;s/[^\n]*\n//;P'
sedでやってみた。
193:login:Penguin
07/09/18 07:39:01 +nqx9VGy
186です。
ありがとうございます。
191,192を実行してみたんですけど、正しく表示されませんでした（泣）
194:login:Penguin
07/09/18 12:30:11 Gq30BMp3
>>186
センス悪いけどこんなのでよければ
#!/usr/bin/gawk -f
BEGIN{n=ARGV[1];ARGV[1]=""}
function parse(s,c,f,i,j,k){
while(1){c=substr(s,i,1);if(c=="")return;else if(c=="\"")f=(f>0)?0:1
else if(c==","&&f==0){array[k++]=substr(s,j,i-j);j=i+1}i++;}}
{parse($0);print array[n]}
195:192
07/09/18 18:40:20 AGCqK3mV
／^o^＼懽懽懽懽懽懽懽
自分の環境では、186と189は上手くいってるぽいんだが。
例えば、189は192の4の所を8にすれば
"LOG3\.0.*123456 .....5.*\(US, 21\): NOTICE:.*"
って出るし、15にすれば
AAAA
と、出る。
sedのバージョンと実データがどんなのか知りたい所。
196:login:Penguin
07/09/18 18:48:06 mMDRvNP8
>>195
ｽﾏｿが懽の隣の文字のフォントが無いのだが
E3
5E
って表示になってる
197:login:Penguin
07/09/18 19:09:24 AGCqK3mV
半角カナで書いたら化けた模様ｗ
198:login:Penguin
07/09/18 21:50:07 En+WDn3C
bashでスクリプトと組んでいる途中でつまづいてしまいました
~/tmp/ 以下にあるファイルすべてに対してファイル変換したいのです（例 aaaaa ⇒ aaaaa.txt）
~/tmp/aaaaa
~/tmp/bbbbb
:
~/tmp/nnnnn
=============
cd ~/tmp/
ls_result1=`ls`
for list1 in $ls_result1
do
#便宜上 (変換コマンド) (変換前) (変換後) とします
(変換コマンド) ~/tmp/$(list1) ~/tmp/tmp/$(list1).txt ←listの使い方が間違っているのだと思います
done
=============
list1 not found というエラーがたくさん出てきてしまい困っております。
~/tmp/ 以下にあるファイル名をそのまま使いたいので、どなたかご教授ください。
199:login:Penguin
07/09/18 22:05:47 9R+Y1frn
>>198
×(変換コマンド) ~/tmp/$(list1) ~/tmp/tmp/$(list1).txt
○(変換コマンド) ~/tmp/${list1} ~/tmp/tmp/${list1}.txt
200:198
07/09/18 22:15:47 En+WDn3C
>>199
できました♪ ありがとうございました m(_ _)m
201:login:Penguin
07/09/19 06:55:54 OLZv4Z+v
sed で/、\を多用できるようになりますたｗｗ
\tとか技も覚えますたｗｗ
みなさん㌧㌧！
202:198
07/09/19 12:51:22 OlaeIc6l
~/tmp/ 以下にある txtファイル だけファイルの中で置換したいのですが、
またつまづいてしまいました
# その前の処理で year month day hour という変数が与えられています
txtファイルの1行目 2007090100AB ⇒ year month day hour AB(変数の間のスペースなし、ABは固定文字列)
txtファイルの2行目 2007/09/01 ⇒ year/month/day
そこで以下のように作ったのですが、~/tmp/ に bakファイルが作られておらず、
echo $ls_result を見ると /home/myname/tmp/*.txt となっていました
想定では *.txt だったのですが･･･
=================
ls_result=`ls ~/tmp/*.txt`
for list in $ls_result
do
cp -p $list ${list}.bak
sed -e '1 s/2007090100AB/${year}${month}${day}${hour}AB/' ${list}.bak
sed -e '2 s/2007\/09\/01/${year}\/${month}\/${day}/' ${list}.bak
mv &{list}.bak $list
#rm -f ${list}.bak
=================
どなたか教えてください。よろしくお願いします。
203:login:Penguin
07/09/19 15:41:53 Ii4uF/l/
これではまともに動いてもbakファイルはないだろ
204:login:Penguin
07/09/19 18:36:32 42fTFu0H
>>202
これだと置換後のファイルを.bakに作って、そのあと出来た.bakをオリジナルに
重ね書き（しかもムーヴ）してるように見えるけど。
.bakとオリジナルの2個とも残したいなら、mvじゃなくてcpだろうね。
それ以前に、こういう処理だと普通は.bakに変換前のオリジナルを残すと思うが。
最初にオリジナルを.bakにcpしてあるんだから、.bakは触らずに、元のファイルに
sedかけて、最後のmvは不要では
205:198
07/09/19 20:34:50 OlaeIc6l
>>203-204
コメントありがとうございます
いただいたアドバイスどおり、bakにはさわらずにオリジナルでsedかけてみました
ところが、シェルを動かした後のファイルを見ると動かす前とまったく同じ状態でした。
タイムスタンプも動かす前と同じでした。
sedの使い方が間違っているのでしょうか。今一度教えてください。
=================
ls_result=`ls ~/tmp/*.txt`
for list in $ls_result
do
cp -p $list ${list}.bak
sed -e '1 s/2007090100AB/${year}${month}${day}${hour}AB/' ${list}
sed -e '2 s/2007\/09\/01/${year}\/${month}\/${day}/' ${list}
#rm -f ${list}.bak
=================
206:login:Penguin
07/09/19 20:37:21 NIZBsTRK
>205
sedは-iオプションを指定しないと結果を標準出力に書き出すだけだよ。
207:login:Penguin
07/09/19 21:25:46 gh8Zvftq
sed -i.bak -s \
-e "1s/2007090100AB/${year}${month}${day}${hour}AB/" \
-e "2s,2007/09/01,${year}/${month}/${day}," \
~/tmp/*.txt
で、よくね？
208:198
07/09/19 21:44:56 OlaeIc6l
>>203-204,206-207
207さんのとおりにしたら、想定どおりに動きました！
みなさんありがとうございました。m(_ _)m
ずっと調べてたらこんな時間に…
今からごはん作ります (^o^)/
209:login:Penguin
07/09/21 15:18:02 5N/Tidqv
ディレクトリーA（ファイルが入ってます）を
10/1～10/31の日付名でコピーしたいのですが
なんかいい方法無いでしょうか？
Zshだと cp -R A 10[1-31]なんてできるのでしょうか？
210:login:Penguin
07/09/21 15:27:31 KLJI/R6G
>>209
for i in {01..31}; do cp -pR A A10$i; done
zsh と bash で挙動違うな。
211:login:Penguin
07/09/21 15:37:28 KLJI/R6G
>>209
< - > のことなら、ちょっと用途が違うよ。
こんなんやってみ。
% touch B2
% ls B{1..3}
% ls B<1-3>
212:login:Penguin
07/09/21 15:46:39 5N/Tidqv
>>210 ﾊﾔｯ! ありがとうございます！
ディレクトリーAにhoge01～100ってファイルを作ったときは
Zshでさらさら～って逝けたのですが
現在bash環境なのでそれなりに書かないといかんなと思いつつ
3行になってしまう、漏れの脳みそでした il||li○|￣|＿
1行でやりたかったｗｗ さすがです>>210様 1行でばっちりコピーできますた
213:login:Penguin
07/09/21 15:49:11 5N/Tidqv
>>211 すみません －じゃなくて..でした
なかなか参考になるｽｯﾄﾞﾚですね
正規表現もきっちり覚えないといけませんねorz
214:login:Penguin
07/09/22 04:00:27 DSw3XQMb
for d in {01..31} ; do printf "%02d " $d; done
215:73ですが
07/09/22 22:02:55 TBL9KN2J
>>94
おくればせながらスクリプトが動くようになりました。
御指摘のとおりスペースの数などがあっていませんでした。
ありがとうございました。
216:login:Penguin
07/09/26 09:48:46 kfTmpMA+
時間の逆算っていい技ないですか？
やぱ現在時刻から60進法で計算したほうが早い？
現在時刻 21:24 残り時間 36分で22時 って感じ
で、やてみたい
217:login:Penguin
07/09/26 09:54:08 lgPbyfYB
>>216
coreutilsのdateを使う。
218:login:Penguin
07/09/26 13:11:02 kfTmpMA+
date --date xxmin とかできるのですね！！
しらなんだﾎﾟｶｰﾝ
>>217 ありが㌧ｸｽ
219:login:Penguin
07/09/26 14:13:45 kfTmpMA+
echo $((59 -` date '+%M' | awk '{print $1}'` )) $((59 -` date '+%S' | awk '{print $1}'` ))
これでもでけた！
220:login:Penguin
07/09/27 18:47:27 Qh1DP+hx
date,sleep, atは使い込めばラーメンタイマーも・・・・・・・いやなんでもない
221:login:Penguin
07/10/02 23:24:08 57QYWA2W
ほしゅ
222:login:Penguin
07/10/09 18:07:07 lJCQFIXV
モデムをオンフックにするのに
今のところcuを使って対話的にATH0を
送っているのですが、これを
シェルスクリプト内で実行して
自動化する方法はありますか？
223:login:Penguin
07/10/09 23:58:35 rK7+VmTA
対話的といえば expect ぐらいしか思いつかないな
224:222
07/10/10 19:31:25 TchaYqjx
>>223
manを眺めましたが奥が深そうですね。じっくりと勉強してみます。
ありがとうございました。
225:login:Penguin
07/10/11 00:25:04 0rD2It5e
>>222
草の根BBSでもやるんかい？
226:login:Penguin
07/10/11 02:33:49 8ZTBNRII
モデムで思い出したが、ミャンマーで対外ネット回線が一時遮断されたって
報じてたじゃん。
こんなときにもなんとかなるよう在外公館にアナログモデムを常備してたりは
しないだろうか。
227:222
07/10/11 06:32:06 o32fDZEh
>>225
これまでCCT-98IIIのマクロで自動巡回してたんですが
Linuxにしたら使えなくなるそうなので・・・・。
って、いやそうじゃなくて、vgettyで留守電のテストを
やってたら回線をつかんだまま切れないことがあって
それを切断させたいわけです。
>>226
自分はいざというときのためにジャストシステム製の
音響カプラ持ってます。(処分してないだけかも)
228:login:Penguin
07/10/11 08:26:20 A6nFaf5V
kermitをperlで操作するnifty4uというパッケージが、前世紀にあった。
NIFTY フォーラム自動巡回スクリプトなので、CCT-98な人には改造が容易かも。
ダイアルアップpppスクリプトを書けば済むんじゃないかと思うけど、やったことないから分かりません。。。
229:login:Penguin
07/10/11 13:36:28 wykYuUw8
#!/bin/bash
cd /home/hogehoge
というシェルスクリプトを作成し、実行してみても、移動でき
ません。
ディレクトリを移動するにはどのようなスクリプトを書けばい
いでしょうか？
230:login:Penguin
07/10/11 13:41:47 wNnhF+3E
>>229
シェルスクリプトとバッチファイルは違う。
シェルスクリプトはシェル内で動作する子プロセスだ。
231:login:Penguin
07/10/11 13:44:37 wNnhF+3E
>>229>>230
一部訂正。
s/シェルスクリプトは/単純に実行したシェルスクリプトは/
解決方法は "source" 。
232:229
07/10/11 14:10:15 wykYuUw8
>>230>>231
ありがとう。今手元に環境がないので明日試してみます。
233:login:Penguin
07/10/11 18:43:47 KODaF1AT
>>232
shell.sh がシェルスクリプトのファイル名だとして
chmod a+x shell.sh で実行権限与えて
shell.shがあるディレクトリで
./shell.sh
したら移動するよ。
234:229
07/10/12 09:38:40 EbLcx1Gh
>>231
sourceやってみたら無事cd出来ました。
>>233
やってみたけど、上手くいきませんでした。
お二方ともありがとうございました。
235:login:Penguin
07/10/12 10:44:01 7zE2B01m
シェルプロンプトにコマンド名を叩き込んで実行すると、
子シェル（sh,cshなど）が新たに作られて、その子シェルがスクリプトを実行する。
で、スクリプトが終わるとその子シェルもろとも消えて親シェルに戻ってくる。
だから、シェルスクリプト内でcdしたり、環境変数をセットしても、その影響は
子シェルの中にとどまって、スクリプト終了と共に消えてなくなる。
cshのsourceやshの．（ドット）は、子シェルを作らないで自分の中でスクリプトを実行する。
だからcdやsetenv、exportの結果が、起動した親シェルに反映される
236:login:Penguin
07/10/12 11:22:55 5+kNLqtp
. の他に alias とか関数使う手もあるよ。
237:233
07/10/12 17:40:09 sUVuIX9s
>>234
ごめん！間違った。
./shell.sh じゃなくて
. ./shell.sh でした。
. を打って1個スペース空けて シェルスクリプトファイル指定。
238:login:Penguin
07/10/12 17:46:35 5+kNLqtp
>>237
なんで ./ を付けるの?
239:login:Penguin
07/10/12 17:59:22 +Kk0eMQd
Yeah!めっちゃホリデイ
240:login:Penguin
07/10/15 14:50:05 NjtHefoB
特定のURLを一定時間に読み込むシェルスクリプトをつくりたいのです。
今のところwgetを使ってwget URLﾘﾝｸ(hogehoge) をクーロンで動かす予定ですが
もっとスマートなやりかたはありますか？
241:login:Penguin
07/10/15 22:15:04 yaqxWPIK
>>240
それでいいんじゃね？
242:login:Penguin
07/10/15 23:35:58 6xnjJ9Cn
>>241
じゃあ1分に1回よりも高頻度（30秒に1回とか、15秒に1回とか) やりたい場合はどうすれば？
243:login:Penguin
07/10/16 00:24:31 7lwU6GvW
アタックしたいのか？
244:login:Penguin
07/10/16 01:36:38 IhGBMLbJ
>>242
wget URLﾘﾝｸ(...;)<)
するスクリプトを毎分実行するとか。
245:login:Penguin
07/10/16 08:18:30 a72PxkLH
>>243
アタックしたいわけじゃないですよ。
ただcronって最高でも1分に1回しか実行できないはずなので、それよりももっと短い間隔で
処理をさせたい場合とかどうするのかなぁとふと疑問に思ったもので。
>>244
なるほど・・。 しかし wget URLﾘﾝｸ(...)<) がくるから、タイミングと言うか場合によっては
30分に1回キッチリ実行されるとは限りませんね。31分かかって、その後実行されて
今度は29分後に実行されるみたいなズレ方はしますよね。
246:login:Penguin
07/10/16 08:26:34 IhGBMLbJ
>>245
バックグラウンドで実行するとか。
つーか、何分もかかる処理を30秒ごとに実行していいのか?
247:login:Penguin
07/10/16 11:46:31 wfMufGFC
cronはプロセスが無限増殖するのを抑えるために、同時実行数に制限があるので注意
Ｓｏｌａｒｉｓだと、確か同時実行数が100個を超えるとそれ以降は時刻が来ても起動しなくなる
LinuxだとOOMキラーが動いて刈り取られるかもしれん
cronの起動間隔 ≒ プロセスの実行時間
となるような長めのプロセス、特に通信関係とかで長めのタイムアウトが発生しそうな
プロセスをcronに仕込むときは、注意したほうがいい
248:229
07/10/16 13:58:23 EtpWijek
環境が手元にないもので、遅レスになってしまいすみません。
>>235
なるほどです。ありがとうございました。
>>236
ありがとう。aliasでも出来そうでした。
>>237
.の後に続けて入力したところ、うまくcdできました。
>>238
素人なのでよく分かりませんが、実行ファイルを実行するときに付けるんでは？
それでは、みなさんありがとうございました。
249:login:Penguin
07/10/16 14:09:44 IhGBMLbJ
>>248
. shell.sh
でもいっしょだよ。
やってみ。
250:login:Penguin
07/10/16 17:45:32 a72PxkLH
./ を つけるのは カレントディレクトリのファイルを指定する為。
つけないと 環境変数 $PATH の中から該当する物が無いかを探してなかったら
エラー返すので。 カレントディレクトリのファイルを指定する時にいちいち
./ をつけるのが面倒だからって $PATH に ./ も含めてしまうとセキュリティホールになるので
やらないでね。
251:login:Penguin
07/10/16 17:50:59 IhGBMLbJ
>>250
>>249
252:login:Penguin
07/10/16 18:39:11 tU6zGUOB
シェルスクリプトで端末の現在の行数を得るにはどうしたらいいですか
253:login:Penguin
07/10/16 19:18:04 iHfKM46h
stty -a とかかな。
254:login:Penguin
07/10/16 19:45:06 tU6zGUOB
>>253
情報ありがとうございます。
行数を表示するだけでなくて、
シェルスクリプトの中で行数を変数に格納して、
なんらかの処理を行いたいと思っているのですが
何かうまい方法はありますでしょうか
255:login:Penguin
07/10/16 21:12:10 pdm4T3SF
>>254
ROWS=`stty -a | tr ";" "\n" | grep rows | sed "s/.*rows //"`
256:login:Penguin
07/10/16 21:36:05 tU6zGUOB
>>255
できましたありがとうございました。
257:login:Penguin
07/10/16 23:32:43 sWAUZpv3
$LINES じゃだめなの？
258:login:Penguin
07/10/17 04:58:42 d5Vjha9K
シェルスクリプトの中で$LINESがとれるとでも?
259:login:Penguin
07/10/17 10:00:57 9KXOUzKW
ROWS=`tput lines`
COLS=`tput cols`
260:login:Penguin
07/10/17 22:15:42 VuOM9tU/
eval `resize`
echo $LINES $COLUMNS
261:login:Penguin
07/10/18 12:39:19 fyMSNeWa
>>260
resize は X がインストールされていない環境では使えない。
xterm の付属物なので。
262:login:Penguin
07/10/23 17:14:39 OMh5qn/O
ちょっと相談に乗ってください。
日付.pc名.サイト名_access_log
ex)
20071023.pc-local01.hoge_access_log
20071023.pc-local02.hoge_access_log
20071023.pc-local01.hagehoge_access_log
20071023.pc-local02.testhoge_access_log
と言うログファイルをサイト名別のフォルダに移動した後
1つのログファイルにマージさせるスクリプトを書きたいのですが。
とりあえず、スクリプト書いてみたのですが正直何がなんだか
分かりません。アドバイスを下さい。
#!/bin/sh
timestamp=`date +%Y%m%d`
log=`find /home/hoge/log -name $timestamp.*`
list=`echo "$log" | sed -e 's/_access_log//g' | cut -c57-`
スクリプトでは、今日のタイムスタンプを取ってlogファイルを検索し
その結果のサイト名以降の”_access_log”を消して、サイト名より前
も入らないので、表示させないようにする。これから、サイト別にフォルダを
作ってそこに移動させるのですが、mkdir "$list"では上手く行きません。
何かいいアドバイスを教えてください。よろしく御願いします。
263:login:Penguin
07/10/23 17:19:48 4jX2ZQqu
>>262
cut -c57- ってのは何?
264:login:Penguin
07/10/23 17:20:31 XqFIvlF4
>>262
シェルスクリプト以前の話だな。
まずは最終的に何をやりたいのかをはっきりしろ。
265:login:Penguin
07/10/23 17:26:06 4jX2ZQqu
>>262
$log にたくさんファイル名が入ってるのに
echo $log をいじろうとするのがよくわからんな。
>>264
まずは日本語の勉強からだな。
266:login:Penguin
07/10/23 17:50:56 OMh5qn/O
>>263
サイト名だけの文字を取りたかったので、cut -c57- としました。
>>264
申し訳御座いません。
ログファイル名からサイト名だけを文字を取り出して、取り出した文字
（サイト名）のフォルダを作って、作ったフォルダにそれぞれログを
振り分けてログファイルをマージさせたいです。
これで、少しは伝わりますでしょうか？
>>265
$logの結果からサイト名の文字だけ取りたかったので、echo $logを
いじっています。
267:login:Penguin
07/10/23 18:08:13 XqFIvlF4
>>266
プログラミングの論理部分を勉強したほうがいい。
「やりたいこと」と「実際のスクリプト」の間には
「ロジックを組み上げる」作業が必要になるが、
君はこの部分について全く理解できていないようだ。
まずは
「findで検索したファイルの一覧はどういう形で変数logに入っているのか」
「その変数logに対して繰り返し処理を行なうにはどうしたらよいか」
を調べてくるべし。
268:login:Penguin
07/10/23 18:09:14 4jX2ZQqu
そもそも find でうまくいかんな。
269:login:Penguin
07/10/23 18:17:19 OI+rqPpl
>>262
find . -type f -printf %f\\n|awk -F. '{gsub(/_access_log/,"",$3);print $2 "." $3}'|uniq >hostlist
for i in $(cat hostlist);do mkdir $i;done
あとawkで同じように
cp 20071023.pc-local02.testhoge_access_log pc-local02.testhoge
のようなlist作って実行
270:login:Penguin
07/10/23 18:18:51 OMh5qn/O
>>267
アドバイスありがとうございます。
正直、インフラ担当なのでプログラムさっぱりです（；´Д｀)
とりあえず、ググって調べてみます。
>>268
もう少し調べてから、スクリプト書き直します。
ありがとうございました。
271:login:Penguin
07/10/23 18:20:53 OMh5qn/O
>>269
ありがとうございます。
参考にさせて頂きます。とりあえず、スクリプト周りを調べて
書いてみます。
272:login:Penguin
07/10/23 18:25:49 4jX2ZQqu
#!/bin/sh
cd /home/hoge/log
for i in `date +%Y%m%d`.*; do
dir=`echo $i | cut -f2 -d.`
[ -d $dir ] || mkdir $dir
mv $i $dir
done
ファイル数が多過ぎるとかヘンなファイル名とかは知らね。
273:login:Penguin
07/10/27 10:44:25 mm4VeEeL
IPアドレスを16進に変換したいです。
どうやりますか？
274:login:Penguin
07/10/27 13:17:13 D/VUEDKM
echo '192.168.0.1' | gawk -F. '{printf("%02x%02x%02x%02x\n", $1, $2, $3, $4)}'
275:login:Penguin
07/10/27 13:26:52 QMQXG4ov
>>274
俺のIPサンプルに使うなよ。晒されたら攻撃の的になるだろうが(´・ω・`)
276:login:Penguin
07/10/27 13:35:53 6kGxUA5U
>>274
ありがとうございました。
277:login:Penguin
07/10/27 14:33:40 NSYPc3Nw
>>275
ネットに繋がらないと思ったらお前のせいかー！
早く俺のIP返してくれよ(´・ω・`)
278:login:Penguin
07/10/27 15:34:59 XQQiaIjq
>>275
そうか、そんなにお望みなら今から的にしてやるよwww
ﾀｼﾛ砲とブラスターとあと手持ちの攻撃ツールの標的ＩＰを全部セットして攻撃開s
279:login:Penguin
07/10/27 19:24:46 OFawlVSO
俺のIPは127.0.0.1だから攻撃するなよ
280:login:Penguin
07/10/27 21:20:28 jIwdHtQL
ひどいネタスレと化してるなココｗｗｗｗｗｗ
281:login:Penguin
07/10/29 10:48:36 AXA/ueYo
俺のIPは172.31.0.1だぞ。
282:login:Penguin
07/10/29 10:55:37 PqFYrP+5
もういいよ。
283:login:Penguin
07/10/29 11:01:37 F/RFN0ba
俺のIPは203.・・・・
いややめとく
284:login:Penguin
07/10/29 18:16:52 lN+2vPd7
じゃあオレも1個
オレのIPは
169.254.88.24だぞ。
285:login:Penguin
07/10/29 20:28:52 vqPZDaQA
あ、思い出した。
255.255.255.255 -> 0xffffffff
のように、IPv6表記を16進表記に変換する手続きを考えてくだちい。
f000::1 -> 0xf0000000_00000000_00000000_00000001 ("_"は不要)
ff::169.254.88.24 -> 0x00ff0000_00000000_00000000_a9fe5818
286:login:Penguin
07/10/29 23:28:48 Hdkrl+3D
完全に他人まかせだなぁ。
> ruby -rsocket -e 'p Socket.gethostbyname("ff::169.254.88.24")[3].unpack("C16").map{|c|format "%x",c}.join'
"00ff00000000000000000000a9fe5818"
287:login:Penguin
07/10/30 21:40:02 Hmkhn1Qf
あー、目鱗。
gethostbyname()等を使えばいいのか。
288:login:Penguin
07/11/06 00:15:33 vKEt0xzk
あるコマンド(hoge)の結果が・・・
(カラム位置) [col1 col2 col3 col4]
(コマンド出力) 0001 0002 * 0004
である場合にこの結果をset `hoge`で受けた場合、位置変数
$3に「*」が入ってくるようにbashのスクリプトを作成したい
のですが現状ではどうやってもカレントディレクトリ配下の
ファイル一覧が入ってきてしまいます。
何か良い手がありましたら教えて下さい。
289:login:Penguin
07/11/06 00:55:19 M5wBEVHJ
"`hoge`"
290:login:Penguin
07/11/09 03:25:37 r4+4tELy
>>289
ｵｲｵｲ!w
ﾏｼﾞﾚｽすると
$ set -o noglob
じゃないの
291:login:Penguin
07/11/09 06:12:20 BEUM5jSj
>>300
zenity を使うとシェルスクリプトで手軽な GUI が作れるぞ
292:login:Penguin
07/11/09 08:21:31 kDM6jkym
URLﾘﾝｸ(www.google.co.jp)
でトップに出て来るページは、もしかしてケンカを売ってますか？
＞最新のGnomeデスクトップを使っていても古いUnixユーザーはすぐにターミナルエミュレータを開いてしまいがちです。
293:login:Penguin
07/11/09 12:05:22 ei55nGr2
文章全体から見てポジティブな物言いだと思うが...
294:login:Penguin
07/11/10 01:20:06 5ErO5tFm
zenity の使用例： jpg と mp3 をあわせて avi を出力するスクリプト
音声ファイルをビデオホスティングサイトに投稿時に使用
====================================
#!/bin/sh
# mp3jpg2avi.sh
JPG_FILE=`zenity --title="JPG ファイルを選択してください" --file-selection`
MP3_FILE=`zenity --title="MP3 ファイルを選択してください" --file-selection`
zenity --title="質問" --question --text "変換開始しますか？"
if [ $? = 0 ];
then
ffmpeg -shortest \
-loop_input -f image2 -i $JPG_FILE \
-i $MP3_FILE \
-sameq output.avi
fi
====================================
295:login:Penguin
07/11/10 09:47:24 9Zj/zooJ
>>292
Linuxから入った人だけど、Gnomeなんてマルチウインドウ端末エミュレータ支援ソフト西か見えません
296:login:Penguin
07/11/10 11:07:23 vw7Wu+HW
マルチウインドウ端末エミュレータ支援ソフト西やら
マルチウインドウ端末エミュレータ支援ソフト力石やら
マルチウインドウ端末エミュレータ支援ソフトホセ=メンドーサやら知らん。
297:login:Penguin
07/11/10 11:19:14 9Zj/zooJ
>>296
一応ここでタオル投げときますね。つ～
298:login:Penguin
07/11/10 18:43:49 Skjd8N2z
そういやこの間表参道歩いていたら、
胸にでっかく
「マンモス西」
と書かれたＴシャツを着たガイジンが
前からいきなり歩いてきてビビった。
東京は怖い街だよ。
299:login:Penguin
07/11/10 19:19:41 PRddAKpB
そんなアナタに
URLﾘﾝｸ(engrish.com)
300:login:Penguin
07/11/10 20:24:35 Skjd8N2z
そこのこの写真に、"Photo courtesy of Paul Gilbert"ってあるけど、
あのポールギルバートなんだろうか？
URLﾘﾝｸ(www.engrish.com)
日本に住んでたしなあ。
301:HhMiKdKNVb
07/11/12 01:38:17 J0HpIKvZ
hlUotX <a href="URLﾘﾝｸ(jtpkztrjwlma.com) [url=URLﾘﾝｸ(ykcooubrqrga.com) [link=URLﾘﾝｸ(tvapeckiqvbf.com) URLﾘﾝｸ(cygdvmjubaqg.com)
302:login:Penguin
07/11/13 02:33:43 tnRwnYpT
恥を忍んで質問なのですが
/home/me/ 以下にjpgファイルが数千有ります
中身はこんな感じなのですが
1082053423922.jpg
1082053508305.jpg
1082053537535.jpg
1082053614971.jpg
1082053699948.jpg
1082053732609.jpg
1082053763346.jpg
1082391828601.jpg
1082392563669.jpg
1083091232922.jpg
この数千の*.jpgのファイルをディレクトリから読み込んで以下タグの中にディレクトリから読み
インクリメンタルに全ての画像ファイルがリンク代入された状態で出力したいと思っています
<div id="myGallery">
<div class="imageElement">
<h3>Item 1 Title</h3>
<p>Item 1 Description</p>
<a href="mypage1.html" title="open image" class="open"></a>
<img src="images/foo/a.jpg" class="full" />
<img src="images/foo/a-thum.jpg" class="thumbnail" />
</div>
ディレクトリから読み込んだfileの名前a.jpgににファイルの中が無くなるまで
置換したいという意味なのですが..
どうか、助言願えないでしょうかm(__ __)m
303:login:Penguin
07/11/13 07:47:54 xB6HVDtO
まずは「この数千の……」以降の文章を推敲して他人に理解できるよう
書き換える。
304:login:Penguin
07/11/13 10:11:50 VZT+kd7x
>>302
zphoto でも使ったら?
305:login:Penguin
07/11/13 12:34:27 v1//zET/
こういうことか？
for f in `ls -1 /home/me` ; do echo '<img src="images/foo/'$f'" class="full" />'; done
for f in `ls -1 /home/me | gawk '{gsub("\\\.", "-thum.");print}'` ; do echo '<img src="images/foo/'$f'" class="full" />'; done
306:302
07/11/13 14:02:39 tnRwnYpT
>>303
深夜に回転数が落ちていまして申し訳ないですm(_ _)m
>>304
それも考えたのですが、出来ればこちらの方が良いなと思いまして..
>>305
バッチリ書き出せました、もの凄い感謝なのですが
thumとthum無しのイメージが交互に書き出すことが出来ると思います
教えていただいた物を各ディレクトリに置き換えたものが以下の物なのですが
for f in `ls -1 /www/web_dir/photo_album/images/foo/`; do echo '<img src="images/foo/'$f'" class="full" />'; done
for f in `ls -1 /www/web_dir/photo_album/images/foo/ | gawk '{gsub("\\\.", "-thum.");print}'` ; do echo '<img src="images/foo/'$f'" class="full" />'; done
1行目と2行目を並べて出力できるように努力したのですが...
gawkの部分で引っかかってしまいます、というか1行目しかループしてくれません（T.T）
補足いただければと思うのですが、よろしくお願いします マジ感謝感激です
shell sciptとawkの本もamazonしようと思っています
307:302
07/11/13 14:19:58 tnRwnYpT
もうちょっとで出来そう...
308:302
07/11/13 15:05:30 tnRwnYpT
出来ました ありがとうございましたm(__ __)m
309:login:Penguin
07/11/13 15:14:48 MuKLiZO1
最終的にどうやりましたか？
報告して下さい。
310:302
07/11/13 15:32:02 tnRwnYpT
ディレクトリを作りthumnail入れてこれで出力できました
for f in `ls -1 /www/web_dir/photo_album/images/foo/`;
do
echo '<div id="myGallery">';
echo '<div class="imageElement">'
echo '<h3>Item 1 Title</h3>'
echo '<p>Item 1 Description</p>'
echo '<img src="images/foo/'$f'" class="full" />';
echo '<img src="images/foo-thum/'$f'" class="full" />';
echo'</div>';
echo ' ';
done
311:login:Penguin
07/11/13 15:42:18 MuKLiZO1
ちなみにサムネールは thumnail じゃなくて thumbnail ね。
312:302
07/11/13 16:02:23 tnRwnYpT
はい、ありがとうございました＾＾
313:login:Penguin
07/11/13 18:23:44 v1//zET/
>>306
ls -1 /www/web_dir/photo_album/images/foo/ | gawk '{gsub("\\\.", "-thum.");print}'
ここだけ実行するとどうなるの？
314:login:Penguin
07/11/16 18:50:01 q8UeZNS0
ls -d /a/b/c/d/*/
のようにコマンドを打ち込むと
/a/b/c/d/hoge1
/a/b/c/d/hoge2
/a/b/c/d/hoge3
のように出力が帰ってきますよね。この中から
hoge1, hoge2, hoge3 の部分のみ、つまり ディレクトリ階層の一番深い部分のディレクトリ名
のみを得る為にはどうすれば良いのでしょうか？シェルスクリプト内で必要なのですが
分かりません。教えてください。
自分で調べた限りだと basename とか dirname がそれに近そうだったのですが、
ちょっと違うようです。他には見つけることが出来ませんでした。
315:login:Penguin
07/11/16 18:54:10 PPFIsM3H
>>314
> のように出力が帰ってきますよね。
いいえ。
316:login:Penguin
07/11/16 19:44:27 q8UeZNS0
>>315
/a/b/c/d/hoge1
/a/b/c/d/hoge2
/a/b/c/d/hoge3
じゃなくて
/a/b/c/d/hoge1/
/a/b/c/d/hoge2/
/a/b/c/d/hoge3/
の間違いでした。 このリストから hoge1, hoge2, hoge3を抜き出したい。
hoge1/ の最後の "/" も切り落としてしまいたいのですが、どうすれば良いでしょうか？
317:login:Penguin
07/11/16 19:51:40 PPFIsM3H
>>316
sed なり awk なりで切り出せると思うけど、
最初から
find /a/b/c/d -mindepth 1 -maxdepth 1 -type d -printf "%f\n"
とかじゃだめなん?
318:login:Penguin
07/11/16 20:01:17 gAB+KHmJ
>>316
for i in ls -d /a/b/c/d/*/; do basename $i; done
319:login:Penguin
07/11/16 20:10:36 PPFIsM3H
>>318
for i in `ls -d /a/b/c/d/*/`; do basename $i; done
と言いたいんだろうが、
for i in /a/b/c/d/*/; do basename $i; done
でいいな。
空白とか入ってなければ。
320:login:Penguin
07/11/16 20:14:17 q8UeZNS0
>>317
レスありがとうございました。
しかしfindコマンドに詳しくない為自分ではよく分かりません。それ・・・。
>>318
レスありがとうございました。
こちらの方法はまさに私が求めていた方法です。非常に分かりやすくて助かります。
本当にありがとうございます。
321:320
07/11/16 21:33:37 q8UeZNS0
解決したと思ったのですが、
ROOT=/a # ←ココは何でもいい、とにかくディレクトリ
cd ${ROOT}
for DIR in `ls -d ./*/`
do
for TARG in `basename ${DIR}`
do
echo ${DIR}
echo "${TARG}"
done
done
といった感じにしてみたのですが、
Venus7.0 Personal Edition
といったディレクトリが
Venus7.0 と Personal と Edition の3つに分割されてしまい、そのディレクトリに対して
処理したいのに3つの存在しないディレクトリに対して処理しようとする為、 no such file or directory
エラーが次々と帰ってきました。
どうも ディレクトリ名に半角スペースが入っているのがダメなようです。解決策はありませんか？
ちなみに全角スペースの場合は1つのディレクトリとして正常に動作しています。
for DIR in `ls -d ./*/` ←この部分で分断されてしまっていると思いますが
for DIR in `ls -d ./"*/"` などと" " で囲んで見ましたが */ なんてディレクトリは見つからない
と怒られました。 ' ' で囲んでも同じ結果です。どうしたら半角スペースをセパレータとして
認識するのを防げますか？
322:login:Penguin
07/11/16 21:43:34 lBcVe9Af
なんでそんなディレクトリがあるのか
を考えたほうが根本的な解決になりそう
323:login:Penguin
07/11/16 21:44:56 PPFIsM3H
>>321
だから >>319 で言ったじゃん。
>>322
いや、あるときはあるでしょ。
そんなにおかしいことではない。
324:login:Penguin
07/11/16 22:02:10 lBcVe9Af
わざわざ_使ってる人の意味を考えよう
>>321は''の囲み方が間違ってるだけだが
_があるのが普通って考えたほうが手間なくていい
windowsがらみならwindowsでやったほうがいい
325:320
07/11/16 23:35:30 q8UeZNS0
>>322
ま、まぁ色々事情がありまして。あるんですよ。。。
>>323
>>319の事かと思ってレスを投稿する前に確認したのですが、
for DIR in ./*/
do
for TARG in `basename "${DIR}"`
do
echo ${DIR}
echo ${TARG}
done
done
で確認したところ 変数DIRには正しく取れました。 しかし
`basename "${DIR}"` としているにも関わらず
元ディレクトリ名 AVG Anti-Virus Free Edition 7.3
実行結果
AVG
Anti-Virus
Free
Edition
7.3
とこのように分断されてしまいます。 " " で囲っているにも関わらず、です。
何がいけないのでしょうか？
326:login:Penguin
07/11/16 23:59:15 2bsqELIP
#!/bin/sh
LIST="\"space aaa\" \"bbb\" \"space ccc\" \"ddd\"";
echo $LIST; # "space aaa" "bbb" "space ccc" "ddd"
func(){
echo "arg= $#"; #6
echo "$1"; # space
echo "$2"; # aaa
echo "$3"; # bbb
echo "$4"; # space
echo "$5"; # ccc
echo "$6"; # ddd
}
func $LIST;
上のようなスクリプトで
func には、"space aaa" みたいにスペースの入った引数を渡したいんですが、
なにか方法はないでしょうか？ この場合funcにわたす引数を４つにしたいんです。
展開されて、引数が６つになってる。。。素人ですません。
327:login:Penguin
07/11/17 00:44:46 X3VLuMy8
>>325
for TARG in `basename "${DIR}"` ->
for TARG in AVG Anti-Virus Free Edition 7.3