「本当にあった find コマンドの怖い話」記事へのコメント

これか？

[nemui4 (20313)]

【謎】本当にあったfindコマンドの怖い話【おもしろ現象】
http://www.kunst1080.net/entry/2018/03/20/120146 [kunst1080.net]

要約
100万個のファイルに対して、find コマンドから始めて mv コマンドでファイル名を変更するワンライナーを実行すると、 mv コマンドが約158万回実行されました。

ワンライナーでやろうとしてハマった？

Re:

[manmos (29892)]

findを実行した時点でのファイルだけをmvしたかったのに、mvされたあとのファイルもfindに引っかかってしまった。
って、よくあるお話。

当然やんとしか思わない。

Re:

[Ryo.F (3896)]

言うほどよくある話ではない気がするけど。
FTS_MAX_READDIR_ENTRIES(既定では100,000)を超える数のファイルを対象にしたときに発生して、しかも発生するファイル数は一定ではない、ってわけでしょ?
ファイル数が多くても、複数ディレクトリにファイルが分散してる場合だとこの現象は発生しなさそうだし。

参考までに聞いときたいんだけど、どんな場合に発生したことがあるんですか?

Re:これか？

[manmos (29892)]

つか、減る話はなんぼでもあるわけで、-depthオプションとかあることを考えるとfindがatomicでないことなんて自明でしょう。
まあ「よく」はないかもしれないけど、それは予想しておけって事ですね。

＃大阪人は「まあ、ようある話」って「よう言います」から。ようしらんけど。

Re:これか？

[Ryo.F (3896)]

減る話はなんぼでもあるわけで

意味不明です。

-depthオプションとかあることを考えるとfindがatomicでないことなんて自明でしょう。

複数ディレクトリ間でアトミックでないのは自明だけど、
ディレクトリ内でアトミックでないことは、必ずしも自明じゃないでしょう。
なので、

findを実行した時点でのファイルだけをmvしたかったのに、mvされたあとのファイルもfindに引っかかってしまった。
って、よくあるお話。

は、ディレクトリ間でそういうことがあった、という違う話を、ディレクトリ内の話と混同したように見えます。

ディレクトリ内も非アトミックに実装されている可能性がある、
という意味で予測できる、と言うなら、確かにその通りですが、
経験したわけでも、コードレビューしたわけでもなければ、後知恵ですね。

仮に、その可能性を事前に考えていたとしても、
今回の検証で得られた知見は超えられてないですね。
FTS_MAX_READDIR_ENTRIESを一つでも超えれば発生する、というわけではないのだから。