「検索エンジンのキャッシュは著作権侵害か?」記事へのコメント

robots.txt

[k3c (4386)]

検索エンジンに来て欲しくなければ、 robots.txt [robotstxt.org]を使えばよいでしょう。
というか、当のgoogleのページの削除 [google.co.jp]にも書いてあるんですが…。

で、googleはこういうインターフェイスを用意し

Re:robots.txt

[kero (6940)]

すべての検索エンジン(類似ソフト)が robot.txt に準拠(?)している保証は無いですよね．
Google の cache も例に出ているだけで，すべてに対応した話ではないです．

著作権者およびその代理人が，すべての検索エンジンへの対処法を理解し，実行しなければならないのでしょうか？
もちろん自分の財産ですから，努力するのは良いことでしょうけど・・・

--
kero

Re:robots.txt

[Anonymous Coward]

＞すべての検索エンジン(類似ソフト)が robot.txt に準拠(?)している保証は無い

Wayback Machine(The Internet Archive) [archive.org]あたりが良い例ですよね。

ここは、robots.txtを無視するのは当たり前として(?)、
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">も
<META NAME="ROBOTS" CONTENT="NOARCHIVE">も
全部綺麗に無視して"Archive"してくれています。

公開している以上仕方ないと考えられれば良いんだけど、
やはり残っていて欲しくないものもあったりして、
こういうのの存在も善し悪しだなと思うことも…

そうかと思えば、以前/.-Jでも

Re:robots.txt

[Anonymous Coward]

archive.orgは robots.txtを読んでいると思います。
<META>タグはわかりませんが。

参考までに・・、
http://web.archive.org/collections/web/faqs.html#exclusions [archive.org]

# robots.txt を robot.txt と間違っている人かなりいそう。
てか、自分がそうだった。

Re:robots.txt

[makoko (8394)]

最近archive.orgも細かいところが変わったようで。

２，３ヶ月前は、Cache/Archive抑制用のMETAタグを含んだページが
当たり前のようにarchiveされていて閉口ものだったのですが、
先ほど検索したら、引っかからなくなっていました。

昔からのURLである、http://web.archive.orgにアクセスすると、
www.archive.orgにリダイレクトされるように変更された事もあり
なんらかの変更が行われたみたいですね。ポリシーとかも含め。