アカウント名:
パスワード:
クローラで記事を収集しているのだろうから、robots.txtで制御すればいいんじゃないでしょうか。そうすれば各新聞社サイトの記事ページのページビューがどれだけ下がるか検証できるでしょう。
もしかして「検索エンジンには上位に出してほしいけど、ニュースポータルには出してほしくない。」とかそういう話でしょうか?だとしたら、ニュース専用ディレクトリ方式検索エンジンとニュースポータルの本質的な違いを定義する必要がありますね。
より多くのコメントがこの議論にあるかもしれませんが、JavaScriptが有効ではない環境を使用している場合、クラシックなコメントシステム(D1)に設定を変更する必要があります。
コンピュータは旧約聖書の神に似ている、規則は多く、慈悲は無い -- Joseph Campbell
robots.txtじゃだめなの? (スコア:3, すばらしい洞察)
クローラで記事を収集しているのだろうから、robots.txtで制御すればいいんじゃないでしょうか。
そうすれば各新聞社サイトの記事ページのページビューがどれだけ下がるか検証できるでしょう。
もしかして「検索エンジンには上位に出してほしいけど、ニュースポータルには出してほしくない。」とかそういう話でしょうか?
だとしたら、ニュース専用ディレクトリ方式検索エンジンとニュースポータルの本質的な違いを定義する必要がありますね。