「/.jpも対象の即時に検索」記事へのコメント

巡回ペース

[Anonymous Coward]

って事は、１５分に１回のペースで全ページ拾われるって事か？
人によっては迷惑なペースのような。
#robot.txt更新しなくては。

Re:巡回ペース

[Anonymous Coward]

プル型じゃなくてプッシュ型とでもいうか、コンテンツが更新されたら
自分のほうからサーチエンジンに知らせてあげる枠組みは作れないものだろうか。

協力者はサーバにアドインを仕込む。更新したときには
自動的にサーチエンジンのデータベースに登録してあげる。

こうすると無駄がない上に提供者の意思で登録したりはずせたりして便利なんだけど。しかも最速。

Re:巡回ペース

[tyamadajp (10476)]

そういう subscribe-notify モデルをサポートするための HTTP/1.1 の拡張として HTTPEvents [google.com] とか MONITOR [google.com] 命令が語られていたりします。

これが入れば今のリンクと同じようにモニタ関係で結ばれたページ群が各所に自己生成して、その中から生まれた巨大群だけサーチエンジンがモニタ、みたいな構造ができそうです。