「CCCが運営する海老名市立図書館の公式サイトは「無断リンク禁止」」記事へのコメント

検索サイト

[Anonymous Coward]

Googleなどからの事前連絡はあったのでしょうか。

Re:

[Anonymous Coward]

User-agent: *
Crawl-delay: 10
# Directories
# 2015.08.17 ADD start
Disallow: /

https://ebina.city-library.jp/library/robots.txt [city-library.jp]

お断りします

嫌な雰囲気な robots.txt ですね

[Printable is bad. (38668)]

なんか、嫌な雰囲気な robots.txt ですね。

Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /INSTALL.sqlite.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
Disallow: /admin/
Disallow: /?q=admin/

あたりは、管理用のプログラム等だと思われますが、robots.txt でクロールを拒否する以前に、そもそもWeb公開用のディレクトリ（public_html）以下に置くべきものではありません。アクセス時に適切に認証を要求していたとしても cron.php は余計だし、ルートに install.php なん

Re:嫌な雰囲気な robots.txt ですね

[snurf-kim (10835)]

>なんか、嫌な雰囲気な robots.txt ですね。

おそらく、それはDrupal付属の robots.txt です。
https://api.drupal.org/api/drupal/robots.txt/7 [drupal.org]

＃「This file is to prevent the crawling and indexing of certain parts」で検索したら引っ掛かった。

>設置場所がrootではなくサブディレクトリなのも駄目ですね。

サブディレクトリにある理由は、単にDrupalの配置先にDrupal付属の robots.txt があるってだけで、サイト製作者が作って置いたものではない様子。

なので、私は件のサイトには検索避けの robots.txt は置かれていないと判断します。

Re:嫌な雰囲気な robots.txt ですね

[Printable is bad. (38668)]

おそらく、それはDrupal付属の robots.txt です。
サブディレクトリにある理由は、単にDrupalの配置先にDrupal付属の robots.txt があるってだけで、サイト製作者が作って置いたものではない様子。

なるほど。

サイト管理者が意図して設置したわけではなく、CMSのパッケージに含まれていた robots.txt をそのままアップロードしただけでしたか。

Re:

[Anonymous Coward]

ところで Drupal って設定ファイルの場所を変更できないの？
コンテンツフォルダ配下に置くってデンジャラス過ぎるでしょう。

Apacheのアップデートしたときに、
PHP がそのまま表示されちゃうとかいう落ちは勘弁。