.htaccessについての質問

フォーラム(掲示板)ルール
フォーラム(掲示板)ルールはこちら  ※コードを貼り付ける場合は [code][/code] で囲って下さい。詳しくはこちら
clanguagerr

.htaccessについての質問

#1

投稿記事 by clanguagerr » 9年前

.htaccessについての質問です。

.htaccessでユーザーエージェントを指定して以下のようにアクセス拒否したとします。

User-agent: Googlebot
Disallow: /

その場合、googleは次の2つの内どちらのように解釈するでしょうか。

①拒否された(すべてのユーザーエージェント対して拒否しているのか、Googlebotだけ拒否しているのかは分からない。つまり、全員を嫌っているのか、自分だけ嫌われいるのかはわからない。)
②自分だけ拒否された(Googlebotだけ拒否していることがわかる。つまり、自分だけ嫌われいることがわかる)

理由も添えて頂けると助かります。

よろしくお願いします。

アバター
h2so5
副管理人
記事: 2212
登録日時: 13年前
住所: 東京
連絡を取る:

Re: .htaccessについての質問

#2

投稿記事 by h2so5 » 9年前

robots.txtの文法と間違えていませんか?

clanguagerr

Re: .htaccessについての質問

#3

投稿記事 by clanguagerr » 9年前

ありがとうございます。

>>robots.txtの文法と間違えていませんか?

申し訳ありません。間違えました。

robots.txtの場合、googleは「自分だけ嫌われている」と分かると思いますが、.htaccessの場合はどうでしょうか。(分からない気がしますが、確信が持てません・・・)

引き続きお願い致します。




SetEnvIf User-Agent "Googlebot" shutout
SetEnvIf User-Agent "Slurp" shutout
SetEnvIf User-Agent "msnbot" shutout

order Allow,Deny
Allow from all
Deny from env=shutout

アバター
h2so5
副管理人
記事: 2212
登録日時: 13年前
住所: 東京
連絡を取る:

Re: .htaccessについての質問

#4

投稿記事 by h2so5 » 9年前

User-Agentを変えて何度かアクセスすればどのUser-Agentが拒否されているのかは当然分かってしまいますよね。
User-Agent自体はいくらでも偽装できるので。

clanguagerr

Re: .htaccessについての質問

#5

投稿記事 by clanguagerr » 9年前

どうもありがとうございます。

googleはユーザーエージェントを偽装するでしょうか。具体的にはgooglebotという文字列を入れないでクロールするでしょうか。


再度、よろしくお願い申し上げます。

アバター
みけCAT
記事: 6734
登録日時: 13年前
住所: 千葉県
連絡を取る:

Re: .htaccessについての質問

#6

投稿記事 by みけCAT » 9年前

Google クローラ - ウェブマスター ツール ヘルプ
ここによると、Mediapartners-GoogleおよびAdsBot-Googleにはgooglebotという文字列が入っていないようです。
複雑な問題?マシンの性能を上げてOpenMPで殴ればいい!(死亡フラグ)

clanguagerr

Re: .htaccessについての質問

#7

投稿記事 by clanguagerr » 9年前

返信が遅くなってしまい、申し訳ありません。

どうもありがとうございました。

閉鎖

“C言語何でも質問掲示板” へ戻る