Nibblerで診断

Question

NibblerでWEBサイトの診断をしたいと思い使用したのですが、
The server at 　WEBサイトのURL 　is saying that access is forbidden　と出て診断できませんでした。

翻訳するとサーバーはアクセスが禁止されていると書いてありました。

考えられる理由がありましたら教えていただけますでしょうか？

Answer

ECマスターズの田中です。

＞NibblerでWEBサイトの診断をしたいと思い使用したのですが、
＞The server at 　WEBサイトのURL 　is saying that access is forbidden　と出て診断できませんでした。

robots.txtによって接続拒否の意思を示されてはおりませんでしょうか。
https://www.adminweb.jp/wmt/robots-txt/index1.html
robots.txtの書き方は上記URLに記載されている通りとなりますので、
WEBサイトが属するドメインのrobots.txtの設定をご確認いただきますようお願いします。

特に拒否するような記載がない場合は、私にて確認させていただきますので、
WEBサイトのURLをお知らせいただけますでしょうか。
フォーラムにてご返答いただきづらい場合は、リクエストフォームよりお知らせください。

Answer

ご返信ありがとうございます。

素人で申し訳ございません。
ドメインのrobots.txt設定とはどちらで確認させていただいたらいいでしょうか？
WordPressで作成したサイトになるのですが、プラグインでAll in One SEO Packの中にrobots.txtという項目はありますがそちらでしょうか？

Answer

ECマスターズの田中です。

＞ドメインのrobots.txt設定とはどちらで確認させていただいたらいいでしょうか？
通常ですと
WEBサイトのドメイン/robots.txt　（例： http://sample.com/robots.txt）
を覗いていただくのが一番早いのですが、
Wordpressがインストールされたサイトの場合、
パーマリンク設定が初期設定のままだと、ブラウザから確認することができません。
（詳しくは https://naifix.com/robots-txt/ をご参照ください）

Wordpressのプラグイン「KB robots.txt」をご利用いただくことで、
管理画面から直接編集できるようになりますので
一度インストールの上ご確認いただければと思います。
http://gamerchiko.com/plugin-kb-robots-txt.html

＞プラグインでAll in One SEO Packの中にrobots.txtという項目はありますがそちらでしょうか？
「Link From Virtual Robots.txt」と言うチェックボックスのことでしたら、
こちらは今回の内容とは関係のない設定となります。

Answer

ご返信ありがとうございます。

WEBサイトのドメイン/robots.txtで見てみると404エラーが出てしまいます。
パーマリンク設定が初期設定なのでしょうか？
パーマリンクの設定は投稿名になっています。

http://www.seotools.jp/というツールでは一応診断出来ました。

サイトかサーバーに何か問題があるのか考えられますでしょうか？

Answer

ECマスターズの田中です。

＞http://www.seotools.jp/というツールでは一応診断出来ました。
でしたら、robots.txtによる原因とは考えにくく、
やはり実際の様子を確認する必要がありますので、
実際に診断にかけられたURLをお知らせいただけますでしょうか。
フォーラムにてご返答いただきづらい場合は、リクエストフォームよりお知らせください。

なお、ECマスターズツールにご登録いただいている
「オリジナルショップURL」を、私にてNibblerで診断してみたところ
正常に診断することができました。
もし、同じURLでしたら、M店長さんでも再度診断を試みていただけますでしょうか。

Answer

ECマスターズの田中です。

リクエストフォームにてお知らせいただきありがとうございました。

いただいたURLを確認したところ、
http://ドメイン.com/m/
のように、「m」フォルダの中にWordpressがインストールされており、
公開するためのコンテンツの用意がないドメインの一番上、
http://ドメイン.com/
にアクセスしようとすると、403エラー（アクセスが許可されていない）が発生するようになっております。

Nibblerは、ドメイン単位で調査を行うシステムです。
例）http://www.rakuten.co.jp/rakuten24 と入力すると、 http://www.rakuten.co.jp/ の調査を行う
そのため、http://ドメイン.com/m/をチェックしようとすると、
http://ドメイン.com/ にアクセスし、結果として「access is forbidden」というメッセージが出る、
という状況になっておりました。

Answer

お世話になっております。

ドメインの調査の件ありがとうございました。
Nibblerのシステム上このドメインは調査ができないという事ですね。

サイトの設定やサーバーに不備がないのであればよかったです。
ありがとうございました。