SEOツール　ahrefsのクロールエラーについて【続き】

Question

ECマスターズ　ご担当者様

お世話になります。

先日こちらの質問をしました。

https://forum.ec-masters.net/post_view.php?id=21716

サーバーをSD-11プランというものに変更しましたが
やはりahrefsのクロールエラーが出ます。

サーバーを変更しましたが、表示速度はあまり変化が感じられません。

参考に教えて頂いた下記のURLを参考に

https://bondesign.jp/archives/1712/

.htaccessファイルにも
「mod_deflate」「mod_expires」の設定をしました。

以下が.htaccessの記述の中身です。

-------------------------------------------------------


# BEGIN WordPress
# "BEGIN WordPress" から "END WordPress" までのディレクティブ (行) は
# 動的に生成され、WordPress フィルターによってのみ修正が可能です。
# これらのマーカー間にあるディレクティブへのいかなる変更も上書きされてしまいます。

RewriteEngine On
RewriteRule .* - [E=HTTP_AUTHORIZATION:%{HTTP:Authorization}]
RewriteBase /
RewriteRule ^index\.php$ - [L]
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule . /index.php [L]









SetOutputFilter DEFLATE
 
# gifやjpgなど圧縮済みのコンテンツは再圧縮しない
SetEnvIfNoCase Request_URI .(?:gif|jpe?g|png|ico)$ no-gzip dont-vary
SetEnvIfNoCase Request_URI _.utxt$ no-gzip
 
# htmlやcssなどは圧縮
AddOutputFilterByType DEFLATE text/plain
AddOutputFilterByType DEFLATE text/html
AddOutputFilterByType DEFLATE text/xml
AddOutputFilterByType DEFLATE text/css
AddOutputFilterByType DEFLATE application/xhtml+xml
AddOutputFilterByType DEFLATE application/xml
AddOutputFilterByType DEFLATE application/rss+xml
AddOutputFilterByType DEFLATE application/atom_xml
AddOutputFilterByType DEFLATE application/x-javascript
AddOutputFilterByType DEFLATE application/x-httpd-php






ExpiresActive On
ExpiresByType image/png "access plus 1 months"
ExpiresByType image/jpeg "access plus 1 months"
ExpiresByType image/gif "access plus 1 months"
ExpiresByType text/css "access plus 1 months"
ExpiresByType text/javascript "access plus 1 months"







# END WordPress

-------------------------------------------------------


あと、wordpressのプラグインもSSLのプラグイン以外を全て無効化して
クロールを試みましたが、エラーとなります。



解決方法があれば教えて頂きたいです。

以上ご確認宜しくお願い致します。
ご回答お待ちしております。

Accepted Answer

ECマスターズ 田中様

お世話になっております。

＞一度、グループ会社のEC WORKSへお問い合わせいただけますでしょうか。
＞https://ec-works.net/
＞まずは担当スタッフにて、状況確認および見積もりを
＞行わせていただければと思いますので、
＞ご検討のほどよろしくお願いいたします。

こちらかしこまりました。
それでは、見積り依頼を致します。

以上ご確認宜しくお願い致します。

Answer

ECマスターズの田中です。

https://ahrefs.com/ja/robot
にて確認した結果を見ると、

The HTTP server returned error 403: "Forbidden". This request was likely filtered by server configuration.
意訳：403エラーが発生しました。おそらくサーバーの設定により接続拒否されています。

という内容が多く見られます。
なお、私の環境でrobots.txtを閲覧しても403エラーは発生しておりません。

今一度、何らかの接続拒否設定が行われていないか、
ご確認いただけますでしょうか。

おそらくpleskというサーバー側の管理画面を利用されているかと思いますが、
その他、お名前.com側の設定画面などが存在していないか、など、
念のため今一度ご確認をお願いいたします。

また、WordPressプラグインをすべて無効化された際、
robots.txtや各ページの読み込み速度に改善があったか、
お聞かせいただけますと幸いです。

なお、「mod_deflate」「mod_expires」の設定は
今回の件とあまり関連しないかと思いますので、
トラブルを避けるために、
.htaccessは一旦編集せずに置いておいていただきますようお願いします。

何らかの理由で追記を行われる際は、
# BEGIN WordPress
から
# END WordPress
までの内容は手動で修正を行わないよう、ご注意いただきますようお願いします。

Answer

ECマスターズ 田中様

お世話になっております。

＞The HTTP server returned error 403: "Forbidden". This request was likely filtered by server configuration.
＞意訳：403エラーが発生しました。おそらくサーバーの設定により接続拒否されています。

＞という内容が多く見られます。
＞なお、私の環境でrobots.txtを閲覧しても403エラーは発生しておりません。

＞今一度、何らかの接続拒否設定が行われていないか、
＞ご確認いただけますでしょうか。

こちらお名前ドットコムのサーバーを見ても
接続拒否設定がどこにあるかわかりません。

Web設定の箇所のアクセス制限という箇所を見ても
何も設定されていません。

管理画面のスクリーンショットを添付致します。

接続拒否設定は今までしたことがないと思います。


＞おそらくpleskというサーバー側の管理画面を利用されているかと思いますが、
＞その他、お名前.com側の設定画面などが存在していないか、など、
＞念のため今一度ご確認をお願いいたします。

今回のサイト
https://orlo-osaka.com/

こちらのサーバーはpleskは関係なく
お名前ドットコムのレンタルサーバーのみで動いています。


＞また、WordPressプラグインをすべて無効化された際、
＞robots.txtや各ページの読み込み速度に改善があったか、
＞お聞かせいただけますと幸いです。

こちらは、あまり変化はありませんでした。
特にrobots.txtの読み込みは以前と同じくらいのスピードです。


＞なお、「mod_deflate」「mod_expires」の設定は
＞今回の件とあまり関連しないかと思いますので、
＞トラブルを避けるために、
＞.htaccessは一旦編集せずに置いておいていただきますようお願いします。

＞何らかの理由で追記を行われる際は、
＞# BEGIN WordPress
＞から
＞# END WordPress
＞までの内容は手動で修正を行わないよう、ご注意いただきますようお願いします。


こちらかしこまりました。

.htaccessの内容を以下に戻しました。



# BEGIN WordPress
# "BEGIN WordPress" から "END WordPress" までのディレクティブ (行) は
# 動的に生成され、WordPress フィルターによってのみ修正が可能です。
# これらのマーカー間にあるディレクティブへのいかなる変更も上書きされてしまいます。

RewriteEngine On
RewriteRule .* - [E=HTTP_AUTHORIZATION:%{HTTP:Authorization}]
RewriteBase /
RewriteRule ^index\.php$ - [L]
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule . /index.php [L]





# END WordPress


サイト監査アクセスに関する一般的な問題のトラブルシューティング
https://help.ahrefs.com/en/articles/1402668-troubleshooting-common-issues-with-site-audit-access

こちらのページを見ると

サーバーのホワイトリストにIPを追加してください。 

私たちのIP： 
https ：//help.ahrefs.com/about-ahrefs/what-is-the-list-of-your-current-ip-ranges

とありますが、お名前ドットコムの管理画面に
特定のIPアドレスを入れる箇所が見当たりません。


この場合、どのようにすれば良いのでしょうか？

以上ご確認宜しくお願い致します。
ご回答宜しくお願い致します。###HR######IMG0958e8fd37e2c66478e295fc7457078fd.pngIMG0### ###IMG19ddda79ef8793d0e8be8de45b631b038.pngIMG1###

Answer

ECマスターズの田中です。

状況の共有、および.htaccessの内容の差し戻し、
ご対応いただきありがとうございます。

共用サーバーSDのヘルプを確認したところ、
WAF設定という項目があることがわかりました。

https://guide.onamae-server.com/sd/4_18_88_171/
（※「無効」への変更は行わないでください。後ほどご説明します）

上記、WAF設定の「ログ参照」をご確認の上、
https://help.ahrefs.com/en/articles/78658-what-is-the-list-of-your-ip-ranges
に掲載されているIPアドレスが掲載されているか、
ご確認いただきますようお願いします。

ログが大量にある場合は、
CSVダウンロードを行っていただいた上で、IPアドレスの一部である
54.36.14
195.154.12
51.222.253
168.119.6
で検索していただくとわかりやすいかと思います。

もし掲載されておりましたら、
各ログを個別に「除外設定」していただき、
改善されるかどうかご確認いただきますようお願いします。

機能全体を「無効」にしてしまいますと、
マニュアルにも記載がございますとおり、
サイト改ざん・情報漏えいのリスクが発生しますので、
必ず「有効」のままで、個別に除外設定を行っていただきますようお願いします。

Answer

ECマスターズ 田中様

お世話になっております。

＞共用サーバーSDのヘルプを確認したところ、
＞WAF設定という項目があることがわかりました。

＞https://guide.onamae-server.com/sd/4_18_88_171/
＞（※「無効」への変更は行わないでください。後ほどご説明します）

こちら確認しましたが、元々無効の状態になっておりました。
スクリーンショットを添付致します。

すぐにでも有効に変更した方が良いのでしょうか？

以上ご確認宜しくお願い致します。
お返事お待ちしております。###HR######IMG006269ee6862121e35c1dc1a1f7e64d62.pngIMG0###

Answer

ECマスターズの田中です。

これまでずっと無効にされていた、ということですね。
差し支えなければ、有効へご変更いただき、
念のためサイトの表示に影響がないかご確認願います。

残念ながら、私の知見不足のため、
たとえ管理画面にログインしたとしても
これ以上の対策は難しいものと存じます。

一度、グループ会社のEC WORKSへお問い合わせいただけますでしょうか。
https://ec-works.net/
まずは担当スタッフにて、状況確認および見積もりを
行わせていただければと思いますので、
ご検討のほどよろしくお願いいたします。

Answer

ECマスターズの田中です。

大変申し訳ありません、
ECワークスのお問い合わせフォームにて、
フォームの送信内容がECワークス側で確認できない不具合が
発生していることがわかりました。

フォームは修正済みですが、
なおきちさんからの内容が確認できておりませんので、
もしなおきちさんにてすでに送信を行われている場合は、

大変お手数ですが、
フォーム送信時にメールで送信しております
お問い合わせありがとうございます
という件名のメールを、support@ec-works.net 宛に
転送していただきますようお願いします。

不明な点がございましたらお知らせください。
何卒よろしくお願いいたします。

Answer

ECマスターズ 田中様

お世話になっております。

先程メールを転送致しました。

以上ご確認宜しくお願い致します。
引き続き宜しくお願い致します。

Answer

ECマスターズの田中です。

早急なご対応、誠にありがとうございます。
担当にて確認の上、改めてご連絡させていただきますので、
今しばらくお待ちいただきますようお願いします。

SEOツール ahrefsのクロールエラーについて【続き】

SEOツール　ahrefsのクロールエラーについて【続き】