【Googleが公にしている14の法則】クローラーへのアプローチ①

Posted by ウェブクリエイト webcreat on 2014年2月10日 in SEO |
記述法

【Googleが公にしている14の法則】クローラーへのアプローチ①

↓本日の目次↓
———————————————-
(1)robots.txtを有効活用しよう!
(2)大切かつ重要なコンテンツはより安全な手段で公開しよう!
———————————————-
(1)robots.txtを有効活用しよう!
クローラーが巡回する時に不要なファイルは取り除き巡回してもらうよう指定するファイル。
このファイルはマスターツールを使えば簡単に作成できます。

また、サブドメインを持っている場合は、サブドメイン用に新たにrobots.txtを作成せねばいけません。そしてこのファイルはルートディレクトリ(一番上の階層)にあることが必須条件です。
(※前にもブログで書きましたが、サブドメインと本ドメインは全く別サイトとみなされる為、各々で設定することが大事なのです。)
robot.txtを上手に使い分けよう
(2)大切かつ重要なコンテンツはより安全な手段で公開しよう!
機密情報や人に見せたくないファイルなどをUPしている場合、robot.txtだけでは十分な対処とは言えません。
では、その為に何をすれば良いか?
.htaccessを用いてパスワードをかける方法が一般的と言われてます。(言葉の意味は下記参照)
.htaccessを使えばキャリアごとのファイル振り分けも可能になりますし、是非覚えておきたい手法でもあります。
ここでの教訓は、

①検索結果のようなページはクロールさせない
②同一か、ほとんど違いのないような自動生成されたページを大量にクロールさせないようにする
プロキシサービスによって生成されたURLはクロールさせないようにする

上記3点が肝になってくるとgoogleは提示してます。
SEOって難しい!と思っている方も、このように公式に提示されていることを一つずつ行っていけば確実に順位はあがる傾向にあります。
あとはひたすら「続けることが大事」です。

■□■□■言葉の説明■□■□
●.htaccessとは?
WEBサーバーの動作環境を制御するアクセス環境設定ファイルのこと
●リファラーログとは?

アクセウログに記載されているリファラー情報。これをたどっていくと閲覧者がどこのサイトから来たかなどが調べられる。
●プロキシサービスとは?
内部ネットワークと外部ネットワークを接続する場合に代行するコンピューター、またはそのための機能を持ったソフトウェアのこと
■□■□■□■□■□■□■□

最後までご購読頂きありがとうございます☆
また次回もよろしくお願いします。

–PR————————–————————————
埼玉県でPCにお困りの方はお電話下さい!
パソコンの故障・修理・データ復旧はPCレスキュー
お電話はこちら >048-829-9044
※FAXでのお問い合わせなら24時間OK※
–広告————————–———————————–

タグ: , , , , , ,

Comments are closed. Would you like to contact the author directly?

Copyright © 2013-2017 ホームページ制作 さいたま市・川口市 ウェブクリエイト All rights reserved.
This site is using the Multi Child-Theme, v2.1.1, on top of
the Parent-Theme Desk Mess Mirrored, v2.2, from BuyNowShop.com.