Weblio辞書
サービスのご案内
掲載内容について
クローラーについて
1.クローラーについて
「Webliobot」は、GRASグループ株式会社がシステムと新サービスの研究開発を目的として管理・開発・運用しているクローラーの名称です。「Webliobot」のユーザーエージェントは以下の通りです。
Mozilla/5.0 (compatible; Webliobot/0.1; +http://www.weblio.jp/info/crawler.jsp)
2.アクセス制限の方法について
Webliobotは、robots.txtやメタタグによる記述に従って動作します。
Webliobotのアクセスが皆様のWebサーバーへの負荷などにならないよう、細心の注意を払っておりますが、もし何らかの問題が生じた場合には、アクセスを制限するように設定することができます。
詳細は、Robotstxt.org の下記情報をご参照下さい。
robots.txtによる設定方法 : About /robots.txt (Robotstxt.org)
メタタグによる設定方法 : About the Robots <META> tag (Robotstxt.org)