検索エンジンのみ許可.htaccess
PCからのアクセスをIP制限したいけど、
検索エンジンのクローラーには来てほしい。
そんな思いで作った.htaccessです。
2008年7月23日更新ver
・・というかもう、
ケータイキャリア・クローラIPアドレス
http://ke-tai.org/index.php?%A5%B1%A1%BC%A5%BF%A5%A4%A5%AD%A5%E3%A5%EA%A5%A2%A1%A6%A5%AF%A5%ED%A1%BC%A5%E9IP%A5%A2%A5%C9%A5%EC%A5%B9
こちらのサイトを見ていただければよいかと。
order deny,allow
deny from all
# docomo 2008/02/20
# http://www.nttdocomo.co.jp/service/imode/make/content/ip/
# http://www.dspt.net/tools/mobile_ip/generator.php
allow from 210.153.84.0/24
allow from 210.136.161.0/24
allow from 210.153.86.0/24
allow from 210.153.87.0/24
allow from 203.138.180.0/24
allow from 203.138.181.0/24
allow from 203.138.203.0/24
allow from 124.146.174.0/24
allow from 124.146.175.0/24
# ezweb 2008/02/19
# http://www.au.kddi.com/ezfactory/tec/spec/ezsava_ip.html
allow from 121.111.227.0/25
allow from 121.111.231.0/25
allow from 121.111.231.160/27
allow from 210.169.40.0/24
allow from 210.196.3.192/26
allow from 210.196.5.192/26
allow from 210.230.128.0/24
allow from 210.230.141.192/26
allow from 210.234.105.32/29
allow from 210.234.108.64/26
allow from 210.251.1.192/26
allow from 210.251.2.0/27
allow from 211.5.1.0/24
allow from 211.5.2.128/25
allow from 211.5.7.0/24
allow from 218.222.1.0/24
allow from 219.108.157.0/25
allow from 219.108.158.0/26
allow from 219.125.145.0/25
allow from 219.125.148.0/24
allow from 219.125.151.128/25
allow from 222.5.62.128/25
allow from 222.5.63.0/24
allow from 222.7.56.0/24
allow from 222.7.57.0/24
allow from 59.135.38.128/25
allow from 61.117.0.0/24
allow from 61.117.1.0/24
allow from 61.117.2.0/26
allow from 61.202.3.0/24
# softbank 2008/02/19
# http://developers.softbankmobile.co.jp/dp/tech_svc/web/ip.php
allow from 123.108.236.0/24
allow from 123.108.237.0/27
allow from 202.179.204.0/24
allow from 202.253.96.224/27
allow from 210.146.7.192/26
allow from 210.146.60.192/26
allow from 210.151.9.128/26
allow from 210.169.130.112/28
allow from 210.175.1.128/25
allow from 210.228.189.0/24
allow from 211.8.159.128/25
# Googlebot、Mediapartners-Googleを許可
allow from 66.249.64.0/19
allow from 209.85.128.0/17
allow from 64.233.160.0/19
# Yahooモバイル
allow from 124.83.159.128/25
# Livedoor
allow from 203.104.254.0/24
# gooモバイル
allow from 210.150.10.32/27
# froute-crawler
allow from 60.43.36.253
# moba-crawler
allow from 202.238.103.126
allow from 202.213.221.97
# Yicha
allow from 220.194.55.45
# fileseek
allow from 202.229.18.0/24
# YahooPC
allow from 66.228.160.0/19
allow from 67.195.0.0/16
allow from 68.180.128.0/17
allow from 72.30.0.0/16
allow from 74.6.0.0/16
allow from 66.94.224.0/19
allow from 66.196.64.0/18
allow from 68.142.192.0/18
allow from 202.165.96.0/21
# GooglePC
allow from 66.102.0.0/20
allow from 72.14.192.0/19
allow from 72.14.224.0/21
allow from 216.239.32.0/19
あまり自信はありません。
ぐぐって出てきた検索エンジンIP情報をとにかく突っ込みました。
一応、Yahooモバイル・Googleモバイルのクローラーが訪れたことを確認済みです。
あとモバゲーのクローラーとかも。
補足がありましたら、ぜひ教えていただきたいです。
よろしくお願いします。
⇒参考URL
ケータイキャリア・クローラIPアドレス
http://ke-tai.org/index.php?%A5%B1%A1%BC%A5%BF%A5%A4%A5%AD%A5%E3%A5%EA%A5%A2%A1%A6%A5%AF%A5%ED%A1%BC%A5%E9IP%A5%A2%A5%C9%A5%EC%A5%B9
携帯検索エンジンのcrawler
http://honobono88.blog69.fc2.com/blog-entry-37.html
Mobile IP htaccess Maker
http://www.dspt.net/tools/mobile_ip/generator.php
モバイル検索サイト クローラー一覧
http://www.sin-news.com/archives/2007/09/post_120.html
ロボ避けとアクセス制限のための覚え書き
http://wiki.livedoor.jp/aissle/d/FrontPage
IPアドレスで振り分けている携帯専用サイトでモバイル版AdSenseを使う方法
http://kazamidori.net/kaoru/2007/10/mediapartners.html