検索エンジンのみ許可.htaccess


PCからのアクセスをIP制限したいけど、
検索エンジンクローラーには来てほしい。
そんな思いで作った.htaccessです。

2008年7月23日更新ver

・・というかもう、
ケータイキャリア・クローラIPアドレス
http://ke-tai.org/index.php?%A5%B1%A1%BC%A5%BF%A5%A4%A5%AD%A5%E3%A5%EA%A5%A2%A1%A6%A5%AF%A5%ED%A1%BC%A5%E9IP%A5%A2%A5%C9%A5%EC%A5%B9
こちらのサイトを見ていただければよいかと。




order deny,allow
deny from all

# docomo 2008/02/20
# http://www.nttdocomo.co.jp/service/imode/make/content/ip/
# http://www.dspt.net/tools/mobile_ip/generator.php
allow from 210.153.84.0/24
allow from 210.136.161.0/24
allow from 210.153.86.0/24
allow from 210.153.87.0/24
allow from 203.138.180.0/24
allow from 203.138.181.0/24
allow from 203.138.203.0/24
allow from 124.146.174.0/24
allow from 124.146.175.0/24


# ezweb 2008/02/19
# http://www.au.kddi.com/ezfactory/tec/spec/ezsava_ip.html
allow from 121.111.227.0/25
allow from 121.111.231.0/25
allow from 121.111.231.160/27
allow from 210.169.40.0/24
allow from 210.196.3.192/26
allow from 210.196.5.192/26
allow from 210.230.128.0/24
allow from 210.230.141.192/26
allow from 210.234.105.32/29
allow from 210.234.108.64/26
allow from 210.251.1.192/26
allow from 210.251.2.0/27
allow from 211.5.1.0/24
allow from 211.5.2.128/25
allow from 211.5.7.0/24
allow from 218.222.1.0/24
allow from 219.108.157.0/25
allow from 219.108.158.0/26
allow from 219.125.145.0/25
allow from 219.125.148.0/24
allow from 219.125.151.128/25
allow from 222.5.62.128/25
allow from 222.5.63.0/24
allow from 222.7.56.0/24
allow from 222.7.57.0/24
allow from 59.135.38.128/25
allow from 61.117.0.0/24
allow from 61.117.1.0/24
allow from 61.117.2.0/26
allow from 61.202.3.0/24


# softbank 2008/02/19
# http://developers.softbankmobile.co.jp/dp/tech_svc/web/ip.php

allow from 123.108.236.0/24
allow from 123.108.237.0/27
allow from 202.179.204.0/24
allow from 202.253.96.224/27
allow from 210.146.7.192/26
allow from 210.146.60.192/26
allow from 210.151.9.128/26
allow from 210.169.130.112/28
allow from 210.175.1.128/25
allow from 210.228.189.0/24
allow from 211.8.159.128/25

# Googlebot、Mediapartners-Googleを許可
allow from 66.249.64.0/19
allow from 209.85.128.0/17
allow from 64.233.160.0/19

# Yahooモバイル
allow from 124.83.159.128/25

# Livedoor
allow from 203.104.254.0/24

# gooモバイル
allow from 210.150.10.32/27

# froute-crawler
allow from 60.43.36.253

# moba-crawler
allow from 202.238.103.126
allow from 202.213.221.97

# Yicha
allow from 220.194.55.45

# fileseek
allow from 202.229.18.0/24

# YahooPC
allow from 66.228.160.0/19
allow from 67.195.0.0/16
allow from 68.180.128.0/17
allow from 72.30.0.0/16
allow from 74.6.0.0/16
allow from 66.94.224.0/19
allow from 66.196.64.0/18
allow from 68.142.192.0/18
allow from 202.165.96.0/21

# GooglePC
allow from 66.102.0.0/20
allow from 72.14.192.0/19
allow from 72.14.224.0/21
allow from 216.239.32.0/19


あまり自信はありません。
ぐぐって出てきた検索エンジンIP情報をとにかく突っ込みました。

一応、Yahooモバイル・Googleモバイルのクローラーが訪れたことを確認済みです。
あとモバゲーのクローラーとかも。

補足がありましたら、ぜひ教えていただきたいです。
よろしくお願いします。




⇒参考URL

ケータイキャリア・クローラIPアドレス
http://ke-tai.org/index.php?%A5%B1%A1%BC%A5%BF%A5%A4%A5%AD%A5%E3%A5%EA%A5%A2%A1%A6%A5%AF%A5%ED%A1%BC%A5%E9IP%A5%A2%A5%C9%A5%EC%A5%B9

携帯検索エンジンのcrawler
http://honobono88.blog69.fc2.com/blog-entry-37.html

Mobile IP htaccess Maker
http://www.dspt.net/tools/mobile_ip/generator.php

モバイル検索サイト クローラー一覧
http://www.sin-news.com/archives/2007/09/post_120.html

ロボ避けとアクセス制限のための覚え書き
http://wiki.livedoor.jp/aissle/d/FrontPage

IPアドレスで振り分けている携帯専用サイトでモバイル版AdSenseを使う方法
http://kazamidori.net/kaoru/2007/10/mediapartners.html