サイトを閉鎖するときの.htaccessとかmod_rewriteとかの設定

サイト閉鎖するときの話。

robots.txtを

User-agent: *
Disallow: /

とかにして、クローラーを弾いてたんだけども、同時にサイトの全ページを301リダイレクトしてたので、robots.txtもリダイレクトかけるというアホな事やってた。

　　　　 　　　 　　　∩＿　
　　　　　　　　　 　〈〈〈　ヽ
　　　　　　　　　　〈⊃　　}
　　 ∩＿＿＿∩　 |　　 |
　　 | ノ　　　　　 ヽ !　　 !
　　/　　●　　　● |　　/
　 |　　　　( _●_)　 ミ／ オレ最高にアホ
　彡､　　　|∪|　　／
/　＿＿　 ヽノ　/
(＿＿＿）　　　/

実際、301リダイレクトかけてもrobots.txtとか、Webマスターツールの認証用htmlとかはそのままにしておきたいってのがあるので、ちょいと、rewrite周り考えてみた。

RewriteEngine on
RewriteBase / 
RewriteCond %{REQUEST_URI} !robots\.txt$
RewriteCond %{REQUEST_URI} !google.*\.html$
RewriteCond %{REQUEST_URI} !LiveSearchSiteAuth\.xml$
RewriteCond %{REQUEST_URI} !y_key.*\.html$
RewriteRule ^(.*) http://example.com/ [R=301,L]

という.htaccessとかで、まぁイイ感じ