tracのwikiにリンクを張っているzipファイルがクローラーから検索されまくりで、結構なトラフィックを喰っているので
User-Agent : *
Disallow: /trac/arcadia/browser
Disallow: /trac/arcadia/attachment
でとりあえず対抗するようにした。
このあたりのtracの対応方法についておきまりの方法とかないのだろうか。
tracのwikiにリンクを張っているzipファイルがクローラーから検索されまくりで、結構なトラフィックを喰っているので
User-Agent : *
Disallow: /trac/arcadia/browser
Disallow: /trac/arcadia/attachment
でとりあえず対抗するようにした。
このあたりのtracの対応方法についておきまりの方法とかないのだろうか。