2019年6月9日日曜日

User-agentによってアクセスをはじく

semrushというSEOのサポート会社がある。米国の会社だ。そこのボットがgoogleボットの10倍くらいの頻度でアクセスしてくる。怪しい会社ではなさそうだが、何かうっとおしいので遮断することにした。Poundのソースコードを眺めていたら、Referer以外にもUser-agentでもアクセスを特定することができることが分かったので、遮断にはPoundを使う。pound.cfgに以下のように書き足すとOK。

        Service
                HeadRequire "User-agent: .*semrush.*"
        End

0 件のコメント:

コメントを投稿