【HTML】検索エンジンロボットの巡回を拒否する 管理者ページなど、検索エンジンにヒットしたくないときに検索エンジンの巡回ロボットを拒否します。 「robots.txt」で全拒否を設定する方法 User-Agent: * Disallow: /