# robots.txt for minorisu.com User-agent: * Allow: / # 管理系ページのクロールを制限 Disallow: /admin/ Disallow: /auth/ # バナークリック計測用リダイレクトのクロールを制限 Disallow: /banners/ # ページネーション2ページ目以降のクロールを制限(クロールバジェット節約) Disallow: /*?page= # フィルタパラメータ付きURLのクロールを制限(重複コンテンツ防止) Disallow: /*?category_id= Disallow: /*?tag_id= # サイトマップ(カタログのページと、minorisu のページ) Sitemap: https://minorisu.com/sitemap.xml Sitemap: https://minorisu.com/sitemap-minorisu.xml