robots.txt生成
robots.txtファイルを生成
🛡️ Crawl-delay は非標準で、Google などは無視します。アクセス制御には使えません。
ℹ️ robots.txt生成
robots.txtファイルを生成
医療・法律・金融など重要な判断に使う前に、信頼できる資料で再確認してください。
robots.txtファイルを生成
🛡️ Crawl-delay は非標準で、Google などは無視します。アクセス制御には使えません。
robots.txtファイルを生成
医療・法律・金融など重要な判断に使う前に、信頼できる資料で再確認してください。