เครื่องกำเนิด Robots.txt

เครื่องมือสร้างและเครื่องมือตรวจสอบ Robots.txt ออนไลน์ฟรี

สร้างไฟล์ robots.txt ที่กำหนดเองด้วยกฎการอนุญาต/ไม่อนุญาตของโปรแกรมรวบรวมข้อมูล แผนผังไซต์หลายรายการ การบล็อกบอท AI และการตั้งค่าการหน่วงเวลาการรวบรวมข้อมูลแบบเรียลไทม์

การกำหนดค่าที่ตั้งไว้ล่วงหน้า:

โปรแกรมรวบรวมข้อมูลการค้นหา (User-agent)

Applies globally to all search engine crawlers and bots via User-agent: *.

Appends a dedicated Disallow block for LLM crawlers without affecting search engines.

การควบคุมการเข้าถึงเส้นทาง

#1
#2
#3
#4
Quick Add:

แผนผังเว็บไซต์และอัตราการรวบรวมข้อมูล

Add full URL(s) including https://. You can add multiple sitemaps separated by line breaks.

Used by Bingbot, YandexBot, etc., to control request frequency. (Googlebot ignores Crawl-delay).

ตัวอย่าง robots.txt ที่สร้างขึ้น

robots.txt
# robots.txt generated by Tool 200 (https://tool200.com)
# 100% Client-Side Free Robots.txt Generator

User-agent: *
Disallow: /admin/
Disallow: /api/
Disallow: /private/
Allow: /

# Sitemap location(s)
Sitemap: https://example.com/sitemap.xml
ในเบราว์เซอร์ฝั่งไคลเอ็นต์ 100%: กฎ robots.txt ทั้งหมดถูกสร้างขึ้นในหน่วยความจำเบราว์เซอร์ของคุณ

เหตุใดจึงใช้เครื่องมือสร้าง Robots.txt ออนไลน์ฟรี 200 ตัว

สอนโปรแกรมรวบรวมข้อมูลการค้นหาเว็บและบอท AI อย่างถูกต้อง ปกป้องเส้นทางที่ละเอียดอ่อน และเพิ่มประสิทธิภาพการรวบรวมข้อมูล SEO ได้โดยตรงในเบราว์เซอร์ของคุณ

การควบคุมบอทและเส้นทางแบบละเอียด

กำหนดกฎการอนุญาตและไม่อนุญาตแยกกันสำหรับโรบ็อตทั้งหมดหรือบอทเฉพาะ เช่น Googlebot, Bingbot และ AI Scrapers (GPTBot, CCBot)

แผนผังเว็บไซต์และการสนับสนุนการรวบรวมข้อมูลและความล่าช้า

ฝังตำแหน่งแผนผังเว็บไซต์ XML และกำหนดค่าอัตราการรวบรวมข้อมูลเพื่อป้องกันการรับส่งข้อมูลของบอทจากการโอเวอร์โหลดทรัพยากรเซิร์ฟเวอร์

ความเป็นส่วนตัวฝั่งไคลเอ็นต์ 100%

การแยกวิเคราะห์กฎและการสร้างไฟล์ทั้งหมดทำงานโดยตรงในหน่วยความจำเบราว์เซอร์ในเครื่องของคุณ โดยไม่มีการติดตามหรือการอัปโหลดจากระยะไกล

พักสมองอย่างรวดเร็ว

ลองเล่นมินิเกมคลายเครียดสักหน่อยไหม?

ต้องการฟื้นฟูจิตใจ 2 นาทีใช่ไหม? กระโดดเข้าสู่เกมปริศนาสุดคลาสสิกในเบราว์เซอร์ของคุณ