Robots.txt Generator

สร้างไฟล์ Robots.txt มาตรฐาน SEO สำหรับเว็บไซต์ของคุณ

1. ตั้งค่าทั่วไป (Global Rules)

ค่าเริ่มต้นสำหรับ Bot ทุกตัว

Crawl Delay (วินาที) *ใช้เมื่อต้องการลดภาระ Server

2. Sitemap XML

Sitemap URL

3. โฟลเดอร์ที่ห้ามเข้า (Disallow)

ใส่ path ที่ไม่ต้องการให้ Google เก็บข้อมูล เช่น /admin/ หรือ /private/

4. บล็อกบอท (Block Specific Bots)

เลือกบอทที่คุณต้องการบล็อก (Disallow) เป็นพิเศษ

Baidu (จีน)

Yandex (รัสเซีย)

MJ12bot (SEO)

Ahrefs (SEO)

Semrush (SEO)

DotBot (Moz)

GPTBot (OpenAI)

User-agent: * Disallow: /cgi-bin/