ทำไม ChatGPT ไม่แนะนำเว็บเรา? 15 ข้อเช็ก robots.txt และ bot ของ Ai ที่ต้องเปิดประตูให้ (ฉบับปี 2569)

เว็บก็ทำแล้ว บทความก็ลงแล้ว แต่พอลองถาม ChatGPT ว่า “ธุรกิจแบบเราแนะนำที่ไหนดี” กลับไม่มีชื่อเราเลย หลายคนคิดว่าเป็นเพราะเนื้อหาไม่ดีพอ แต่ผมจะบอกว่า หลายครั้งปัญหาไม่ได้อยู่ที่เนื้อหา แต่อยู่ที่ Ai “เข้าบ้านเราไม่ได้” ตั้งแต่แรก

บทความนี้ผมสรุปเฉพาะเรื่องแรกสุดของ AEO คือ “เปิดประตู” ให้ bot ของ Ai เข้ามาอ่านเว็บเราได้ ทำให้ครบก่อน ค่อยไปทำเรื่องอื่น เพราะถ้าประตูปิด ต่อให้ทำอย่างอื่นดีแค่ไหน Ai ก็มองไม่เห็นครับ

ทำไม Ai ถึงไม่เห็นเว็บเรา

1. คนยุคนี้ซื้อสินค้าโดยเชื่อ Ai มากกว่าเชื่อ Google ไปแล้ว ยุคแห่ง AEO เต็มตัว คนค้นหาทาง Google น้อยลง แต่ถาม Ai มากขึ้น ถ้าเราไม่อยู่ในคำตอบของ Ai ลูกค้าก็ไม่เห็นเรา

2. สมัยก่อนเราทำ SEO เพื่อให้ Google รักเรา ยุคนี้ต้องทำ AEO เพื่อให้ Ai รักเรา ซึ่งคนละเกมกัน และ bot ที่มาเก็บข้อมูลก็เป็นคนละตัวกันด้วย

3. ความเข้าใจผิดที่เจอบ่อย คือคิดว่าลงคอนเทนต์ใน Facebook, TikTok, YouTube ทุกวันแล้ว Ai จะแนะนำเราเอง ไม่จริงนะครับ Ai หยิบข้อมูลจากเนื้อหาที่เป็น HTML บนเว็บไซต์เป็นหลัก [เว็บคือ “บ้าน” ของแบรนด์ ที่เราคุมได้ 100% ไม่เหมือน Facebook ที่ Meta เปลี่ยนกฎเมื่อไหร่เราก็โดน]

4. เจ้าของเว็บจำนวนมากบล็อก bot ของ Ai ทั้งที่ไม่รู้ตัว อาจเป็นเพราะปลั๊กอินความปลอดภัย Firewall หรือค่าเริ่มต้นของ Cloudflare ดังนั้นสิ่งแรกที่ต้องทำคือ “เช็กว่าบ้านเปิดประตูอยู่ไหม”

เช็ก robots.txt ให้ถูกตัว

5. robots.txt คือไฟล์ที่บอก bot ว่าเข้าห้องไหนได้บ้าง เปิดดูได้เลยที่ โดเมนของเรา/robots.txt ถ้าเห็นบรรทัด Disallow: / ใต้ชื่อ bot ตัวไหน แปลว่าเราปิดประตูใส่ bot ตัวนั้นอยู่

6. bot ของ Ai แบ่งเป็น 2 ฝั่ง ฝั่งแรกคือ “ฝั่งค้นหา/ตอบลูกค้า” ได้แก่ OAI-SearchBot และ ChatGPT-User ของ OpenAI, Claude-SearchBot และ Claude-User ของ Claude, PerplexityBot และ Perplexity-User ของ Perplexity รวมถึง Googlebot และ Bingbot ฝั่งนี้ธุรกิจทุกประเภทควรเปิด

7. อีกฝั่งคือ “ฝั่งเทรนโมเดล” ได้แก่ GPTBot, ClaudeBot, Google-Extended, Applebot-Extended ฝั่งนี้เป็นการตัดสินใจของเรา ถ้าเป็น SME ที่อยากให้ Ai รู้จักแบรนด์ ผมแนะนำให้เปิดครับ

8. จุดที่หลายคนพลาดคือคิดว่า GPTBot กับ OAI-SearchBot เป็นตัวเดียวกัน ไม่ใช่นะครับ GPTBot คือฝั่งเทรน ส่วน OAI-SearchBot คือตัวที่ทำให้เว็บเราโผล่ใน ChatGPT search ถ้าเปิดแค่ GPTBot ไม่ได้แปลว่าจะโผล่ในคำตอบ

9. แม่แบบ robots.txt ที่เปิดทั้งสองฝั่ง ใช้ได้กับ SME ส่วนใหญ่ คือเขียนแค่ User-agent: * ต่อด้วย Allow: / แล้วใส่บรรทัด Sitemap: ตามด้วยลิงก์ sitemap.xml ของเว็บเรา สั้น ๆ แค่นี้เลยครับ

10. ถ้าอยาก “เปิดค้นหา แต่ปิดเทรน” ก็เพิ่มบล็อก User-agent ของ GPTBot, ClaudeBot, Google-Extended, Applebot-Extended แล้วตามด้วย Disallow: / ได้ [แต่ต้องเข้าใจว่าเรากำลังเลือกให้ Ai รู้จักเราน้อยลง]

ด่านที่ 2 Firewall, Cloudflare และ JavaScript

11. อย่าลืมว่าประตูมีสองชั้น robots.txt เปิดแล้ว แต่ถ้า Firewall หรือ CDN บล็อกไว้ bot ก็เข้าไม่ได้อยู่ดี Cloudflare ตั้งแต่ กรกฎาคม 2568 บล็อก bot ของ Ai เป็นค่าเริ่มต้นสำหรับโดเมนใหม่ ปิดได้ที่เมนู AI Crawl Control ปลั๊กอินความปลอดภัยของ WordPress ก็บล็อกได้เหมือนกัน ต้องเข้าไปเช็ก

12. เนื้อหาต้องเป็น “ตัวหนังสือใน HTML จริง” bot ของ Ai ส่วนใหญ่ไม่รัน JavaScript ถ้าเว็บต้องรอ JavaScript โหลดถึงจะเห็นข้อความ bot ก็จะเห็นหน้าเปล่า วิธีเช็กง่ายมาก คลิกขวา เลือก View Page Source แล้วกด Ctrl+F หาประโยคภาษาไทยในหน้า ถ้าไม่เจอ แปลว่า Ai อ่านไม่ออก

13. เว็บที่สร้างด้วยเครื่องมือ Ai อย่าง Lovable, Bolt หรือ React ล้วน ๆ ต้องเช็กข้อนี้ก่อนเลย เพราะหลายเว็บเขียนเป็น JavaScript ทั้งหมด [ยุคก่อนเขียนเว็บด้วยมือ ต่อมาใช้ WordPress แต่ยุคนี้ใช้เครื่องมือบนคลาวด์อย่าง Vercel ก็ได้เว็บที่เป็น HTML จริงเร็ว ๆ]

14. หน้าขายที่เป็นรูปยาวทั้งหน้า คนไทยทำกันเยอะมาก แต่ Ai อ่านไม่ออกนะครับ ราคา สิ่งที่ได้ ตารางเรียน ต้องเป็นตัวหนังสือ ไม่ใช่ฝังอยู่ในรูป และรูปทุกรูปต้องมี alt text อธิบายสั้น ๆ

เปิดแล้ว ต้องเรียกเข้ามาด้วย

15. ส่ง sitemap.xml เข้า Google Search Console และ Bing Webmaster Tools ทั้งสองที่ เพราะ Copilot ใช้ดัชนีของ Bing โดยตรง ใส่วันที่ lastmod ให้ครบ และแจ้ง IndexNow ทุกครั้งที่อัปเดตหน้า ไม่ใช่ทำครั้งเดียวแล้วจบ

16. มีไฟล์ llms.txt สรุปเว็บให้ Ai อ่านก็ดี ใช้เวลาทำแค่ 10 นาที แต่ต้องรู้ไว้ว่ายังเป็นข้อเสนอของชุมชน ไม่ใช่มาตรฐานทางการ อย่าหวังผลจากไฟล์นี้อย่างเดียว

17. ผมตรวจเว็บตัวเอง thebizthailand.com ด้วยวิธีเดียวกันนี้ ยิงชื่อ bot ของ Ai 10 ตัวเข้าเว็บ ได้ตอบกลับสถานะ 200 ทุกตัว ไม่มี Firewall บล็อก และ robots.txt เปิดทั้งสองฝั่ง ซึ่งผมถือว่าเป็นด่านที่ต้องผ่านก่อนทำอย่างอื่นครับ

สรุป

AEO เริ่มจากการเปิดประตู เช็ก 4 อย่างตามลำดับ คือ robots.txt เปิด bot ฝั่งค้นหา/ตอบ, Firewall หรือ Cloudflare ไม่บล็อก, เนื้อหาเป็น HTML จริงที่ View Page Source เห็นตัวหนังสือ และส่ง sitemap เข้า Google กับ Bing ใช้เวลาไม่ถึงชั่วโมง แต่เป็นข้อที่ทำให้ Ai “มองเห็นเรา” หรือไม่ ทำข้อนี้ให้เสร็จก่อน แล้วค่อยไปเรื่องเขียนเนื้อหาให้ Ai หยิบไปตอบครับ