PC Robots.txt ป้องกันการ Index

สิ่งแรกๆ ไม่กี่อย่างที่ Googlebot หรือ search engine bot มองเข้ามายังเว็บคุณเวลา indexing หนึ่งในนั้นก็คือ robots.txt ไฟล์ (โดยปกติเราจะใส่ไฟล์นี้ไว้ที่ root folder ของโดเมนเนมจากในโฮส)

ไฟล์ robots.txt มีคำสั่งให้ search engine bot ได้อ่าน เหมือนเป็นป้ายบอกทางให้เจ้าพวก bot ทั้งหลายรู้ว่า เว็บหน้าไหน โฟลเดอร์อะไร เข้าได้และไม่ได้บ้าง ที่จะเป็นคำสั่งง่ายๆ เขียนไว้ในไฟล์ด้วย ชื่อ bot ตามด้วย allow = อนุญาติ หรือ disallow = ไม่อนุญาติ

User-agent: *
Disallow: /

โดยปกติแล้ว ผมก็จะสร้างไฟล์จาก notepad ง่ายๆ แล้วใส่คำสั่งที่ก็อปหามาจาก Google เอา แต่เดี๋ยวนี้ไม่ต้องแล้วครับ ถ้าคุณใช้ WordPress แค่ใช้ Plugin PC Robots.txt (rating เต็ม 5) ติดตั้ง ตั้่งค่าก็เสร็จเรียบร้อยไม่ต้องมีไฟล์ที่ต้องอัปโหลด หรือใช้ FTP อะไรทั้งสิ้น เวลาจะแก้ไขคำสั่งก็เข้าไปในหน้าตั้งค่าของมันใน WordPress ชีวิตง่ายขึ้นเยอะ

PC Robots.txt is an easy (i.e. automated) solution to creating and managing a robots.txt file for your blog. Instead of mucking about with FTP, files, permissions ..etc, just upload and activate the plugin and you’re done.

ดูตัวอย่าง robots.txt เพิ่มเติมได้ที่ คำสั่งตัวอย่าง robots.txt และ seobook

Leave a Reply

Your email address will not be published. Required fields are marked *