robot.txt นั้นคืออะไร เป็นไฟล์ที่ไว้บอก Robot ของ Search Engine ต่างๆว่าไฟล์นี้อนุญาติให้เข้าไปเก็บข้อมูลหรือไม่ (ไม่อยากให้เผยแพร่นั่นเอง) เช่นพวก หน้า admin หรือ ไฟล์ที่สำคัญๆต่างๆ โดยจะเป็นความปลอดภัยเบื้องต้นเท่านั้น