קובץ ה-Robots.txt הוא ה'מאבטח' בכניסה לאתר שלכם. הוא אומר לגוגל: 'כאן מותר לך להסתובב, ולכאן אל תיכנס'. זה קריטי כדי לא לבזבז את 'תקציב הסריקה' של גוגל על דפים לא רלוונטיים כמו עמודי ניהול. טיפ: טעות קטנה בקובץ הזה יכולה להעלים את האתר כולו מגוגל. בדקו אותו בזהירות!
