تمامی ما به مداقه ایندکس شدن صفحه ها تارنما در گوگل واقف هستیم. آموزش سئو در مشهد سوای ایندکس شدن صفحه ها وب سایت مرتبه ای هم به صفحه های داده نمیشود. نکته ای که در ایندکس شدن صفحه های وجود داراست این میباشد که درحالتی که صفحه ها ایندکس گردیده تارنما زیاد باشند البته صفحاتی که مرتبه بالا در گوگل دارا هستند معدود باشند اعتبار دامنه افت می نماید. هر چه اعتبار دامنه کمتر خواهد شد. درجه تصاحب کردن برای وب سایت مشقت بار خیس گردد.
این موردها سبب گردیدهاست که وبسایت ها بفکر راهکاری برای دوری از ایندکس شدن صفحاتی از تارنما باشند. برای این مراد متا تگ Robots ساخت و ساز شد. شغل این متا تگ این میباشد که با وصال ربات کاوش به آن ربات با دیدن این متا تگ بصورت کلی شیت را نادیده گرفته و بصراغ صفحه ها دیگر می رود.
متا تگ Robots در صفحاتی مانند ورقه کاوش تارنما اساسی میباشند چون این صفحه های برای یوزرها خویش تارنما بسیار دارای اهمیت میباشند و پل ارتباطی فی مابین صفحه ها وبسایت محسوب میشوند. ولی برای کاربری که از گوگل به وب سایت انتقال میابد این ورقه فاقد التفات میباشد. مخاطب مطلقا نمیخواهد از گوگل به ورقه جستجوی دیگری منتقل گردد. با پرهیز از ایندکس شدن این ورقه بازدارنده از ورود یوزرها از گوگل به آن گردیده البته یوزرها خویش وب سایت بدین شیت دسترسی دارا هستند.
پوشه Robots.txt چیست؟
فولدر robots.txt یک پوشه متنی میباشد که وبمستران می بایست خودشان بسازند. این فولدر به رباتهای موتورهای کاوش امر میدهد کدام صفحه ها اینترنت را خزش کرده یا این که کدام صفحه ها را نباید خزش نمایند. طبق پروتکل REP (Robots Exclusion Protocol) استانداردهایی برای ساماندهی به موقعیت خزیدن اینترنت بوسیله رباتها، دسترسی به صفحه های اینترنت و ایندکس کردن آن ها برای دسترسی یوزرها رقم خورده میباشد. پوشه robots.txt و پیوندهای فالو و نوفالو نیز بخشی از پروتکل REP میباشند.
اوامر قابل امان در پوشه robots.txt
در مجموع پنج امر اصلی در فولدر robots.txt وجود داراست که درپی با آن ها آشنا خواهید شد:
امر user-agent
فرمان user-agent به تنهایی نمیتواند یک امر بی نقص باشد، بلکه بایستی در کنار یکی سه فرمان آجل مصرف شود. این فرمان نوع رباتی که بایستی از امرها آجل اطاعت نماید را مشخص و معلوم مینماید.
مثلا چنانچه قصد داشته باشید برای رباتهای گوگل دستوری صادر نمائید، اسم رباتهای گوگل (googlebot) را مینویسید. هماینگونه در شرایطیکه فرمان برای تک تک رباتهاست بایستی در مقابل user-agent: از آرم ستاره (*) مصرف شود.
تمامی ما به مداقه ایندکس شدن صفحه ها تارنما در گوگل واقف هستیم. آموزش سئو در مشهد سوای ایندکس شدن صفحه ها وب سایت مرتبه ای هم به صفحه های داده نمیشود. نکته ای که در ایندکس شدن صفحه های وجود داراست این میباشد که درحالتی که صفحه ها ایندکس گردیده تارنما زیاد باشند البته صفحاتی که مرتبه بالا در گوگل دارا هستند معدود باشند اعتبار دامنه افت می نماید. هر چه اعتبار دامنه کمتر خواهد شد. درجه تصاحب کردن برای وب سایت مشقت بار خیس گردد.
این موردها سبب گردیدهاست که وبسایت ها بفکر راهکاری برای دوری از ایندکس شدن صفحاتی از تارنما باشند. برای این مراد متا تگ Robots ساخت و ساز شد. شغل این متا تگ این میباشد که با وصال ربات کاوش به آن ربات با دیدن این متا تگ بصورت کلی شیت را نادیده گرفته و بصراغ صفحه ها دیگر می رود.
متا تگ Robots در صفحاتی مانند ورقه کاوش تارنما اساسی میباشند چون این صفحه های برای یوزرها خویش تارنما بسیار دارای اهمیت میباشند و پل ارتباطی فی مابین صفحه ها وبسایت محسوب میشوند. ولی برای کاربری که از گوگل به وب سایت انتقال میابد این ورقه فاقد التفات میباشد. مخاطب مطلقا نمیخواهد از گوگل به ورقه جستجوی دیگری منتقل گردد. با پرهیز از ایندکس شدن این ورقه بازدارنده از ورود یوزرها از گوگل به آن گردیده البته یوزرها خویش وب سایت بدین شیت دسترسی دارا هستند.
پوشه Robots.txt چیست؟
فولدر robots.txt یک پوشه متنی میباشد که وبمستران می بایست خودشان بسازند. این فولدر به رباتهای موتورهای کاوش امر میدهد کدام صفحه ها اینترنت را خزش کرده یا این که کدام صفحه ها را نباید خزش نمایند. طبق پروتکل REP (Robots Exclusion Protocol) استانداردهایی برای ساماندهی به موقعیت خزیدن اینترنت بوسیله رباتها، دسترسی به صفحه های اینترنت و ایندکس کردن آن ها برای دسترسی یوزرها رقم خورده میباشد. پوشه robots.txt و پیوندهای فالو و نوفالو نیز بخشی از پروتکل REP میباشند.
اوامر قابل امان در پوشه robots.txt
در مجموع پنج امر اصلی در فولدر robots.txt وجود داراست که درپی با آن ها آشنا خواهید شد:
امر user-agent
فرمان user-agent به تنهایی نمیتواند یک امر بی نقص باشد، بلکه بایستی در کنار یکی سه فرمان آجل مصرف شود. این فرمان نوع رباتی که بایستی از امرها آجل اطاعت نماید را مشخص و معلوم مینماید.
مثلا چنانچه قصد داشته باشید برای رباتهای گوگل دستوری صادر نمائید، اسم رباتهای گوگل (googlebot) را مینویسید. هماینگونه در شرایطیکه فرمان برای تک تک رباتهاست بایستی در مقابل user-agent: از آرم ستاره (*) مصرف شود.
تن درستی و تندرستی