اگر برای لینک های خود از فایل جاوا اسکریپت استفاده می کنید ممکن است متوجه شوید که موتورهای جستجو ان را نمی خزند
و یا ارزش زیادی به ان نمی دهند لینک های html استاندارد باید جایگیزن لینک های جاوا اسکریپت
در تمامی صفحاتی شوند که ربات های خزنده موتور های جستجو قادر به خزیدن ان نیستند.
لینک به صفحاتی که متا تگ کنترل ربات های موتور جستجو یا فایل robots.txt مسدود شده اند
این فایل و متا تگ ربات های موتور جستجو به صاحبان سایت اجازه می دهند دسترسی
به صفحه خاصی را برای موتورهای محدود نمایند به همین خاطر در استفاده از این فایل ها باید دقت کنید
ممکن است با استفاده نادرست از چنین فایل هایی ربات های جستجو کاملا محدود شده و
اجازه خزیر و جمع اوری اطلاعات استفاده ا سایت ها را ندارید.
فریم ها با ای فریم ها
از لحاظ فنی لینک هایی که در فریم ها و ای فریم ها قرار دارند قابل خزش هستند
اما هر دوی این موارد مشکلات ساختاری برای موتورهای جستجو دارند در صورتی که کاربر حرفه ایی هستید
و می توانید نحوه ایندکس موتورهای جستجو و دنبال کردن لینک های موجود در فریم ها را درک کنید
و قادر خواهید بود از ان ها به درستی استفاده کنید در غیر این صورت بهتر است
از این گزینه دوری کنیدربات ها از فرم های جستجو استفاده نمی کنند
اگر چه این ربات به طور مستقیم به هشداری که در قسمت بالا در مورد فرم ها دادیم مربوط می شود
اما مشکلی که بیش تر افراد با ان مواجه هستند برخی از وب مستر ها بر این باورند
که اگر جعبه جستجو در سایت قرار دهند موتورهای جستجو می توانند
هر چیزی که بازدید کننده به دنبالش هستند را بیابند متاسفانه ربات های خزنده موتورهای جستجو
برای یافتن محتوا انجام نمی دهند اگر لینکس در سایت وجود نداشته باشد
دسترسی به سایر محتواهای موجود در ان سخت خواهد شد
بازدیدها: 0