تگ noindex چیست؟ صفحاتی که باید نوایندکس شوند

arma

زمان2023-06-06 18:12:41

تگ "noindex" یک دستور است که در متا تگ صفحات وب استفاده می‌شود و به موتورهای جستجو اعلام می‌کند که آن صفحه را ایندکس نکنند و در نتایج جستجو نمایش ندهند.

صفحاتی که ممکن است بخواهید آنها را با استفاده از تگ "noindex" نوایندکس کنید عبارتند از:

صفحات موقتی: صفحاتی که موقتاً برای مدت کوتاهی وجود دارند و نمی‌خواهید آنها در نتایج جستجو نمایش داده شوند. مثال: صفحات کمپین‌های تبلیغاتی موقت یا صفحات در دست ساخت.

صفحات تکراری: صفحاتی که دارای محتوای تکراری با صفحات دیگر هستند. به طور معمول، محتوای تکراری می‌تواند به کاهش رتبه صفحات وب سایتتان در نتایج جستجو منجر شود.

صفحات دسته‌بندی: صفحاتی که برای دسته‌بندی محتوا یا محصولات شما وجود دارند و نمی‌خواهید آنها به عنوان صفحات جداگانه در نتایج جستجو نمایش داده شوند.

صفحات فایل‌های مرتبط: صفحاتی که به صورت مستقیم به فایل‌های قابل دانلود، مانند فایل‌های PDF یا فایل‌های رسانه، ارجاع می‌دهند و نمی‌خواهید آنها در نتایج جستجو نمایش داده شوند.

صفحات اعتمادی: صفحاتی که حاوی اطلاعات حساس یا خصوصی هستند و نمی‌خواهید این اطلاعات در نتایج جستجو نمایش داده شوند. مثال: صفحات ورود به حساب کاربری، صفحات تراکنش مالی، صفحات پروفایل کاربران و غیره.

استفاده از تگ "noindex" به شما امکان می‌دهد که کنترل دقیق‌تری بر روی صفحاتی که می‌خواهید در نتایج جستجو نمایش داده شوند یا نشوند داشته باشید. باید توجه داشته باشید که برخی از موتورهای جستجو ممکن است به تگ "noindex" رسیدگی نکنند و صفحات را به هر حال ایندکس کنند. بنابراین، استفاده از دیگر روش‌هایی مانند فایل robots.txt نیز توصیه می‌شود تا محتواهای مورد نظر درست مدیریت شوند.

تگ noindex چیست؟

تگ "noindex" یک دستور است که در کدهای HTML صفحات وب قرار می‌گیرد و به موتورهای جستجو اطلاع می‌دهد که آن صفحه را ایندکس نکنند و در نتایج جستجو نمایش ندهند. با دستور "noindex"، شما به وب‌کراولرها و روبات‌های موتورهای جستجو می‌گویید که صفحه را نادیده بگیرند و در پایگاه داده اصلی خود ایندکس نکنند.

استفاده از تگ "noindex" در صفحات وب می‌تواند در موارد زیر مفید باشد:

صفحات موقت: اگر صفحاتی را برای مدت محدودی ایجاد کرده‌اید و نمی‌خواهید آنها در نتایج جستجو ظاهر شوند، می‌توانید از تگ "noindex" استفاده کنید.

صفحات محتوای تکراری: اگر صفحاتی در وبسایت شما محتوای تکراری یا نسخه‌های تکراری دارند، می‌توانید از تگ "noindex" استفاده کنید تا جلوی ایندکس شدن آنها را بگیرید و مطمئن شوید که محتوای اصلی شما در نتایج جستجو نمایش داده می‌شود.

صفحات حریم خصوصی: در برخی موارد، صفحاتی که شامل اطلاعات حساس یا حریم خصوصی هستند، نباید در نتایج جستجو نمایش داده شوند. با استفاده از تگ "noindex" می‌توانید این صفحات را از ایندکس گوگل محافظت کنید.

مهم است توجه داشته باشید که استفاده از تگ "noindex" فقط باعث عدم نمایش صفحه در نتایج جستجو می‌شود و در صورتی که لینکی به آن صفحه از جای دیگری وجود داشته باشد، ممکن است همچنان توسط موتورهای جستجو دسترسی پیدا کند. برای جلوگیری از این موضوع، می‌توانید از ترکیب تگ "noindex" با تگ "nofollow" استفاده کنید تا هم ایندکس شدن صفحه متوقف شود و هم لینک‌های خارجی به آن متوقف شوند.

چرا وب سایت ها باید از تگ Noindex استفاده کنند؟

وب سایت‌ها ممکن است برای چند دلیل از تگ "noindex" استفاده کنند:

صفحات موقت: اگر شما صفحاتی را برای مدت محدودی ایجاد کرده‌اید و نمی‌خواهید آنها در نتایج جستجو ظاهر شوند، از تگ "noindex" استفاده می‌کنید تا جلوی ایندکس شدن آن صفحات را بگیرید. به عنوان مثال، صفحاتی که فقط در دوره‌های تخفیف ویژه یا رویدادهای خاص موجود هستند و بعداً حذف خواهند شد.

صفحات محتوای تکراری: اگر صفحاتی در وبسایت شما محتوای تکراری یا نسخه‌های تکراری دارند، استفاده از تگ "noindex" می‌تواند منجر به بهبود سئو وبسایت شود. محتوای تکراری می‌تواند مشکلاتی مانند کنترل بهتر رنکینگ صفحات و از بین بردن تقارن محتوایی را ایجاد کند.

صفحات آزمایشی: در برخی موارد، شما ممکن است صفحات آزمایشی را در وبسایت خود ایجاد کنید که قرار است در نتایج جستجو نمایش داده نشوند. از تگ "noindex" برای جلوگیری از ایندکس شدن این صفحات استفاده می‌شود.

مهم است توجه داشته باشید که استفاده از تگ "noindex" در صورتی مناسب است که صفحه را به طور کامل از نتایج جستجو حذف کنید. در غیر این صورت، احتمال وجود لینک‌های به صفحه و محتوای آن در دسترس موتورهای جستجو وجود خواهد داشت.

کجا می توانید یک تگ Noindex اضافه کنید؟

تگ "noindex" را می‌توانید در قسمت هدر (header) صفحات وب اضافه کنید. اینکه کجا در هدر قرار دهید، بستگی به نوع سیستم مدیریت محتوا (CMS) وبسایت شما دارد. در بسیاری از CMS ها، شما می‌توانید از پنل مدیریت ویرایشگر کدهای HTML صفحات استفاده کنید و تگ "noindex" را در هدر صفحه قرار دهید.

در کد HTML، تگ "noindex" به صورت زیر است:

مهم است توجه داشته باشید که تگ "noindex" تنها تاثیری بر روی موتورهای جستجو مانند گوگل دارد و ممکن است موتورهای جستجوی دیگر این تگ را پشتیبانی نکنند. همچنین، استفاده از تگ "noindex" فقط جلوی ایندکس شدن صفحه را می‌گیرد و از نمایش لینک صفحه در نتایج جستجو جلوگیری نمی‌کند. برای جلوگیری از اینکه لینک‌های دیگری به صفحه ارجاع دهند، باید از ترکیب تگ "noindex" با تگ "nofollow" استفاده کنید.

تفاوت noindex و disallow در چیست؟

تگ "noindex" و دستور "disallow" دو مفهوم متفاوت در سئو و نحوه رفتار موتورهای جستجو دارند:

noindex: تگ "noindex" یک تگ HTML است که در هدر صفحات وب قرار می‌گیرد و به موتورهای جستجو اطلاع می‌دهد که آن صفحه را ایندکس نکنند و در نتایج جستجو نمایش ندهند. با استفاده از تگ "noindex"، شما به موتورهای جستجو می‌گویید که صفحه را نادیده بگیرند و در پایگاه داده اصلی خود ایندکس نکنند. این تگ برای کنترل دقیق تر نمایانی صفحات در نتایج جستجو مفید است.

disallow: دستور "disallow" یک دستور فایل robots.txt است که در ریشه سایت قرار می‌گیرد و به موتورهای جستجو اجازه نمی‌دهد برخی از صفحات و پوشه‌های سایت را اسکن کنند. این دستور بیان می‌کند که موتورهای جستجو باید از دسترسی به صفحات یا پوشه‌های خاصی امتناع کنند. با استفاده از دستور "disallow"، شما می‌توانید برای روبات‌های جستجو الگوهایی تعریف کنید که باید رعایت کنند و نباید به صفحات مشخصی دسترسی پیدا کنند.

به طور خلاصه، تفاوت اصلی بین تگ "noindex" و دستور "disallow" در این است که "noindex" بر روی صفحه خاصی اعمال می‌شود و موتورهای جستجو را مجبور می‌کند ایندکس صفحه را حذف کنند و آن را در نتایج جستجو نمایش ندهند، در حالی که "disallow" بر روی فایل robots.txt قرار می‌گیرد و موتورهای جستجو را محدود می‌کند تا به برخی صفحات یا پوشه‌های خاصی دسترسی پیدا نکنند.

نحوه استفاده از متا تگ نوایندکس

برای استفاده از متا تگ "noindex" در صفحات وب خود، می‌توانید مراحل زیر را دنبال کنید:

باز کنید صفحه HTML مورد نظر را در ویرایشگر کد یا CMS خود.

در بخش <head> صفحه، متا تگ زیر را اضافه کنید:

با افزودن این متا تگ به صفحه، شما به موتورهای جستجو اطلاع می‌دهید که صفحه را ایندکس نکنند و در نتایج جستجو نمایش ندهند.

توجه داشته باشید که استفاده از متا تگ "noindex" تنها تاثیری بر روی موتورهای جستجویی مانند گوگل دارد و ممکن است موتورهای جستجوی دیگر این متا تگ را پشتیبانی نکنند. همچنین، استفاده از متا تگ "noindex" فقط جلوی ایندکس شدن صفحه را می‌گیرد و از نمایش لینک صفحه در نتایج جستجو جلوگیری نمی‌کند. برای جلوگیری از اینکه لینک‌های دیگری به صفحه ارجاع دهند، باید از ترکیب متا تگ "noindex" با متا تگ "nofollow" استفاده کنید.

کدام یک از صفحات سایت را نوایندکس می‌کنیم؟

معمولاً صفحات اصلی و محتوا مرتبط با وب سایتتان را در نتایج جستجوی موتورهای جستجو می‌خواهید نمایش دهید و آنها را ایندکس کنید. این شامل صفحه اصلی (homepage)، صفحات محصولات یا خدمات، صفحات مقالات یا بلاگ، صفحات درباره ما، و صفحات تماس با ما است.

از طرفی، صفحات موقتی، صفحات دسته بندی مشابه، صفحات تکراری، صفحات فرم و اطلاعات کاربری، و صفحاتی که شامل اطلاعات حساس یا خصوصی هستند، معمولاً نمی‌خواهید در نتایج جستجو نمایش دهید و آنها را ایندکس نمی‌کنید.

مهم است که با دقت تصمیم بگیرید کدام صفحات را نوایندکس کنید و کدام صفحات را نوایندکس نکنید، تا تطابق بهتری با موضوع و محتوای وب سایت خود داشته باشید و بهترین نتایج را در نتایج جستجو به دست آورید.

متا تگ robots و تگ x-robots چه تفاوت هایی دارند؟

متا تگ "robots" و تگ "x-robots" هر دو برای کنترل رفتار ربات‌های جستجو درباره صفحات وب استفاده می‌شوند، اما تفاوت‌هایی در استفاده و کاربردهای آن‌ها وجود دارد:

متا تگ "robots":

قرار گرفتن در بخش <head> صفحات HTML است.
استانداردی است که توسط موتورهای جستجوی معروف مانند گوگل، بینگ و یاهو پشتیبانی می‌شود.
با استفاده از این تگ، می‌توانید دستوراتی مانند "noindex"، "nofollow" و ... را برای ربات‌های جستجو تعیین کنید.

تگ "x-robots":

قرار گیری در هدر پاسخ (header) سرور است.
از تکنیکی به نام "HTTP header" استفاده می‌کند.
توسط برخی از موتورهای جستجو پشتیبانی می‌شود، اما به طور کلی پهناوری‌تر از متا تگ "robots" است و می‌توانید قوانین سفارشی‌شده‌تری را تعیین کنید.
می‌توانید علاوه بر دستوراتی مانند "noindex" و "nofollow"، دستورات دیگری مانند "noarchive" (عدم ذخیره سازی صفحه) و "nosnippet" (عدم نمایش خلاصه محتوا در نتایج جستجو) را نیز استفاده کنید.

در کل، تگ "x-robots" امکانات بیشتری را در اختیار شما قرار می‌دهد و قابلیت سفارشی‌سازی بیشتری را به شما می‌دهد. با این حال، استفاده از متا تگ "robots" همچنان بسیار رایج و معمول است و برای اکثر موارد استفاده‌ی روزمره کافی است.

چگونه خطای noindex را در گوگل سرچ کنسول رفع کنیم؟

برای رفع خطای "noindex" در گوگل Search Console، می‌توانید مراحل زیر را دنبال کنید:

ورود به گوگل Search Console: وارد حساب گوگل خود شوید و به صفحه گوگل Search Console بروید.

انتخاب وب سایت: اگر وب سایتتان در گوگل Search Console ثبت نشده است، آن را اضافه کنید. در غیر این صورت، وب سایت مورد نظر خود را انتخاب کنید.

بررسی پوشش نمایش: در منوی سمت چپ، به قسمت "پوشش" یا "Coverage" بروید. این قسمت جزئیاتی درباره صفحات وب سایتتان در گوگل را نشان می‌دهد.

بررسی خطاها: در قسمت "پوشش نمایش"، خطاها و مسائل مرتبط با صفحات را بررسی کنید. اگر خطای "noindex" وجود دارد، آن را تشخیص دهید.

رفع خطا: برای رفع خطای "noindex"، می‌توانید اقدامات زیر را انجام دهید:

بررسی تنظیمات متا تگ "robots" در صفحات مورد نظر و اطمینان حاصل کنید که تگ "noindex" به درستی تنظیم شده است.
بررسی فایل robots.txt و اطمینان حاصل کنید که هیچ دستور "disallow" مربوط به صفحاتی که می‌خواهید ایندکس شوند، وجود ندارد.
بررسی هدر (header) پاسخ سرور و مطمئن شوید که هیچ دستور "noindex" در آن تنظیم نشده است.

اعمال تغییرات و بررسی مجدد: پس از رفع خطاها، تغییرات را اعمال کنید و صفحات مورد نظر را به گوگل ارسال کنید تا مجدداً ایندکس شوند. برای این کار، می‌توانید از گزینه "نمایش دوباره" یا "Request Indexing" استفاده کنید.

پس از اعمال تغییرات و درخواست مجدد ایندکس، گوگل تلاش خواهد کرد تا صفحات را مجدداً ایندکس کند و خطای "noindex" برطرف شود. با این حال، توجه داشته باشید که این فرایند زمان‌بر و ممکن است تا مدتی طول بکشد.