آموزش سئو

علت ایندکس نشدن صفحات سایت در گوگل

ایندکس نشدن صفحات سایت در گوگل
نویسنده: احمد اردیبهشت

پس از طی کردن مراحل طراحی سایت و سئو، معمولاً مشکلات کوچک و بزرگ بسیاری بر سر راه وبمسترها سبز می‌شوند. یکی از این مشکلات ایندکس نشدن صفحات سایت در گوگل و سایر موتورهای جستجو است. اولین قدم برای گرفتن ورودی از گوگل، ایندکس شدن صفحات سایت در گوگل است و اگر این اتفاق رخ ندهد، وب‌سایت شما حتی در صفحات آخر نتایج گوگل نیز نمایش داده نمی‌شود.

در اینجا دو مسئله وجود دارد:

  1. صفحات سایت کند و با تأخیر زیاد در گوگل ایندکس می‌شوند.
  2. صفحات سایت در گوگل ایندکس نمی‌شوند.

اگر شما با مشکل اول دست‌به‌گریبان هستید یعنی صفحات سایت شما در گوگل ایندکس می‌شوند اما سرعت ایندکس صفحات بسیار پایین است و مدت‌زمان زیادی طول می‌کشد تا گوگل صفحات جدید سایت شما را ایندکس کند، می‌توانید راهکارهای موجود در نوشتۀ ۱۱ نکته برای افزایش سرعت ایندکس صفحات سایت را مطالعه کرده و به کار بگیرید؛ اما اگر با مشکل دوم مواجه شده‌اید یعنی صفحات سایت شما ایندکس نمی‌شوند، در ادامۀ این نوشته با ما همراه باشید.

دلایل ایندکس نشدن صفحات سایت در گوگل

در ابتدا باید بررسی کنیم که آیا در حال حاضر صفحه‌ای از وب‌سایت شما در گوگل ایندکس شده است یا خیر. برای این کار عبارت site:yoursite.com را در گوگل جستجو کنید (به‌جای yoursite.com آدرس وب‌سایت خود را وارد کنید). با جستجوی این عبارت، لیست تمامی صفحات وب‌سایت شما که توسط گوگل ایندکس شده‌اند را مشاهده می‌کنید.

پس از بررسی وضعیت ایندکس صفحات با یکی از دو حالت زیر مواجه شویم:

  1. ممکن است هیچ‌کدام از صفحات وب‌سایت ایندکس نشده باشند.
  2. ممکن است فقط بخشی از صفحات مانند تگ‌ها و یا دسته‌ها ایندکس نشده باشند.

اگر هیچ‌کدام از صفحات سایت ایندکس نمی‌شوند:

اگر وب‌سایت شما قبلاً در گوگل ایندکس شده اما پس از گذشت مدتی از فعالیت سایتتان ناگهان تمامی ایندکس‌ها حذف شده و ورودی سایت شما از گوگل به‌شدت کاهش یافته است، احتمالاً با بحرانی به نام پنالتی گوگل (پنالایز) مواجه شده‌اید که پرداختن به این موضوع خارج از بحث این نوشته است.

اما اگر مدتی از راه‌اندازی وب‌سایت شما گذشته و هنوز هیچ‌کدام از صفحات وب‌سایتتان ایندکس نشده است، باید دلایل زیر را به ترتیب بررسی کنید:

وجود متا تگ robots با مقدار noindex در هدر سایت

یکی از مهم‌ترین دلایل ایندکس نشدن صفحات در گوگل، وجود قطعه کد زیر در هدر سایت است:

<meta name="robots" content="noindex,follow"/>

برای اینکه بدانید این کد در هدر سایت شما وجود دارد یا خیر، با مرورگر کروم یا فایرفاکس وارد وب‌سایت خود شده و پس از کلیک راست بر روی صفحه، بر روی گزینۀ View page source کلیک کنید (از کلید ترکیبی ctrl+u استفاده کنید). در صفحۀ جدید کدهای وب‌سایت خود را مشاهده می‌کنید که می‌توانید با جستجوی عبارت robots در این صفحه، مقادیر این متا تگ را بررسی کنید و درصورتی‌که عبارت noindex در این صفحه وجود داشت، باید آن را از طریق ویرایش فایل‌های وب‌سایت خود و یا ویرایش تنظیمات افزونۀ سئو اصلاح کنید.

وجود دستورات اشتباه در فایل robots.txt

فایل robots.txt در ریشۀ وب‌سایت قرار دارد و از طریق آدرس yoursite.com/robots.txt می‌توانید محتویات آن را مشاهده کنید. هرگاه در این فایل دستور Disallow وجود داشت، دقت کنید که برای چه مسیری از آن استفاده شده است زیرا این دستور باعث جلوگیری از دسترسی ربات‌های گوگل به آن مسیر می‌شود. یکی از دلایل ایندکس نشدن صفحات سایت، استفادۀ نادرست از دستور Disallow است.

قبلاً در مطلبی با عنوان راهنمای بهینه‌سازی فایل robots.txt به نکات مهمی در خصوص ایجاد و بهینه‌سازی این فایل اشاره‌کرده‌ام که پیشنهاد می‌کنم حتماً این مقاله را مطالعه کنید.

تنظیمات اشتباه در فایل htaccess

ممکن است دستوراتی در فایل htaccess وب‌سایت شما قرار داشته باشد که مانع از ایندکس شدن صفحات سایت در گوگل شود. برای مشاهدۀ محتویات فایل htaccess می‌توانید از کنترل پنل هاست خود اقدام کنید.

با توجه به پیچیدگی دستورات htaccess توصیه می‌کنم از یک متخصص کمک بگیرید زیرا ممکن است با ویرایش این فایل، اشکالاتی در وب‌سایت شما ایجاد شود.

اگر فقط بخشی از صفحات مانند تگ‌ها و یا دسته‌ها ایندکس نمی‌شود:

در این صورت تمامی موارد بالا را برای آدرس و مسیر موردنظر بررسی کنید. به‌عنوان‌مثال اگر فقط دسته‌بندی‌های شما ایندکس نمی‌شوند، وارد آدرس یکی از دسته‌بندی‌های خود شده و با بررسی کدهای صفحه با استفاده از دستور Ctrl+U یا همان View source گرفتن از صفحه، وجود متا تگ noindex را بررسی کنید. اگر متا تگ robots با مقدار noindex وجود داشته باشد، علت ایندکس نشدن صفحات وب‌سایتتان دقیقاً همین است.

بنابراین بررسی کنید که این کد به چه دلیل به صفحات موردنظر اضافه شده است و با حذف این متا تگ، مشکل را برطرف کنید.

بروزرسانی محتوا

یکی از راهکارهای بسیار موثر در افزایش سرعت ایندکس صفحات سایت، تولید محتوای منظم و همچنین بروزرسانی محتوای صفحات قدیمی سایت است. هرچه محتوای بیشتر و باکیفیت‌تری تولید کنید، سرعت ایندکس صفحات جدید وب‌سایتتان افزایش خواهد یافت. برای این منظور می‌توانید از کتاب تقویم تولید محتوا برای طراحی یک تقویم محتوایی دقیق استفاده کنید.

نتیجه‌گیری

به‌جز عوامل بالا، عامل دیگری وجود ندارد که به قطعیت باعث جلوگیری از ایندکس صفحات سایت شود اما عواملی مانند وجود نقشه سایت، بهینه‌سازی ساختار پیوند یکتا، ثبت سایت در سرچ کنسول (Search Console) و… می‌توانند در سریع‌تر شدن ایندکس صفحات وب‌سایتتان در گوگل مؤثر باشند که قبلاً در نوشتۀ ۱۱ نکته برای افزایش سرعت ایندکس صفحات سایت به‌طو کامل به این موارد پرداخته‌ایم.


این مقاله برگرفته از کتاب «عملیات سئو» است؛ برای یادگیری حرفه‌ای و اصولی سئو می‌توانید این کتاب را با کلیک بر تصویر زیر تهیه کنید:

۴۲ دیدگاه تاکنون

  • سلام. من به سایتم ssl زدم و یک گوگل وبمستر جدید ساختم. در ایندکس ها جدید تگها ایندکس نشدن بعد از یکماه!
    به روشی که گفتین هم بررسی کردم و متاتگ نوایندکس نبود در صفحات اونها.
    راهکار چیه به نظرتون؟؟

  • ممنون خیلی مفید بود فقط من یک مشکلی دارم در قسمت گوگل وبمستر تعداد صفخات ایندکس سایتم ۴۳۰۰ صفحه است ولی وقتی دستور site:domainname.com رو اجرا میکنم برای سایت من فقط ۹۸۰ صفحه میاره میخواستم ببینم علتش چی میتونه باشه؟

    • سلام و عرض ادب
      این مورد کاملا طبیعی است.
      هربار که شما این دستور را جستجو می‌کنید در واقع یک کوئری توسط گوگل اجرا می‌شود و این کوئری ممکن است با توجه به زمان، لوکیشن، آی‌پی و… تعداد نتایج متفاوتی نمایش دهد.
      مقدار صحیح همان مقداری است که در سرچ کنسول نمایش داده می‌شود.

  • سلام وقت بخیر

    سایت من http://pnc-laser.com حدود ۴ سال راه اندازی شده و در کلمات (( دستگاه برش)) و ((دستگاه برش لیزر)) در صحات اول گوگل قرار داره. ولی هیچ یک از ۵۰۰ مقاله ی سایت در گوگل ایندکس نشده.

    وقتی تنظیمات پیوند های یکتا در حالت (( ساده)) قرار می گیره از گوگل وبمستر می شه ایندکسش کرد ولی در همین حالت نمی شه سایت مپ ساخت.

    زمانی که تنظیمات پیوند های یکتا در حالت ((نام نوشته)) قرار می گیره در وبمستر ارور REDIRECTED می ده جالب اینجاست که لینکی که به اون دایرکت می ده دقیقا همین لینکی که وارد شده و در نهایتم در گوگل ایندکس نمی شه.
    فیلم این فرایندها در لینک روبرو قرار داره

    http://s8.picofile.com/file/8328142776/Bandicam.rar.html

    ممنون می شم راهنمائی کنید

    • سلام و عرض ادب
      فیلم‌هایی که ارسال کردید را مشاهده کردم.
      اول از همه باید تشکر کنم از شما که بسیار خوب و کامل، بدون هیچ ابهامی سوالتان را مطرح کردید.

      وب سایت شما را بررسی کردم و با نرم افزار Postman هم چند ریکوئست به صفحات مختلف سایتتان ارسال کردم و در همۀ موارد استاتوس کد ۲۰۰ برگردانده می‌شود و در هدر چیزی به عنوان ریدایرکت وجود ندارد.

      احتمالا مشکل در فایل htaccess. شماست. یکبار محتوای این فایل را بررسی کنید و در صورت امکان، بخشی از کدهای این فایل را که مربوط به خود وردپرس است را حذف کرده و از مقادیر پیشفرض وردپرس استفاده کنید:

      # BEGIN WordPress

      RewriteEngine On
      RewriteBase /
      RewriteRule ^index\.php$ - [L]
      RewriteCond %{REQUEST_FILENAME} !-f
      RewriteCond %{REQUEST_FILENAME} !-d
      RewriteRule . /index.php [L]

      # END WordPress

      موفق باشید.

  • سلام و خسته نباشید
    مدتی است در کنسول گوکل خطای ۴۰۳ بسیار دارم.
    در فایل robots هم wp-admin را disallow کردم. حالا جالبه که تمامی خطاهای access denied مربوط به مسیر wp-content/uploads/woocommerce_uploads است. حالا بنده باید wp-admin را allow کنم؟ همه خطاها مربوط به فایل های ووکامرس است

    • سلام و عرض ادب

      بهتر است wp-admin را به شکل زیر disallow کنید:

      User-agent: *
      Disallow: /wp-admin/
      Allow: /wp-admin/admin-ajax.php

      بجز کد بالا، بهتر است بخش‌های دیگری از وردپرس را Allow یا Disallow نکنید مگر در موارد خاص.
      موفق باشید.

  • با سلام
    اقا من هرچی مطلب میزارم تو سایت
    یعنی در کل ۳ تا مطلب گذاشتم ولی هیچ کدومو تو جست جوی گوگل
    نمیبینم من تنها وقتی تو جستجوی گوگل بنویسم overlearn.ml
    سایت خودمو مشاهده میکنم در غیر صورت نمی کنم

    • سلام و عرض ادب

      بنده سایت شما را بررسی کردم؛ مشکلی از بابت ایندکس شدن صفحات سایت شما در گوگل وجود ندارد. برای مشاهدۀ صفحات ایندکس شده می‌توانید دستور زیر را در گوگل جستجو کنید:

      site:overlearn.ml

      موفق باشید.

  • صفحه سایت رو کرال میکنم ایندکس میشه اما بعد از یک روز کاملا از نتایج گوگل حذف میشه! علتش چیه؟ در ضمن تو نتایج بینگ همیشه تو ۱۰ نتیجه اول هستش

    • سلام و عرض ادب
      خیلی بعید است که سایت شما در گوگل ایندکس شده و سپس حذف شود.
      با این دستور چک کنید که آیا صفحات سایتتان در گوگل ایندکس شده است یا خیر:
      site:rastana.com
      (آدرس سایت خودتان را به‌جای راستانا قرار دهید).

  • سلام خسته نباشید من سایتم یه مدت داخل گوگل ایندکس بود و تو گوگل کلمات کلیدی رو ک جستجو میکردی میاورد ولی یک دفعه کلا غیب شده و نمیاره کمکم کنید لطفا
    www.sobhe-tehran.com

    • سلام و عرض ادب
      با توجه به توضیحاتی که اشاره کردید احتمالاً وب‌سایت شما پنالتی شده است.
      نمودارهای بازدید خود را در سرچ کنسول بررسی کنید و ببینید که با شیب تندی نزولی شده است یا خیر.
      در کل نیاز به بررسی دقیقِ عملکرد شما در چند ماهِ گذشته + بررسی سرچ کنسول گوگل دارد تا بتوان تشخیص داد که چه اتفاقی باعث افت رتبۀ وب‌سایت شما شده است و اگر وب‌سایتتان پنالتی شده است، توسط کدام الگوریتم جریمه شده است.
      موفق باشید.

  • سلام خسته نباشید بنده سایت رو تازه تو گوگل ثبت کردم وقتی عبارت انگلیسی مثلا digikalaسرچ میکنم اول گوگل بالا میاد ولی فارسی اون دیجی کالا نیست لطفا راهنمایی بفرمایید مرسی

    • سلام و عرض ادب
      تشکر بابت مطالب خوب و مفیدتون
      بنده اخیرا به یک مشکلی در برخی از صفحات سایت برخورده ام. صفحاتی که رتبه خیلی خوبی با یکسری از کلید واژه ها دارند. در حال حاضر وقتی سرچ میکنم گوگل قادر به خواندن توضیحات صفحه نیست و میزنه اطلاعاتی برای این صفحه در دسترس نیست در صورتیکه عنوان نمایش داده میشود. ممکنه از متا تگ noindex باشه؟ یا عوامل دیگر ممنون میشم پاسخ بنده را بدید یا اگر راه دیگه ای وجود دارد که بتونم ازتون مشاوره بگیرم.
      سپاس

      • سلام و عرض ادب

        اگر گوگل عنوان صفحه را نمایش می‌دهد، یعنی دسترسی کامل به محتوای صفحه دارد. احتمالاً دلیل اینکه توضیحات صفحه توسط گوگل نمایش داده نمی‌شود این است که نسخۀ به‌روزی از محتوای صفحه را مشاهده نمی‌کند.

        معمولاً این مشکل هنگامی ایجاد می‌شود که صفحه‌ای که هنوز محتوای آن کامل نشده است، به اشتباه منتشر شده و توسط گوگل ایندکس می‌شود. در این صورت، باید منتظر باشید تا تغییراتی که روی صفحه ایجاد کرده‌اید توسط گوگل شناسایی شده و بروزرسانی شود.

        موفق باشید.

  • سلام. خسته نباشید
    ممنون از سایت خوبتون
    وقتی که صفحه اول سایت رو تو وبمستر فچ و رندر میکنم ، تو دوتا تصویر ی که برای ربات گوگل و مراجعه کننده میده فقط عکس هدر رو میاره. و هیچکدوم از دسته بندی ها و مطالب صفحه اول رو نمیاره. مشکل از کجا میتونه باش؟

    • سلام و عرض ادب

      در همان بخش می‌توانید مشاهده کنید که ربات گوگل به‌چه‌دلیلی نمی‌تواند سایت شما را به‌طور کامل مشاهده کند؛ مثلاً ممکن است ناخواسته دسترسی ربات‌های گوگل را به قایل‌های CSS مسدود کرده باشید که در این صورت باید مشکل را رفع کرده و مجدد فچ و رندر کنید.

      موفق باشید.

  • سلام میخواستم بپرسم گوگل جدیدا سایت های ir رو مگه ایندکس نمی کند من سایت جدید ساختم تمام کارهاش رو انجام دادم و هیچ مشکلی نه داخلی نه خارجی نداره و سایت قبلیم رو چند وقت پیش ایندکس شد (تقریبا یه سال پیش)
    اما سایت جدید که الان ایجاد کردم ایندکس نمی شود

    • سلام و عرض ادب

      از کجا مطمئن هستید که سایتتان در گوگل ایندکس نشده؟
      از دستور site:domain.com استفاده کنید و ببینید صفحات سایتتان ایندکس شده است یا خیر.
      ار ایندکس نشده بود با استفاده از ابزار URL Inspection در سرچ کنسول، درخواست ایندکس وب‌سایتتان را بدهید.
      با این کار معمولاً در کمتر از یک روز وب‌سایتتان ایندکس خواهد شد.

      موفق باشید.

  • سلام روز بخیر
    در سایت وردپرس wordpress.org سایتمون جهت بک لینک تعریف کردم و محتوای مناسب براش گذاشتم اما صفحه ایندکس نشده تقریبا ۲ هفته هم از درج متن من میگذره. ضمن اینکه نوایندکس و ربات چک کردم مشکلی نداشت
    باید چکار کرد؟

    • سلام و عرض ادب

      چه مدت هست که سایتتان راه‌اندازی شده؟
      در شروع کار کاملاً طبیعی هست که مطالب وب‌سایتتان دیر ایندکس شود.
      فعلاً می‌تونید از امکان URL Inspection در سرچ کنسول استفاده کنید و درخواست ایندکس شدن صفحات سایتتان را به گوگل بدهید.

      موفق باشید.

  • سلام عالی بود ممنون
    سایت من ۴ تا مطلب اول رو آندیکس کرد ولی بقیه رو آندیکس نمیکنه و در گوگل وب مستر ارور URL is not on Google را ثبت میکنه وقتی بررسی میکنم
    مشکل از چی میتونه باشه آدرس سایت رو گذاشتم ممنون میشم راهنمایی کنید من رو سپاس

    • سلام و عرض ادب

      مشکلی نیست نگران نباشید. در وب‌سایت‌هایی که به تازگی راه‌اندازی شده‌اند این موضوع طبیعی است و ایندکس شدن مطالب جدید ممکن است مدتی طول بکشد.

      سعی کنید لیست آخرین مطالب منتشرشده را در قالب ابزارک‌ها در سایدبار یا فوتر تمامی صفحات نمایش دهید تا گوگل دسترسی بهتری به محتواهای جدید داشته باشد.

      موفق باشید.

  • سلام وقت بخیر , تقریبا ۱۰ روزه سایت جدید زدم با دامنه ir منتها گوگل صفحه اصلی سایتمو ایندکس نمیکنه , تمام دسته بندی و تگ و پستهارو میاره ولی صفحه اصلی رو اصلا نمیاره هیچ خطایی هم توی وبمستر نیست فقط خطای breadcrumb داده بود که اونم حل کردم site:yourdomain.ir هم میزنم همه مطالبام میاد ولی صفحه اصلی رو فتچ هم میکنم شاید ۶ بار فتچ کردم ولی گوگل اصلا توجه نمیکنه به صفحه اصلی

    • سلام و عرض ادب

      عجله نکنید؛ وب‌سایت شما به‌تازگی راه‌اندازی شده است و لازم است کمی صبور باشید تا گوگل به مرور زمان همۀ صفحات را ایندکس کند.

      توصیه می‌کنم تمرکزتان را به تولید محتوای باکیفیت اختصاص دهید.

      موفق باشید.

  • سلام و درود
    قبلا فایل robots.txt نداشتم تو سایتم بعد براش ساختم و این کدم نشون داد

    User-agent: *
    Disallow: /wp-admin/
    Allow: /wp-admin/admin-ajax.php

    Sitemap: https://site.ir/wp-sitemap.xml

    بعدش گوگل هیچکدوم از محصولاتمو ایندکس نکرد الان فایل دوباره حذف کردم تا ببینم چی میشه
    نظر شما چیه ؟ممنون میشم کمک کنید.

    • سلام و عرض ادب

      این کد هیچ مشکلی ندارد و کاملاً استاندارد است و ایندکس نشدن صفحات جدید وب‌سایتتان ارتباطی به این کدها ندارد.

      کمی صبر کنید احتمالاً محصولات جدیدی که منتشر می‌کنید ایندکس خواهند شد.

      موفق باشید.

  • سلام من قبلا محصولاتمو دستی ایندکس میکردم و سریع ایندکس میشدن تو گوگل الان ایندکس نمیشن البته چنتا از لینکهایی که ایندکس نمیشدن به تازگی ایندکس شدن اما مابقی محصولاتم که اواخر اضافه کردم هنوز ایندکس نشدن
    به نظرتون مشکل از چیه؟

  • با سلام
    مدتی است که صفحات من در گوگل ایندکس نمیشود زمانی که این مشکل را در سرچ کنسول برسی میکنم به این گونه جواب میدهد
    صفحع شما قابلیت ایندکس شدن را دارد اما در فهرست موجو نیست.
    این مشکل به خاطر چیست
    آیا به این خاطر است که نام سایت را تغییر دادم

    • سلام و عرض ادب

      این مورد درواقع مشکل خاصی نیست؛ شما به تازگی آن صفحه را ایجاد کرده‌اید و هنوز توسط گوگل ایندکس نشده است.

      قبلاً این امکان وجود داشت تا از طریق سرچ کنسول، درخواست ایندکس بصفحۀ موردنظرتان را برای گوگل ارسال کنید؛ اما درحال‌حاضر این امکان توسط گوگل غیرفعال شده است و باید منتظر بمانید تا ربات‌های گوگل وارد وب‌سایتتان شده و صفحاتی که به‌تازگی ایجاد کرده‌اید را ایندکس کنند.

      موفق باشید.

  • با سلام سایت من در گوگل ایندکس شده ولی مطالبی که میزارم ایندکس نمیشه؟
    لطفا راهنمایی بفرمائید

    • سلام و عرض ادب

      اگر وب‌سایت شما تازه راه‌اندازی شده و یا تعداد مطالبی که روی وب‌سایتتان منتشر می‌کنید زیاد نیست، طبیعی است که ایندکس‌شدنِ مطالب جدید کمی زمان‌بر خواهد بود.

      بهترین راهکار این است که لینک جدیدترین مطالب منتشرشده را در سایدبار یا فوتر تمامی صفحات قرار دهید تا گوگل سریع‌تر به محتوای منتشرشده دسترسی داشته باشد.

      موفق باشید.

  • با عرض سلام و خسته نباشید خدمت شما

    من هرچقدر محصول جدید به سایتم اضافه میکنم درگوگل ایندکس نمیشه فقط همون چندتا محصول قدیمی که داشتم ایندکس شده و مطالب جدیدی که قرار میدم ایندکس نمیشن

    فایل .htaccess رو چک کردم ولی متوجه چیزی نشدم. آدرس سایت من (…) میشه لطفا شما چک کنید

دیدگاهتان را بنویسید

یک قدم تا دانلود این هدایای ارزشمند فاصله دارید

یک جزوه الکترونیکی سئو همراه با فیلم دوره آموزش سئو
برایم ایمیل شود
نگران نباشید ما هم مثل شما از ایمیل‌های مزاحم متنفریم.
close-link

یک قدم تا دانلود این کتاب فاصله دارید

دانلود کتاب بازاریابی با اینستاگرام
برایم ایمیل شود
نگران نباشید ما هم مثل شما از ایمیل‌های مزاحم متنفریم.
close-link

رمز عبور دسترسی به این صفحه را ندارید؟!

آدرس ایمیل خود را در کادر زیر وارد کنید و روی دکمۀ «ارسال رمز عبور» کلیک کنید تا بلافاصله رمز عبور به آدرس ایمیل شما ارسال شود
ارسال رمز عبور
close-link