آپدیت جدید گوگل برای حذف و کاهش ایندکس ها

آپدیت جدید گوگل برای حذف و کاهش ایندکس ها از نتایج جستجو در تاریخ 16 آپریل 2014 یا 27 فروردین 1393 انجام شده است. در شانزده روز گذشته تماس های زیادی از طرف همکاران سئو کار و مدیران سایت ها داشتم که سایتشون دچار مشکل اساسی شده بود و از نتایج گوگل حذف شده بود. دلیل این موضوع آپدیت جدید الگوریتم گوگل هست.

قبل از اینکه در مورد این آپدیت توضیح بدهم لازم میدونم یک توضیح کوتاه در مورد اینکه چرا موتورهای جستجو دوست ندارند صفحات ایندکس شده زیادی داشته باشند بدهم. چندی پیش در شعار یکی از همایشها دیدم که نوشته بود گوگل نتوانسته تمام صفحات اینترنت را ایندکس بکنه و به همین دلیل موتور جستجوی خوبی نیست. نکته ای که نگارنده این شعار و سخنران این همایش بهش دقت نکرده بود این هست که بین نتوانستن و نخواستن تفاوت زیادی وجود داره.

موتور جستجوی یاهو در سال 2009 حدود 60% از صفحات ایندکس شده خود را حذف کرد، گوگل نیز از سال 2012 تا به حال آپدیت های زیادی ارائه کرده تا جلوی ایندکس شدن صفحات اینترنتی را بگیره که از جمله معروفترین آنها که احتمالا همگی با آن آشنا هستید جلوگیری از ایندکس شدن مطالب کپی شده در سایت ها هست.

چرا موتورهای جستجو علاقه ای به ایندکس کردن همه صفحات ندارند؟

پاسخ این سوال را از دو جنبه می توان بررسی کرد:

  • اطلاعات موجود در اینترنت بسیار حجیم هستند و ایندکس کردن آنها نیازمند سخت افزارها و نرم افزارهای بسیار گران قیمتی است که هزینه موتورهای جستجو را شدیدا افزایش می دهد و بعضا ایندکس کردن تمام مطالب تا حدودی غیر ممکن به نظر می رسد. به عنوان مثال تمام موتورهای جستجوی فارسی که در سال های اخیر توسط سازمان های مختلف راه اندازی شدند و نهایتا پروژه آنها به شکست منجر شد مشکل اساسی که داشتند در بخش خزنده آنها بود که از نظر زمان بندی و تشخیص کیفیت محتوا دچار مشکل بود و از طرف دیگر امکانات سخت افزاری لازم برای نگهداری داده های حجیم را نداشتند و نرم افزار آنها نهایتا کند و نا کارآمد می شد.
  • هر داده ای ارزش ایندکس شدن ندارد. مثل محتوای تکراری و داده های کپی که هیچ کمکی به کاربری که به دنبال مطلب خاصی می گردد نخواهند کرد.

بروزرسانی الگوریتم گوگل - حذف ایندکس های سایت از نتایج گوگل

آپدیت جدید گوگل چه کاری انجام می دهد؟

دو خاصیت اصلی این آپدیت به صورت زیر هستند:

  • این آپدیت جدید تمام اطلاعات دامنه های پارک شده روی هم را حذف می کند. به عنوان مثال اگر شما یک دامنه با پسوند ir و یک دامنه با پسوند com داشته باشید و هر دو را روی یک هاست پارک کرده باشید و گوگل تا به حال نتوانسته بود تشخیص دهد که اطلاعات هر دو دامنه کپی هستند، الگوریتم جدید با بروزرسانی که بر روی آن انجام شده تمام ایندکس های حداقل یکی از دو دامنه را حذف خواهد کرد.
  • در صورتی که از پروتکل https استفاده می کنید و یا این پروتکل بر روی هاست شما فعال هست ممکن است این الگوریتم آسیب جدی به سایت شما برساند زیرا گوگل تمام صفحات ایندکس شده http شما را حذف خواهد کرد. حتی اگر https سایت شما خطا بدهد و صرفا پروتکل آن بر روی سایت شما فعال باشد.
  • در صورتی که سایت شما هم با www و هم بدون آن لود می شود و ریدایرکت نمی شود، حتما یکی از دو حالت را انتخاب کنید زیرا گوگل این موضوع را نیز مد نظر دارد و ایندکس های اضافه را پاک می کند. بهترین روش برای ریدایرکت کردن، استفاده از کد خطای 301 است.
  • ایندکس شدن پوشه های مختلف سایت با پروتکل های مختلف نیز از هم جدا شده اند، یعنی اگر آدرس دهی صفحات مختلف سایت شما به صورتی است که هر بخش در یک پوشه قرار دارد مانند www.example.com/cat در این صورت گوگل برای هر پروتکل ایندکس جداگانه ای برای سایت شما در نظر خواهد گرفت.

 چه کاری باید انجام بدهم تا سایت من دچار مشکل نشود؟

در اولین مرحله به وبمستر تولز مراجعه کنید و گزارش index stat وب سایت خود را بررسی کنید. در صورتی که پس از تاریخ بروزرسانی تغییری در تعداد ایندکس های شما بوجود نیامده است مشکلی شما را تهدید نمی کند اما اگر تعداد ایندکس های سایت شما افت پیدا کرده است به دنبال یکی از مواردی باشید که در پاراگراف قبل توضیح دادم و سعی کنید آنها را برطرف کنید.

من رضا شیرازی هستم، تخصصم در زمینه تحلیل و پیاده سازی نرم افزارهای تحت وب، بهینه سازی و طراحی سایت است و تحصیلاتم در زمینه هوش مصنوعی است. مشتاق دریافت نظر شما در مورد مطالب سایتم هستم و در صورتی که مطلب فوق به نظر شما جالب است خوشحال خواهم شد که آن را در شبکه های اجتماعی یا سایت خود منتشر کنید. (لطفا با ذکر لینک منبع)
نظرات
  • رضا شیرازی 1396/03/17
    پاسخ به سریال عاشقانه: اولویت برای گوگل با https است و اگر این کار را انجام ندین بهتره. در غیر اینصورت به صورت برعکس باید 301 انجام بدین.
  • سلام
    سایت بنده 182000 ایندکس داشت که به یکباره و در عرض 1 روز تمام ایندکس ها از گوگل پاک شد. مگر میشه چنین چیزی؟ حتی 1 صفحه ایندکس شده در گوگل ندارم
  • سلام و خسته نباشید خدمت شما اقای شیرازی ...
    من مدتی سایتم با https در گوگل ثبت بوده و چون سایت موزیک و فیلم بوده حدود 300 صفحه تا الان ایندکس شده حدود 1 و نیم ماه حالا میخام تو نتایج گوگل از همون حالت عادی استفاده کنم بدون https اول اینکه بگین باید تو گوگل وب مستر اون سایت رو حذف و از دوباره بدون اس اس ال وصل کنم یا نه ؟ دقیق بگین چیکار کنم تا نتایج قبلیم حفظ بشه و سایت در گوگل بدون https نمایش بده ممنون از شما
  • رضا شیرازی 1394/04/23
    پاسخ به سعید: در صورتی که این بلاک شدن بر روی CTR تاثیر منفی بگذارد باعث کاهش رتبه و ورودی های گوگل شما می شود
  • سعید 1394/04/21
    آقا موفق باشید واقعا سپاس گذارم
    آیا بلاک شدن سایت توسط ایست بر رتبه سایت تاثیر گذار است و تا چه حد؟
  • مهدی 1393/08/13
    سلام و خدا قوت
    این سایت ماهست مشکلش اینه که هم وروردی گوگل کمه و هم با کاهش ایندکس واجهیم چکار کنیم؟؟
  • رضا شیرازی 1393/06/31
    پاسخ به سامان: فکرنمیکنم چنین کاری امکان پذیر باشه چون در وبلاگ نمیشه کد سمت سرور را اجرا کرد و معمولا سرویس دهنده ها جلوی این کار را میگیرند.
  • سامان 1393/06/28
    سلام ممنن بخاطر مقاله مفیدتون
    وبلاگ ها هم میتونن ریداکت 301 کنن؟
    ممنون
  • رضا شیرازی 1393/06/23
    پاسخ به املاکیاران: بله همینطوره. اگر به صورت درست و با کد 301 انجام بشه امتیازات دامنه قبلی و لینکهای قبلی به دامنه جدید منتقل میشه
  • سلام آقای شیرازی
    سوالی مدتهاست ذهنم رو مشغول کرده ممنون میشم اگر اطلاعاتی دارید در اختیارم بذارید.
    فرض کنید یک دامین (دامین B) رو روی دامین اصلی سایت (دامین A) ریدایرکت 301کردیم. اگر برای دامین B بک لینک بگیریم تاثیری در دامین A خواهد داشت یا هیچ فایده ای نداره؟
    چون میگن ریدایرکت 301 هم پیج رنک و هم بک لینکها رو به دامین اصلی منتقل میکنه
    ممنونم
  • فری 1393/03/20
    سلام
    با اینکه من از IT خیلی اطلاعات ندارم ولی لذت بردم از قابل درک بودن اطلاعاتتون
    واقعا ممنونم
  • رضا شیرازی 1393/03/19
    پاسخ به مجتبی: بررسی این موضوع زمان میبره، اما اگر میخواهید سرعت ایندکس مطالب را افزایش بدید حتما مقاله ای که در این زمینه نوشتم را مطالعه کنید.
  • مجتبی 1393/03/15
    سلام چرا سرعت ایندکس من پایینه روز اول ۱۷۰ بعد امروز شد ۱۰ ایندکس وبم تازه درست کردم حدود دو هفته الان هم دو روزه هیچ ایندکسی نداره (دامنه وصل کردم به وبلاگ و از خودگوگل وبمستر جلوی ایندکس شدن وبلاگ گرفتم و در قسمت نتیجه سرچ هم گذاشتم وب با www نمایش بذاره. ورودی سرچ هم حدود ۱۰ بازدید روزانه، کپی هم نیستن)
  • رضا شیرازی 1393/02/28
    پاسخ به سامان: https به تنهایی باعث این موضوع نمیشه، بلکه پوشه هایی که با Https لود می شوند به صورت جداگانه ایندکس میشوند و بنابراین اگر تنظیمات هاست به خوبی انجام نشده باشه میتونه برای سایت ها مشکلات زیادی ایجاد بکنه.
  • m 1393/02/21
    با سلام و تشکر از شما
    دقیقا در تاریخی که گفتید سایتی که برای بیش از 100 کوئری در صفحه اول گوگل بود الان رفته به آخرین صفحه گوگل برای برای آن کوئری مثلان از صفحه اول رفته به صفحه 92 گوگل ولی تو گوگل وب مستر تولز تغییری تو ایندکسش دیده نمیشه ، اگر امکان هست اطلاعات بیشتری بدید
    با سپاس
  • سامان 1393/02/20
    یعنی شما میگید https باعث میشه ایندکسها حذف بشه و دیگه هم ایندکسی نشه؟
    پس باید چکار کرد؟
    گوگل چرا ما رو اسیر خودش کرده؟
  • BALYAN 1393/02/18
    ممنون
  • رضا شیرازی 1393/02/16
    پاسخ به حمید: برای بررسی دقیق تر باید همه موارد سایت بررسی شود و پارامترهای مختلفی چک شوند.
  • حمید 1393/02/14
    سلام آقای شیرازی و ممنون از مطالب تخصصی و خوبی که به صورت رایگان قرار می دید .
    سایت یکی از بچه ها که با وردپرس کار می کنه ایندکسهاش در تاریخ3/2/2014 ناگهانی از 607 ایندکس رسید به 322 ایندکس الان رسیده به 357 ایندکس نکاتی رو که گفتید چک کردم ولی هیچ یک از این مشکلات رو سایت نداشت.
    می خوام بدونم آیا امکان داره مشکل دیگه ای هم سایت داشته باشه .
    در ضمن اصلا بازدید های سایت افت نکرده ...
  • خداروشکر نمودار ایندکس ما دقیقاً بعد از آپدیت جدید گوگل روند صعودی داشته
  • سلام
    سایت من هم تعداد اینکس هاش بسیار افت کرده بود و دائم به سایت مپ نیز خطا می داد(در وب مستر تولز) که من مجبور شدم مپ سایتم را آپ دیت کنم،تغریبا مشکل حل شده و باز ایندکس هام دارند اضافه میشند