راه حل مشکل Discovered Currently Not Indexed از زبان گوگل

جان مولر از گوگل پاسخ داد که آیا حذف صفحات از یک سایت بزرگ به حل مشکل Discovered Currently Not Indexed، کمک می‌کند. جان بینش‌های کلی در مورد چگونگی حل این مشکل ارائه کرد.

مشکل Discovered Currently Not Indexed

Search Console خدماتی است که توسط گوگل ارائه می‌شود و مشکلات و بازخوردهای مرتبط با جستجو را برقراری ارتباط می‌کند.

وضعیت ایندکس‌سازی بخش مهمی از کنسول جستجو است زیرا به ناشر می‌گوید چه مقدار از سایت ایندکس شده و برای رتبه‌بندی واجد شرایط است.

وضعیت ایندکس صفحات وب در گزارش ایندکس صفحات کنسول جستجو یافت می‌شود.

گزارشی مبنی بر اینکه یک صفحه توسط گوگل کشف شده اما ایندکس نشده است، اغلب نشانه‌ای از این است که مشکلی نیاز به رسیدگی دارد.

دلایل متعددی وجود دارد که گوگل ممکن است یک صفحه را کشف کند اما از ایندکس کردن آن خودداری کند، اگرچه مستندات رسمی گوگل فقط یک دلیل را ذکر می‌کند.

“کشف شده – در حال حاضر ایندکس نشده (Discovered Currently Not Indexed)صفحه توسط گوگل پیدا شد، اما هنوز خزیده نشده است.

معمولاً گوگل می‌خواست این URL را خزش کند اما انتظار می‌رفت که این کار سایت را بیش از حد بارگذاری کند؛ بنابراین گوگل خزش را دوباره برنامه‌ریزی کرد.

به همین دلیل است که تاریخ آخرین خزش در گزارش خالی است.”

جان مولر از گوگل دلایل بیشتری برای اینکه چرا یک صفحه کشف می‌شود اما ایندکس نمی‌شود ارائه می‌دهد.

جذف صفحات ایندکس نشده در گوگل

ایده‌ای وجود دارد که حذف صفحات خاص می‌تواند به گوگل کمک کند تا بقیه سایت را بهتر بررسی کند، زیرا تعداد صفحات کمتری برای بررسی خواهد داشت.

تصوری وجود دارد که گوگل برای هر سایت ظرفیت محدودی برای بررسی صفحات (بودجه بررسی) اختصاص می‌دهد.

کارمندان گوگل بارها گفته‌اند که چیزی به نام بودجه بررسی به شکلی که سئوکاران تصور می‌کنند وجود ندارد.

گوگل ملاحظات زیادی برای تعداد صفحاتی که باید بررسی کند، از جمله ظرفیت سرور وب سایت برای مدیریت بررسی گسترده، دارد.

یکی از دلایل اساسی که گوگل در مورد تعداد صفحاتی که بررسی می‌کند حساس است، این است که گوگل ظرفیت کافی برای ذخیره هر صفحه وب در اینترنت را ندارد.

به همین دلیل گوگل تمایل دارد صفحات با ارزش را فهرست کند (اگر سرور توانایی مدیریت آن را داشته باشد) و صفحات دیگر را فهرست نکند.

برای اطلاعات بیشتر درباره بودجه بررسی، مطلب “Google Shares Insights into Crawl Budget” را بخوانید.

این سوال مطرح شد:

“آیا حذف و تجمیع ۸ میلیون محصول استفاده شده به ۲ میلیون صفحه محصول یکتا و قابل فهرست، به بهبود قابلیت بررسی و فهرست بندی (Discovered Currently Not Indexed) کمک می‌کند؟”

جان مولر از گوگل ابتدا تأیید کرد که نمی‌تواند به مسئله خاص فرد پاسخ دهد و سپس توصیه‌های عمومی ارائه داد.

او پاسخ داد:

“نمی‌توان گفت.

من توصیه می‌کنم که راهنمای سایت‌های بزرگ درباره بودجه بررسی را در مستندات ما بررسی کنید.

برای سایت‌های بزرگ، گاهی اوقات بررسی بیشتر محدود به این است که وب سایت شما چگونه می‌تواند بررسی بیشتر را مدیریت کند.

با این حال، در بیشتر موارد، این بیشتر به کیفیت کلی وب سایت مربوط می‌شود.

آیا با کاهش صفحات از ۸ میلیون به ۲ میلیون صفحه، به طور قابل توجهی کیفیت کلی وب سایت خود را بهبود می‌بخشید؟

اگر بر بهبود واقعی کیفیت تمرکز نکنید، به راحتی می‌توانید زمان زیادی را صرف کاهش تعداد صفحات قابل فهرست کنید، اما واقعاً وب سایت را بهتر نکنید و این برای جستجو بهبود نمی‌یابد.”

مولر دو دلیل برای مشکل Discovered Currently Not Indexed ارائه می‌دهد

جان مولر از گوگل دو دلیل را برای این که گوگل ممکن است یک صفحه را کشف کند اما از فهرست کردن آن خودداری کند، بیان کرده است.

1. ظرفیت سرور

2. کیفیت کلی وب سایت

1. ظرفیت سرور

مولر گفت که توانایی گوگل برای بررسی و فهرست کردن صفحات وب می‌تواند “محدود به چگونگی مدیریت وب سایت شما برای بررسی بیشتر” باشد.

هرچه وب سایت بزرگتر باشد، تعداد بیشتری ربات برای بررسی آن نیاز است. مشکل اینجاست که گوگل تنها رباتی نیست که یک سایت بزرگ را بررسی می‌کند.

ربات‌های مشروع دیگری نیز وجود دارند، مانند ربات‌های مایکروسافت و اپل، که آنها نیز سعی در بررسی سایت دارند. علاوه بر این، بسیاری ربات‌های دیگر، برخی مشروع و برخی مرتبط با هک و سرقت داده‌ها، وجود دارند.

این بدان معناست که برای یک سایت بزرگ، به ویژه در ساعات شب، ممکن است هزاران ربات از منابع سرور وب سایت برای بررسی سایت استفاده کنند.

به همین دلیل یکی از اولین سوالاتی که از ناشری با مشکل فهرست بندی می‌پرسم، وضعیت سرور آنها است.

به طور کلی، یک وب سایت با میلیون‌ها صفحه، یا حتی صدها هزار صفحه، نیاز به سرور اختصاصی یا میزبان ابری دارد (زیرا سرورهای ابری منابع مقیاس‌پذیر مانند پهنای باند، GPU و RAM را ارائه می‌دهند).

گاهی اوقات ممکن است محیط میزبانی نیاز به تخصیص حافظه بیشتری به یک فرآیند، مانند محدودیت حافظه PHP، داشته باشد تا به سرور کمک کند ترافیک بالا را مدیریت کند و از پیام‌های خطای 500 جلوگیری کند.

عیب‌یابی سرورها شامل تحلیل گزارش خطای سرور است.

2. کیفیت کلی وب سایت

این دلیل جالبی برای عدم فهرست کردن تعداد کافی صفحات است. کیفیت کلی سایت مانند یک نمره یا تعیین کیفیتی است که گوگل به یک وب سایت اختصاص می‌دهد.

بخش‌هایی از یک وب سایت می‌توانند بر کیفیت کلی سایت تأثیر بگذارند جان مولر گفته است که یک بخش از یک وب سایت می‌تواند بر تعیین کیفیت کلی سایت تأثیر بگذارد.

مولر گفت:

“…برای برخی موارد، ما به کیفیت کلی سایت نگاه می‌کنیم.

و وقتی به کیفیت کلی سایت نگاه می‌کنیم، اگر بخش‌های قابل توجهی از سایت کیفیت پایینی داشته باشند، برای ما اهمیتی ندارد که چرا کیفیت آنها پایین است.

…اگر ببینیم که بخش‌های قابل توجهی کیفیت پایینی دارند، ممکن است فکر کنیم که این وب سایت به طور کلی به اندازه‌ای که تصور می‌کردیم خوب نیست.”

تعریف کیفیت سایت

جان مولر از گوگل در یکی از ویدئوهای Office Hours تعریفی از کیفیت سایت ارائه داد:

“وقتی صحبت از کیفیت محتوا می‌شود، منظورمان فقط متن مقالات شما نیست.

واقعاً کیفیت کلی وب سایت شما مطرح است.

و این شامل همه چیز از جمله طرح‌بندی تا طراحی است.

مثل اینکه چگونه مطالب را در صفحات خود ارائه می‌دهید، چگونه تصاویر را ادغام می‌کنید، چگونه با سرعت کار می‌کنید، همه این عوامل در اینجا نقش دارند.”

مدت زمان لازم برای تعیین کیفیت کلی سایت

یکی دیگر از واقعیت‌ها درباره چگونگی تعیین کیفیت سایت توسط گوگل این است که این فرایند چقدر طول می‌کشد؛ این فرایند ممکن است ماه‌ها زمان ببرد.

مولر گفت:

“برای ما زمان زیادی طول می‌کشد تا بفهمیم یک وب سایت چگونه در مقایسه با بقیه اینترنت جا می‌گیرد.

…و این چیزی است که به راحتی می‌تواند، نمی‌دانم، چند ماه، نیم سال، گاهی حتی بیشتر از نیم سال طول بکشد…”

بهینه‌سازی سایت برای بررسی و فهرست‌بندی

بهینه‌سازی کل سایت یا بخشی از سایت به نوعی یک نگاه کلی و سطح بالا به مشکل است. اغلب به بهینه‌سازی صفحات جداگانه به صورت مقیاس‌پذیر ختم می‌شود.

به ویژه برای سایت‌های فروشگاهی با هزاران یا میلیون‌ها محصول، بهینه‌سازی می‌تواند به اشکال مختلفی انجام شود.

مواردی که باید به آن‌ها توجه کنید:

منوی اصلی

اطمینان حاصل کنید که منوی اصلی بهینه شده تا کاربران را به بخش‌های مهم سایت که اکثر کاربران به آن‌ها علاقه دارند هدایت کند. منوی اصلی همچنین می‌تواند به صفحات محبوب لینک بدهد.

لینک به بخش‌ها و صفحات محبوب

بخش‌ها و صفحات محبوب نیز می‌توانند از بخش برجسته‌ای از صفحه اصلی لینک شوند.

این کار به کاربران کمک می‌کند تا به صفحات و بخش‌هایی که برایشان مهم است دسترسی پیدا کنند و همچنین به گوگل نشان می‌دهد که این صفحات مهم هستند و باید فهرست شوند.

بهبود صفحات با محتوای کم

محتوای کم اساساً به صفحاتی با محتوای کم مفید یا صفحاتی که بیشتر کپی صفحات دیگر هستند (محتوای قالبی) اشاره دارد.

فقط پر کردن صفحات با کلمات کافی نیست. کلمات و جملات باید برای بازدیدکنندگان سایت معنی‌دار و مرتبط باشند.

برای محصولات، می‌تواند شامل اندازه‌گیری‌ها، وزن، رنگ‌های موجود، پیشنهادات دیگر محصولات برای ترکیب با آن، برندهایی که محصولات با آن‌ها بهترین کارایی را دارند، لینک به راهنماها، پرسش‌های متداول، امتیازات و سایر اطلاعاتی باشد که کاربران مفید می‌یابند.

حل مشکل Discovered Currently Not Indexed برای افزایش فروش آنلاین

در یک فروشگاه فیزیکی، به نظر می‌رسد که تنها قرار دادن محصولات روی قفسه‌ها کافی است.

اما واقعیت این است که اغلب نیاز به فروشندگانی با دانش کافی است تا این محصولات به خوبی به فروش برسند.

یک صفحه وب می‌تواند نقش یک فروشنده با دانش را ایفا کند که به گوگل توضیح می‌دهد چرا باید این صفحه فهرست شود و به مشتریان کمک می‌کند تا آن محصولات را انتخاب کنند.

ویدئوی Google SEO Office Hours را در دقیقه 13:41 مشاهده کنید:

منبع : Google On Fixing Discovered Currently Not Indexed