گوگل در سه مرحله کار میکند: اول رباتهایش صفحهها را پیدا و خزش میکنند، بعد محتوای آنها را در یک پایگاه دادهی عظیم به نام ایندکس ذخیره میکنند، و در لحظهی جستجو مرتبطترین و مفیدترین صفحهها را رتبهبندی و نمایش میدهند. هر مشکل سئو یک سایت، در یکی از همین سه مرحله اتفاق افتاده است.
گوگل در کسری از ثانیه چه کاری انجام میدهد؟
وقتی جستجو میکنید، گوگل به سراغ کل اینترنت نمیرود؛ داخل ایندکس خودش میگردد که از قبل ساخته است. طبق خود گوگل، این ایندکس صدها میلیارد صفحه را در خود دارد و حجمش از ۱۰۰ میلیون گیگابایت بیشتر است.
چیزی که در کسری از ثانیه اتفاق میافتد فقط مرحلهی آخر است: فهمیدن منظور شما و مرتب کردن صفحههای مرتبط.
به همین دلیل، سؤال «گوگل چگونه کار میکند» برای صاحب سایت یک سؤال عملی است. اگر صفحهی شما در نتایج نیست، اول باید بفهمید در کدام مرحله گیر کرده است.
سه مرحله کار موتور جستجوی گوگل در یک نگاه
| مرحله | گوگل چه میکند؟ | اگر اینجا گیر کنید چه میبینید؟ | ابزار بررسی |
|---|---|---|---|
| خزش (Crawling) | پیدا کردن و دانلود صفحه | صفحه اصلاً در سرچ کنسول دیده نمیشود | گزارش Crawl Stats و URL Inspection |
| ایندکس (Indexing) | فهمیدن و ذخیرهی محتوا | وضعیت «Crawled – currently not indexed» | گزارش Pages در سرچ کنسول |
| رتبهبندی (Ranking) | انتخاب و ترتیب نتایج | صفحه ایندکس شده ولی بازدید ندارد | گزارش Performance |
خزش گوگل (Crawling) چیست و ربات گوگل چطور صفحات را پیدا میکند؟
خزش یعنی گوگل نشانی یک صفحه را پیدا کند و محتوایش را دانلود کند. اینترنت فهرست مرکزی ندارد؛ گوگل باید صفحهها را مثل یک کاربر، با دنبال کردن لینکها از یک صفحه به صفحهی دیگر، کشف کند.
گوگل صفحات جدید را از کجا پیدا میکند؟ نقش لینکها و نقشه سایت
گوگل سه راه اصلی برای پیدا کردن صفحهی جدید دارد:
- لینک داخلی: مهمترین راه. صفحهای که از هیچ جای سایت لینک نگرفته (صفحهی یتیم)، دیر پیدا میشود یا اصلاً پیدا نمیشود.
- لینک از سایتهای دیگر: هر لینک خارجی یک مسیر تازه برای رسیدن ربات به سایت شماست.
- نقشه سایت (Sitemap): فهرستی از نشانیهایی که میخواهید گوگل ببیند. نقشه سایت پیدا شدن را سریعتر میکند، اما ایندکس شدن را تضمین نمیکند.
رندر شدن صفحه
رندر یعنی گوگل صفحه را مثل یک مرورگر اجرا کند تا محتوایی را که با جاوااسکریپت ساخته میشود ببیند. گوگل از نسخهی بهروز مرورگر کروم برای رندر استفاده میکند، اما رندر ممکن است با تأخیر انجام شود.
محتوای اصلی و لینکهای مهم را طوری بسازید که در HTML اولیه وجود داشته باشند، نه اینکه فقط بعد از کلیک یا اسکرول ساخته شوند.
بودجه خزش (Crawl Budget) چیست و برای چه سایتهایی مهم است؟
بودجه خزش مقدار وقت و منابعی است که گوگل برای خزش یک سایت صرف میکند. طبق راهنمای رسمی گوگل، این موضوع عمدتاً برای سایتهای بیش از یک میلیون صفحه با تغییر هفتگی، یا بیش از ۱۰ هزار صفحه با تغییر روزانه مهم است.
برای یک وبلاگ یا فروشگاه کوچک، بودجه خزش تقریباً هیچوقت مشکل اصلی نیست. اگر صفحهای ایندکس نمیشود، دلیلش معمولاً کیفیت یا لینکدهی است، نه بودجه.
ایندکس گوگل چیست و چرا هر صفحهای ایندکس نمیشود؟
ایندکس پایگاه دادهای است که گوگل در آن محتوای صفحهها را ذخیره میکند؛ شبیه فهرست انتهای یک کتاب که میگوید هر کلمه در کدام صفحه آمده است. گوگل در این مرحله متن، عنوان، تصاویر و دادههای ساختاریافته را تحلیل میکند و میفهمد صفحه دربارهی چیست.
خزش شدن تضمین ایندکس شدن نیست. گوگل عمداً همهی صفحهها را نگه نمیدارد. رایجترین دلایل ایندکس نشدن اینهاست:
- محتوای تکراری: وقتی چند صفحه تقریباً یک محتوا دارند، گوگل یکی را بهعنوان نسخهی اصلی (Canonical) انتخاب میکند و بقیه را کنار میگذارد.
- کیفیت پایین: صفحهای که چیزی بیشتر از صفحههای موجود ندارد، ارزش جا گرفتن در ایندکس را ندارد.
- دستور noindex: گاهی افزونهی سئو یا تنظیمات قالب، ناخواسته روی صفحهها noindex گذاشته است.
- لینکدهی ضعیف: صفحهای که در سایت لینک کمی میگیرد، از نگاه گوگل اهمیت کمی دارد.
اگر در سرچ کنسول وضعیت «Crawled – currently not indexed» را زیاد میبینید، معمولاً مشکل کیفیت محتوا یا تکراری بودن است؛ نه فنی. اینجاست که درک درست از اینکه گوگل چگونه کار میکند جلوی ساعتها وقتگذاشتن روی راهحلهای اشتباه را میگیرد.
گوگل چطور تصمیم میگیرد کدام سایت رتبه اول باشد؟
گوگل صفحهای را بالاتر میگذارد که هم به منظور کاربر نزدیکتر است و هم از نظر کیفیت و اعتبار قابلاعتمادتر. برای این تصمیم، اول باید بفهمد کاربر دقیقاً چه میخواهد، بعد از بین هزاران صفحهی مرتبط، بهترینها را مرتب کند.
گوگل چطور منظور شما از جستجو را میفهمد؟
گوگل بهجای تطبیق کلمهبهکلمه، نیت جستجو را تشخیص میدهد: کاربر میخواهد چیزی یاد بگیرد، چیزی بخرد یا به سایت خاصی برود؟ کسی که «قیمت آیفون» را جستجو میکند فروشگاه میخواهد، و کسی که «آیفون یا سامسونگ» را جستجو میکند مقالهی مقایسهای.
سه سیستم هوش مصنوعی در این فهم نقش اصلی دارند:
- RankBrain (۲۰۱۵): کلمات را به مفهومها وصل میکند؛ برای همین گوگل جستجوهایی را که قبلاً ندیده هم میفهمد.
- Neural Matching (۲۰۱۸): مفهوم پشت جستجو و صفحه را با هم تطبیق میدهد، حتی اگر کلمات مشترکی نداشته باشند.
- BERT (۲۰۱۹): ترکیب کلمات و نقش کلمات کوچک مثل «برای» و «بدون» را در معنی جمله میفهمد.
نتیجهی عملی برای سئو این است که لازم نیست کلمه کلیدی را دقیقاً با همان شکل تکرار کنید. لازم است به سؤال واقعی کاربر کامل جواب دهید.
چرا نتایج جستجوی من با دیگران فرق دارد؟
چون گوگل موقعیت مکانی، زبان، دستگاه و گاهی سابقهی جستجوی شما را در نظر میگیرد. «کافه» در تهران و شیراز نتایج کاملاً متفاوتی دارد. برای همین وقتی رتبهی سایت را چک میکنید، به جستجوی شخصی خودتان اعتماد نکنید؛ عدد میانگین گزارش Performance سرچ کنسول دقیقتر است.
سیستم رتبهبندی گوگل چیست؟
سیستم رتبهبندی گوگل یک الگوریتم واحد نیست؛ مجموعهای از دهها سیستم است که هر کدام بخشی از کیفیت را میسنجند و دائماً در پسزمینه کار میکنند. گوگل در راهنمای رسمی خود سیستمهای مهم را معرفی کرده است.
سیستمهای مهم رتبهبندی گوگل که باید بشناسید
- سیستمهای تحلیل لینک و PageRank: رابطهی صفحهها از طریق لینک را میسنجند.
- سیستمهای تشخیص اسپم: محتوا و رفتارهای خلاف قوانین گوگل را کنار میگذارند.
- سیستمهای محتوای مفید و اصیل: محتوای ساختهشده برای انسان را بالاتر از محتوای ساختهشده برای موتور جستجو میبرند.
- سیستم تازگی (Freshness): برای جستجوهای خبری، محتوای جدید را در اولویت میگذارد.
- سیستم رتبهبندی پاراگراف (Passage): بخش خاصی از یک صفحهی طولانی را برای جواب یک سؤال تشخیص میدهد.
برای جزئیات هر سیستم، مقالهی الگوریتمهای گوگل را بخوانید.
مهمترین سیگنالهای رتبهبندی گوگل؛ ارتباط، کیفیت، لینک و تجربه کاربری
اگر بخواهیم خلاصه بگوییم گوگل چگونه کار میکند تا رتبه بدهد، همهی این سیستمها در نهایت چهار چیز را میسنجند:
- ارتباط: آیا صفحه به نیت جستجو جواب میدهد؟
- کیفیت و اعتبار: آیا نویسنده و سایت در این موضوع تجربه و تخصص دارند (همان E-E-A-T)؟
- لینک: آیا سایتهای معتبر دیگر به این صفحه ارجاع دادهاند؟
- تجربه کاربری: آیا صفحه روی موبایل سریع و راحت باز میشود؟
بیشتر کارهای سئو در عمل تقویت یکی از همین چهار سیگنال است.
هوش مصنوعی نحوه کار گوگل را چطور تغییر داده است؟
هوش مصنوعی مرحلهی آخر کار گوگل را تغییر داده است، گوگل حالا برای بعضی جستجوها بهجای فهرست لینک، خودش یک جواب خلاصه (AI Overview) بالای نتایج میسازد.
با این حال، پایهی اینکه گوگل چگونه کار میکند عوض نشده است: خزش و ایندکس مثل قبل انجام میشوند و این خلاصهها هم از همان صفحههای ایندکسشده ساخته میشوند.
اثرش روی ترافیک واقعی است. Seer Interactive گزارش کرده نرخ کلیک ارگانیک در جستجوهایی که AI Overview دارند، از ۱٫۷۶ درصد در ژوئن ۲۰۲۴ به ۰٫۶۱ درصد در سپتامبر ۲۰۲۵ رسیده است.
برداشت من این است که هدف سئو از «رتبهی یک» به «منبع جواب بودن» تغییر کرده است. صفحهای که جواب مستقیم، کوتاه و قابل نقل دارد و نویسندهاش معتبر است، شانس بیشتری دارد در خلاصهی هوش مصنوعی نقل شود.
اگر تازه شروع کردهاید، آموزش سئو رایگان دی ام روم این مبانی را از صفر توضیح داده است.
۴ باور غلط درباره نحوه کار گوگل
بیشتر تصمیمهای اشتباه در سئو از یک باور غلط دربارهی نحوه کار گوگل شروع میشوند. این چهار مورد را بیشتر از همه میشنوم:
آیا میشود با پول دادن به گوگل رتبه بهتر گرفت؟
نه. گوگل برای رتبهی ارگانیک یا حتی خزش بیشتر هیچ پولی نمیگیرد و به همهی سایتها ابزار یکسان میدهد. هر کسی که «رتبهی تضمینی گوگل» میفروشد، یا از روشهای پرریسک استفاده میکند یا واقعیت را نمیگوید.
تبلیغات گوگل ادز روی رتبه ارگانیک اثر دارد؟
نه. تبلیغات و نتایج ارگانیک دو سیستم جدا هستند و خرید تبلیغ رتبهی ارگانیک را بالا نمیبرد. البته دادهی کمپینهای ادز برای پیدا کردن کلمات کلیدی پرفروش و استفاده از آنها در سئو بسیار مفید است.
آیا تکرار کلمه کلیدی هنوز جواب میدهد؟
نه. تکرار بیدلیل کلمه کلیدی (Keyword Stuffing) طبق قوانین اسپم گوگل تخلف است. سیستمهایی مثل BERT معنی را میفهمند؛ پس کلمه کلیدی را یک بار در جای درست بیاورید و بقیهی متن را صرف جواب دادن کنید.
آیا پاندا و پنگوئن هنوز الگوریتمهای جداگانهاند؟
نه. گوگل پاندا (کیفیت محتوا) را در ۲۰۱۵ و پنگوئن (لینک اسپم) را در ۲۰۱۶ وارد سیستمهای رتبهبندی اصلی کرده و حالا آنها را جزو سیستمهای بازنشسته میداند. یعنی دیگر «آپدیت پاندا» جداگانهای نمیآید؛ اصولشان همیشه و بهطور دائم اعمال میشود.
اگر افت رتبه دارید و دلیلش را نمیدانید، مشاوره سئو تخصصی معمولاً سریعتر از حدس زدن به جواب میرسد.
سخن آخر
خلاصهی اینکه گوگل چگونه کار میکند: پیدا کردن صفحه، فهمیدن و ذخیرهی آن، و انتخاب بهترین جواب برای هر جستجو.
اگر میخواهید این سه مرحله را عمیق و با تمرین روی سایت واقعی یاد بگیرید، دوره جامع آموزش سئو برای همین ساخته شده است.
و اگر زمان اجرای آن را ندارید، خدمات سئو سایت حرفه ای این کار را از بررسی فنی تا رتبه گرفتن انجام میدهد. همهی مسیرهای یادگیری را هم میتوانید در آکادمی سئو دی ام روم ببینید.
سوالات متداول
ایندکس شدن صفحه جدید در گوگل چقدر طول میکشد؟
از چند روز تا چند هفته. گوگل در راهنمای رسمی خود گفته برای بیشتر سایتها، دیده شدن صفحهی جدید دستکم چند روز طول میکشد و بهجز سایتهای خبری نباید انتظار خزش در همان روز را داشت. لینک داخلی از صفحههای پربازدید و ثبت در نقشه سایت این زمان را کوتاهتر میکند.
چطور بفهمم صفحهام در گوگل ایندکس شده است؟
دقیقترین راه، ابزار URL Inspection در سرچ کنسول است: آدرس صفحه را وارد کنید تا وضعیت ایندکس و دلیل احتمالی ایندکس نشدن را ببینید. جستجوی site:آدرسصفحه در گوگل هم یک بررسی سریع است، اما همیشه دقیق نیست.
گوگل هر چند وقت یک بار سایت را خزش میکند؟
زمانبندی ثابتی وجود ندارد. گوگل صفحههای پربازدید و صفحههایی را که زیاد بهروز میشوند بیشتر خزش میکند. صفحهی اصلی یک سایت خبری ممکن است چند بار در روز خزش شود و صفحهی قدیمی یک وبلاگ کوچک هر چند هفته یک بار. نمودار دقیق سایت خودتان در گزارش Crawl Stats سرچ کنسول است.
گوگل چند صفحه را ایندکس کرده است؟
گزارش Pages در سرچ کنسول تعداد دقیق صفحههای ایندکسشده و دلیل ایندکس نشدن بقیه را نشان میدهد. اگر این عدد خیلی کمتر از تعداد صفحههای مهم سایت است، اول کیفیت و لینکدهی داخلی را بررسی کنید.
منابع
