بر اساس مطالعهٔ Ahrefs دربارهٔ تغییرات پنج محصول هوش مصنوعی مختلف در طول ۲۰ روز، حدود سه‌چهارم افت استنادهای هوش مصنوعی موقتی بوده است.

وقتی نتایج تحلیل استنادهای هوش مصنوعی را با مشتری یا مدیرتان در میان می‌گذارید، باید بدانید که یک افت ممکن است در نگاه اول آن‌طور که به نظر می‌رسد نباشد. سایت‌هایی که در این مطالعه در پاسخ‌ها استناد شده بودند و بعد از آن پاسخ‌ها حذف شدند، احتمال بیشتری داشت که دوباره استناد شوند تا اینکه برای همیشه غایب بمانند. اگر در این فاصله کسی صفحه را بازنویسی کرده باشد، ممکن است آن بازنویسی اعتبار استنادی را به دست آورد که خودش آن را به دست نیاورده است.

Ahrefs حدود ۳۷٬۵۰۰ استناد روز اول را که AI Mode و AI Overviews گوگل و همچنین ChatGPT، Gemini و Copilot ساخته بودند بررسی کرد. این مطالعه تنها دیدگاه یک سازمان را بر پایهٔ مجموعه‌سؤال‌های خودش در بر می‌گرفت که هر ابزار روزانه به مدت ۲۰ روز به آن‌ها پاسخ داده بود.

یافته‌های این مطالعه به چهار مورد اشاره می‌کند که باید پیش از ویرایش یک صفحهٔ وب بر اساس ناپدید شدن یک استناد بررسی شوند.

مطالعه چه چیزی را ردیابی کرد

این مطالعه با ردیابی همان استنادها در روزهای متوالی توانست ببیند پس از ناپدید شدن یک سایت از یک پاسخ چه اتفاقی می‌تواند بیفتد.

این نتایج را Mateusz Makosiewicz (ماتئوش ماکوشویچ)، آموزش‌دهندهٔ SEO و بازاریابی در Ahrefs، مستند کرده است. همکار او Xibeijia Guan (شی‌بی‌جیا گوان) همهٔ وب‌سایت‌هایی را که در روز اول استناد شده بودند جمع‌آوری کرد و سپس هر ارجاع را تا روز بیستم دنبال کرد.

تا روز دوم، حدود نیمی از این ارجاع‌ها از AI Overviews حذف شده بودند. در هر یک از ابزارهای دیگر، تعداد بیشتری حذف شده بودند. بیشتر این ارجاع‌ها پیش از پایان مطالعه بازگشتند.

Ahrefs دریافت که در مجموع پنج ابزار، حدود نیمی از استنادهایی که حذف شده بودند ظرف سه روز بازگشتند.

نمودارهای میله‌ای انباشته نشان می‌دهند استنادهای حذف‌شده در AI Overviews، ChatGPT، AI Mode، Copilot و Gemini چه زمانی بازگشتند.
نمودارهای میله‌ای انباشته نشان می‌دهند استنادهای حذف‌شده در AI Overviews، ChatGPT، AI Mode، Copilot و Gemini چه زمانی بازگشتند.
برای مشاهدهٔ جزئیات، تصویر را باز کنید

داده‌های جمع‌آوری‌شده در این مطالعه تعداد وب‌سایت‌ها را نشان می‌دهد؛ بنابراین وقتی یک وب‌سایت بازمی‌گردد، این مطالعه نمی‌تواند تعیین کند که آیا همان صفحهٔ دقیق هم بازگشته است یا نه.

شاخص دیگری هم اندازه‌گیری شد (در ردیابی استنادهای خود Brand Radar) که الگویی تا حدی قابل مقایسه با نرخ بازگشت کمتر نشان داد. حدود دو سوم از همهٔ استنادهایی که در آنجا از دید خارج شده بودند، در نهایت بازگشتند. Ahrefs فروشندهٔ Brand Radar است و این گزارش بخشی دربارهٔ استفاده از آن دارد.

این یافته‌ها چگونه با یافته‌های پیشین جور درمی‌آید

پژوهش‌های پیشینی که دربارهٔ آن‌ها صحبت کرده‌ام تغییرات پاسخ‌های هوش مصنوعی را در اجراهای متعدد یک پرسش نشان می‌دادند، و این مطالعهٔ جدید چیزی را اضافه می‌کند که در روزهای مختلف اتفاق می‌افتد.

در ژانویه دربارهٔ یافته‌های SparkToro گزارش دادم؛ آن‌ها کشف کرده بودند که ChatGPT و هوش مصنوعی گوگل در جست‌وجو، در اجراهای مکرر یک پرسش، کمتر از ۱٪ مواقع همان فهرست برندها را ارائه می‌دهند. آن‌ها همچنین دریافتند که بسامد ظاهر شدن یک برند در اجراهای متعدد عموماً پایدارتر از رتبهٔ مشخص آن برند در آن فهرست‌ها بود.

نویسندگان مطالعهٔ جدید توصیه می‌کنند شمارش شود که یک سایت در چند روز از هفت روز گذشته استناد شده است. این یک شمارش بسامدی بر حسب روز برای سایت‌های استنادشده است، در حالی که پژوهش ژانویه شمارش بسامدی بر حسب اجرا را برای نام برندها ترجیح می‌داد.

بررسی اول: آیا ابزار به کسی استناد کرده بود؟

وقتی در Gemini یا Copilot افت رخ می‌داد، اغلب معنایش این بود که اصلاً کسی در پاسخ استناد نشده بود.

در داده‌های این مطالعه، Gemini حدود ۶۴٪ مواقع پاسخ‌هایی بدون استناد داشت، در حالی که Copilot حدود ۵۳٪ مواقع پاسخ‌های بدون استناد نشان می‌داد. وقتی پاسخی استناد ندارد، سایت شما هنگام ردیابی نتایج به‌صورت یک افت ظاهر می‌شود.

بسیاری از بازگشت‌ها در این دو ابزار به این معنا بود که ابزار پس از پاسخی بدون استناد، دوباره به منابع استناد کرده است. با کنار گذاشتن پاسخ‌های خالی، Gemini و Copilot بسیار شبیه AI Mode و ChatGPT به نظر می‌رسیدند.

AI Overviews، AI Mode و ChatGPT تقریباً همیشه به منابع استناد می‌کردند. کمتر از ۱٪ پاسخ‌هایشان استناد نداشت و Makosiewicz نوشت که از دست رفتن یک استناد در این ابزارها تقریباً همیشه یعنی سایت دیگری جای آن را گرفته است.

نخستین راه برای بررسی یک استناد ازدست‌رفته، نگاه کردن به خود پاسخ است. اگر پاسخ هیچ لینکی ندارد، اطلاعاتی دربارهٔ آن ابزار هوش مصنوعی در آن روز به دست می‌آورید؛ اما اگر پاسخ به یک رقیب لینک می‌دهد، سایتی را یافته‌اید که به جای شما استناد شده است.

بر اساس این گزارش، در Gemini و Copilot باید دو شاخص را پیگیری کنید: تعداد دفعاتی که سایت شما استناد می‌شود و همچنین بسامد ارجاع به منبعی دیگر به جای شما.

بررسی دوم: استناد چقدر دوام آورده بود؟

استنادهایی که پیش از ناپدید شدن مدت بیشتری فعال مانده بودند، احتمال بیشتری داشت که بازگردند.

این مطالعه همهٔ استنادها را در سه ابزار (AI Overviews، AI Mode و ChatGPT) بر اساس مدت زمانی که تا نخستین ناپدید شدن دوام آورده بودند رتبه‌بندی کرد.

برای استنادهایی با عمر کوتاه (یک روز)، ۳۴٪ تا ۴۱٪ از استنادها در طول دورهٔ مطالعه بازنگشتند.

و برای استنادهایی که هشت تا ۱۴ روز دوام آورده بودند، این درصد برابر یا کمتر از ۴٪ بود.

این یافته نشان می‌دهد که پیشینهٔ یک استناد ممکن است مهم‌تر از جایگاه آن در یک روز مشخص باشد. سایتی که یک بار ارجاع گرفته و بعد ناپدید شده، وضعیتی کاملاً متفاوت با سایتی دارد که ۱۰ روز جایگاه خود را حفظ کرده و دیروز ناپدید شده است.

تحلیل گزارش‌های بررسی گاه‌به‌گاه نشان می‌دهد اگر سایتی در یک تاریخ مشخص استناد شده باشد (بنابراین هر سایتی با تنها یک ظهور، مثل هر سایت دیگری با ظهورهای پیوسته به نظر می‌رسد). استفاده از شمارش هفت‌روزه به تیم اجازه می‌دهد تفاوت بگذارد. این شمارش برای هر پرسشی که پرسیده می‌شود، تعداد روزهایی از هفت روز گذشته را می‌شمارد که سایت به‌عنوان منبع ارجاع داده شده است. این نشان می‌دهد سایت هر چند وقت یک بار ظاهر می‌شود. اینکه یک استناد چقدر دوام آورده، پرسشی جداگانه است.

این فرایند همچنین به تیم امکان می‌دهد به‌طور مستمر ارزیابی کند که آیا یک ابزار هوش مصنوعی برای پاسخ دادن به آن پرسش‌ها به‌طور پیوسته به سایت مشخصی تکیه می‌کند یا نه.

به همین شکل می‌توان آن را برای استنادهای جدید هم به کار برد. Makosiewicz (ماتئوش ماکوشویچ) برای ارزیابی سودمندی یک استناد جدید به‌عنوان یک دستاورد پایدار پیشنهاد می‌کند چند روز صبر کنید و بعد اعلام پیروزی کنید. قاعدهٔ کلی او این است که یک استناد غایب را دلیلی برای تغییر صفحه ندانید، اما اگر استناد پس از دو یا سه هفته هنوز غایب بود، صفحه را بررسی کنید.

بررسی سوم: آیا نام برند هنوز آمده است؟

حتی پس از ناپدید شدن لینک به سایت یک برند، ممکن است نام آن برند هنوز در پاسخ آمده باشد.

استناد لینکی است که خواننده می‌تواند دنبال کند. اشاره، آمدن نام برند در متن پاسخ است، با یا بدون لینک.

در هر یک از ابزارهای بررسی‌شده، حدود ۵۰٪ تا ۷۰٪ از همهٔ سایت‌های استنادشده تنها در یک روز ظاهر شدند، در حالی که این نسبت برای همهٔ برندهای نام‌برده‌شده حدود یک‌پنجم بود.

در این صورت، گزارش شما می‌تواند یک استناد ازدست‌رفته را نشان دهد، در حالی که پاسخ هنوز نام شرکت را می‌آورد. لینک همچنان غایب است و همچنان به‌عنوان استناد ازدست‌رفته شمرده می‌شود، و نگاه کردن به پاسخ به شما می‌گوید کدام شاخص تغییر کرده است.

همچنین ابزارهای هوش مصنوعی از پاسخی به پاسخ دیگر، نسخه‌های مختلف (بلندتر یا کوتاه‌تر) یک نام برند را به کار می‌برند. و اشاره‌ای که به نظر می‌رسد از بین رفته، ممکن است همان شرکت باشد که با نامی دیگر آمده است؛ بنابراین این گزارش توصیه می‌کند پیش از کسر کردن آن از مجموع اشاره‌ها، این موضوع را بررسی کنید.

از آنجا که داده‌ها نشان دادند نام برندها تقریباً به اندازهٔ استنادها جابه‌جا نمی‌شوند، Makosiewicz پیشنهاد می‌کند که اشاره‌ها ممکن است شاخص بهتری برای پیگیری باشند.

بررسی چهارم: آیا صفحه برای آن پرسش رتبه دارد؟

در AI Overviews و AI Mode، صفحه‌هایی که برای همان پرسش در جست‌وجوی گوگل هم رتبه داشتند، استنادهایشان را بیشتر حفظ کردند.

در این بخش از مطالعه، نویسندگان صفحه‌ها را بررسی کردند. آن‌ها صفحه‌های استنادشده‌ای را که جایی در نتایج گوگل برای یک پرسش ظاهر می‌شدند با صفحه‌هایی مقایسه کردند که هیچ‌جا در نتایج گوگل برای همان پرسش ظاهر نمی‌شدند. در AI Overviews و AI Mode، صفحه‌های استنادشده‌ای که رتبه داشتند دوام استناد بیشتری داشتند و بیشتر اوقات یک هفته یا بیشتر دوام می‌آوردند؛ با این حال، این تفاوت در ChatGPT کمتر بود.

بر اساس این گزارش، هرچند ظاهر شدن در نتایج جست‌وجوی گوگل به‌طور کلی بیش از جایگاه دقیق صفحه در فهرست نتایج با استنادهای بادوام‌تر همبستگی داشت، این یافته بر بررسی ۲۳۰ پرسش استوار بود. این مقایسه همبستگی میان رتبه داشتن صفحه‌ها در جست‌وجوی گوگل برای هر پرسش و مدت دوام استنادها به این صفحه‌ها را نشان داد. با این حال، رتبه داشتن شرط نبود. بیشتر صفحه‌هایی که AI Mode و ChatGPT به آن‌ها استناد می‌کردند، در گوگل برای پرسشی که در آن استناد شده بودند رتبه نداشتند.

وقتی یک استناد غایب می‌ماند، نویسندگان پیشنهاد می‌کنند دو مورد بررسی شود: عملکرد صفحه در جست‌وجوی گوگل برای آن پرسش و اینکه صفحه چقدر خوب به آن پرسش پاسخ می‌دهد.

در سپتامبر، من مورد مرتبطی را برای بررسی هنگام افت استنادها در حالی که رتبه‌ها ثابت می‌مانند پیشنهاد کردم. آن مورد بررسی صفحه‌هایی است که به جای صفحه‌های اصلی استناد شده‌اند.

روش‌شناسی این بررسی همچنین به کار تیم‌های SEO مربوط می‌شود. وقتی صفحه‌ای رتبهٔ گوگل خود را برای یک پرسش مشخص از دست می‌دهد و سپس از استنادهای AI Overviews هم خارج می‌شود، بررسی اینکه چرا صفحه رتبه‌اش را از دست داده، نقطهٔ شروع منطقی برای تحقیق است.

بازگشت، اثبات کارآمدی ویرایش نیست

بیشتر استنادهایی که ناپدید شدند در طول مطالعه بازگشتند، بنابراین یک بازگشت به‌تنهایی ممکن است شواهد محکمی برای این نباشد که تغییر صفحه باعث آن شده است.

تیمی که پس از از دست دادن یک استناد صفحه را ویرایش می‌کند و بعد می‌بیند استناد بازگشته، دو توضیح برای آن دارد. وقتی تنها یک بازگشت برای پشتیبانی از آن وجود دارد، نمی‌توان ویرایش را موفق دانست (ممکن است به دلیل دیگری بوده باشد).

Makosiewicz نوشت: «Don’t credit a page edit for a single comeback.» (بازگشت یک‌بارهٔ استناد را به حساب ویرایش صفحه نگذارید.)

در واقع، او می‌خواهد ما به افزایش تعداد دفعاتی که ارجاع به یک سایت ظاهر می‌شود در بازهٔ زمانی طولانی‌تر نگاه کنیم.

علاوه بر این، اگر استناد دقیقاً روز بعد از ویرایش صفحه ناپدید شود، شواهد ضعیفی خواهد بود که ویرایش به استناد آسیب زده است، چون در این مطالعه نیمی یا بیشتر از استنادها تا روز بعد ناپدید شدند.

چرا این موضوع اهمیت دارد

پیش از تغییر صفحه‌ای که پشت یک استناد ازدست‌رفته است، فرد می‌تواند چند چیز را بررسی کند. نخست، می‌تواند در چند روز آینده دوباره نگاه کند تا ببیند آیا استناد هنوز غایب است. دوم، می‌تواند خود پاسخ را بخواند.

وقتی تیم داخلی گزارش می‌دهد که یک سایت در چند روز استناد شده، مدیریت از شمارشی مثل «پنج روز از هفت روز گذشته» بسیار بیشتر یاد می‌گیرد تا از دریافت صرف یک بله یا خیر از یک بررسی.

یک آژانس در تماس با مشتری ترتیبی برای دنبال کردن دارد: بررسی متن پاسخ، پیشینهٔ استناد و رتبهٔ صفحه، پیش از ارائهٔ پیشنهادی برای محتوای جدید.

یک تیم محتوا دربارهٔ همبستگی در برابر علیت هشدار می‌گیرد. یک بازگشت پس از ویرایش شواهد کافی برای انجام ویرایش‌های مشابه روی صفحه‌های دیگر به شما نمی‌دهد.

پرسش‌های بی‌پاسخ

پژوهشگران ناپدید شدن استنادها را اندازه‌گیری کردند؛ آن‌ها آزمایش نکردند که آیا تغییر یک صفحه استناد ازدست‌رفته را بازمی‌گرداند یا نه.

آن‌ها فقط نخستین بار ناپدید شدن یک استناد را ردیابی کردند. داده‌های جمع‌آوری‌شده نشان نمی‌دهد که همان استنادها پس از بازگشت هر چند وقت یک بار دوباره ناپدید شدند.

پژوهشگران نوشتند که ارقامشان ممکن است کم‌برآوردی از بازگشت استنادها باشد، چون استنادهایی که در پایان مطالعه ناپدید شدند فرصت کمتری برای بازگشت نسبت به استنادهایی داشتند که اوایل مطالعه از دست رفتند. تغییرات مدل‌ها هم می‌تواند ثبات الگوهای استناد را در طول زمان تحت تأثیر قرار دهد.

نگاه به آینده

وقتی از قبل چیزی برای مراجعه داشته باشید، خواندن استناد ازدست‌رفتهٔ بعدی بسیار آسان‌تر خواهد بود. داشتن یک گزارش روزانه از اینکه به کدام سایت‌ها استناد می‌شود، مرتبط با پرسش‌هایی که بیشترین اهمیت را دارند، می‌تواند به تیم شما کمک کند شمارش داخلی خودتان از روزهای استناد را داشته باشید، پیش از آنکه مشتری یا مدیری بپرسد چرا استنادها کم شده‌اند.

وقتی استنادی پس از دو یا سه هفته هنوز غایب است، توصیهٔ این مطالعه این است که صفحه را بررسی کنید و با نحوهٔ رتبه‌گرفتن آن برای آن پرسش شروع کنید.

منابع بیشتر:

ردیاب دیدپذیری هوش مصنوعی شما بی‌صدا تحلیل‌ها و استراتژی‌تان را خراب می‌کند

۶۲٪ از توصیه‌های برند در هوش مصنوعی پس از یک پرسش خریدار ناپدید می‌شوند – داده‌های جدید

تأثیر هوش مصنوعی از اندازه‌گیری جلو می‌زند: شکاف اعتماد و انتساب پیش روی برندها