خلاصه مطلب
- GA4 ربات های شناخته شده را با تحقیقات گوگل و فهرست بین المللی ربات های IAB خودکار حذف میکند، اما نه میشود این فیلتر را خاموش کرد و نه دید چقدر حذف شده است. رباتی که خودش را مرورگر عادی جا بزند از این فیلتر رد میشود.
- ترافیک ربات با یک بازدید لو نمیرود، با یک الگو لو میرود: یک منبع یا جایگاه تبلیغ با زمان تعامل نزدیک صفر، حجم ثابت در نیمه شب، یک شبکه یا یک مدل دستگاه، و سشن هایی که بالا میروند در حالی که سفارش ها تکان نمیخورند.
- IP مشترک، VPN و بازدید صفر ثانیه ای به تنهایی مدرک نیستند. خود گوگل میگوید بازدید صفر ثانیه ای و IP تکراری اغلب از روش اندازه گیری آنالیتیکس میآید، نه از تقلب.
- اندازه مشکل را برای هر جایگاه تبلیغ و هر کمپین بسنجید، نه برای کل سایت. هزینه هر سشن واقعی و هزینه هر سفارش در هر جایگاه به شما میگوید چه چیزی را حذف کنید.
- گوگل ادز برای کلیک نامعتبری که قبل از صدور صورتحساب پیدا کند پول نمیگیرد و موارد بعدی را برمیگرداند. ستون Invalid clicks و گزارش Invalid Activity Credit هر دو را نشان میدهند.
ترافیک ربات یعنی بازدیدهایی که آدم واقعی پشتشان نیست؛ و تشخیص آن یعنی پیدا کردن همین بازدیدها در آمار سایت تا دیگر نرخ تبدیل، تعداد کاربر و هزینه تبلیغات شما را خراب نکنند. GA4 ربات های شناخته شده را خودش حذف میکند، اما رباتی را که خودش را مرورگر عادی جا میزند نمیبیند. این ربات ها با الگو لو میروند: منبعی با زمان تعامل نزدیک صفر، حجم ثابت در نیمه شب، یک شبکه یا یک مدل دستگاه، و سشن هایی که زیاد میشوند ولی سفارش ها نه. الگو را با لاگ سرور و پنل فروشگاه تایید میکنید و بعد سراغ جایی میروید که ربات از آن وارد شده است: جایگاه تبلیغ، فرم سایت یا فایروال.
ترافیک ربات (Bot traffic) هر بازدید یا درخواستی است که نرم افزار ساخته، نه آدم. بعضی ربات ها مفیدند، مثل خزنده موتورهای جست وجو. بعضی محتوا را کپی میکنند، فرم اسپم میفرستند یا روی تبلیغ کلیک میکنند. در دنیای تبلیغات به کل این فعالیت ها ترافیک نامعتبر (Invalid traffic) میگویند: هر فعالیتی که از بازدیدکننده واقعی و علاقه مند نیامده و نباید شمرده یا پولش پرداخت شود.
ترافیک ربات چیست و کدام ربات ها برای شما مشکل اند؟
ترافیک ربات از خزنده گوگل که صفحه ها را ایندکس میکند تا اسکریپتی که روی تبلیغ شما کلیک میکند همه را در بر میگیرد و فقط بخشی از آن مشکل مارکتر است. گزارش Bad Bot سال ۲۰۲۵ شرکت Imperva تخمین میزند در سال ۲۰۲۴ ترافیک خودکار برای اولین بار از ترافیک انسانی جلو زده و به ۵۱٪ کل ترافیک وب رسیده است؛ سهم ربات های مخرب به تنهایی ۳۷٪ بوده، در حالی که سال قبلش ۳۲٪ بود. بیشتر این ترافیک اصلا در آنالیتیکس شما دیده نمیشود، چون ربات ساده جاوااسکریپتی را که تگ آنالیتیکس لازم دارد اجرا نمیکند.
ربات هایی که به گزارش های شما میرسند سه دسته اند:
- خزنده های اعلام شده. موتورهای جست وجو، ابزارهای سئو و مانیتورهای آپتایم در user agent خودشان را معرفی میکنند و ابزارهای آنالیتیکس بیشترشان را فیلتر میکنند.
- اتوماسیون پنهان. اسکرپرها، ربات های چک قیمت و مرورگرهای headless که با user agent عادی صفحه را باز میکنند. سشن و بازدید صفحه را بالا میبرند و نرخ تبدیل را پایین میآورند.
- تقلب در تبلیغات. ربات، مزرعه کلیک یا جایگاه تبلیغی بد که کلیک پولی میسازد. گوگل ادز این ها را زیر عنوان کلیک نامعتبر جمع میکند: کلیک اشتباهی، ترافیک خودکار و کلیک دستی که هدفش بالا بردن هزینه شما یا درآمد ناشر است.
شورای رتبه بندی رسانه (MRC) که در آمریکا سنجش تبلیغات را ممیزی میکند، ترافیک نامعتبر را فعالیتی تعریف میکند که ترافیک مشروعی نیست که باید در شمارش بیاید و ترافیک غیرانسانی مثل خزنده و ربات را یکی از علت های اصلی آن میداند. راهنمای این شورا ترافیک نامعتبر عمومی (GIVT) را که با فهرست پیدا میشود از ترافیک نامعتبر پیچیده (SIVT) که تحلیل عمیق تری لازم دارد جدا میکند. همین تقسیم برای بررسی های خودتان هم به کار میآید: لایه فهرستی را ابزارها انجام داده اند و باقی کار، کشف الگوست.
آیا گوگل آنالیتیکس ترافیک ربات را خودکار فیلتر میکند؟
بله، ولی فقط بخشی از آن را. GA4 ترافیک ربات ها و خزنده های شناخته شده را خودکار حذف میکند و آن ها را با ترکیب تحقیقات گوگل و فهرست بین المللی ربات ها و خزنده ها که IAB نگه داری میکند تشخیص میدهد. صفحه راهنمای گوگل محدودیتش را صریح میگوید: این حذف را نمیتوانید خاموش کنید و نمیتوانید ببینید چقدر ترافیک ربات حذف شده است.
هر رباتی که در این فهرست نباشد مثل بازدید آدم شمرده میشود. فیلترهای داده GA4 هم جلویش را نمیگیرند، چون فیلتر ربات نیستند. این فیلترها سه چیز را حذف میکنند: ترافیک توسعه دهنده در حالت debug، ترافیک داخلی از IP هایی که خودتان تعریف میکنید و ترافیک هاست نیم هایی که کنار میگذارید. فیلتر بعد از فعال شدن اثر دائمی روی داده ورودی دارد و روی داده گذشته اعمال نمیشود؛ پس اول در حالت تست امتحانش کنید.
| لایه | چه چیزی را حذف میکند | چه چیزی را نمیبیند |
|---|---|---|
| حذف ربات شناخته شده در GA4 | خزنده های اعلام شده و ربات های فهرست IAB | رباتی که user agent مرورگر عادی دارد |
| فیلتر ترافیک داخلی GA4 | IP دفتر خودتان یا آژانس | هر چیزی بیرون از IP هایی که وارد کرده اید |
| فیلتر هاست نیم GA4 | داده ای که از دامنه های کنار گذاشته شده به شناسه اندازه گیری شما میرسد | رباتی که صفحه واقعی سایت را باز میکند |
| فیلتر کلیک نامعتبر گوگل ادز | کلیک نامعتبر قبل از صورتحساب، به علاوه برگشت هزینه برای موارد بعدی | ربات روی شبکه های تبلیغاتی دیگر، اینستاگرام، تلگرام و ترافیک ارگانیک |
| بررسی های خودتان (همین مقاله) | الگوی منبع، تعامل، زمان و لاگ | هیچ روشی کامل نیست؛ با شواهد تصمیم میگیرید |
یکی از دلیل های اینکه دو ابزار آنالیتیکس هیچ وقت عدد یکسان نمیدهند همین است: هر کدام با فهرست خودش فیلتر میکند. مقاله اختلاف آمار گوگل آنالیتیکس نشان میدهد چطور دو ابزار را روی صفحه ای مقایسه کنید که ربات کمتر به آن میرسد، مثل صفحه تشکر خرید، تا فرق فیلتر را از خرابی ترکینگ جدا کنید.
نشانه های ترافیک ربات در گزارش های سایت چیست؟
ربات معمولا با یک بازدید لو نمیرود؛ به صورت بخشی از ترافیک دیده میشود که شبیه مشتری های شما رفتار نمیکند. پس قدم اول همیشه شکستن ترافیک بر اساس منبع، کمپین، جایگاه تبلیغ و صفحه ورود است. دنبال بخشی بگردید که چند ردیف جدول زیر را با هم داشته باشد.
| نشانه | در گزارش چه شکلی دارد | توضیح بی خطری که باید رد کنید |
|---|---|---|
| سشن بالا رفته، سفارش نه | یک منبع در یک هفته دو برابر شده ولی فروشش ثابت مانده | کمپین آگاهی از برند با مخاطب سرد |
| تعامل نزدیک صفر | میانگین زمان تعامل یک منبع یا جایگاه نزدیک ۰ ثانیه است | صفحه کند و کاربری که قبل از لود تگ میرود |
| حجم ثابت در شب | هر ساعت همان تعداد سشن، حتی ساعت ۳ صبح | مخاطب واقعی در منطقه زمانی دیگر |
| یک شبکه یا یک شهر | تمرکز سشن ها روی یک شرکت هاستینگ یا یک شهر بیرون از بازار شما | کاربر VPN؛ IP مشترک اپراتور موبایل |
| یک مدل دستگاه | رزولوشن صفحه، نسخه مرورگر یکسان یا user agent قدیمی | گوشی پرفروش در بازار شما |
| هاست نیم ناشناس | بازدید صفحه روی دامنه ای که سایت شما نیست | سایت تست یا زیردامنه واقعی خودتان |
| تبدیل بی ارزش | ثبت نام یا لید با اسم الکی، ایمیل یکبار مصرف یا شماره تکراری | فرمی بدون اعتبارسنجی که کاربر واقعی هم اشتباه پرش میکند |
| سقوط نرخ تبدیل | کلیک یک کمپین بالا رفته و نرخ تبدیلش نصف شده | تغییر تارگتینگ یا صفحه فرود |
با ستون آخر محتاط باشید. خود گوگل در صفحه ترافیک نامعتبر هشدار میدهد که بازدید صفر ثانیه ای و IP تکراری اغلب از روش اندازه گیری ابزار آنالیتیکس میآید، نه از ترافیک نامعتبر، و NAT ممکن است صدها یا هزاران دستگاه را پشت یک IP عمومی قرار بدهد. در ایران هم بخش بزرگی از کاربرها با VPN وب گردی میکنند؛ پس اینکه بازدیدی از یک دیتاسنتر خارجی آمده، برای سایت ایرانی به تنهایی مدرک ضعیفی است. هر نشانه را دلیلی برای دقیق تر نگاه کردن بدانید و ترکیب سه چهار نشانه را مظنون جدی. تبدیلهای بیارزش را وقتی راحتتر جدا میکنید که هر ایونت لید پارامتر form_id داشته باشد و CRM مرحلهی بعدی همان لید را با ایونت جدای qualify_lead برگرداند؛ آن وقت ثبتنامهای فیک به شکل لیدهایی دیده میشوند که هیچوقت واجد شرایط نمیشوند. راهنمای ترکینگ رویداد سایت میگوید سایت لیدگیری چه پارامترهایی باید بفرستد.
ترافیک ربات را قدم به قدم چطور تشخیص بدهیم؟
تشخیص وقتی خوب کار میکند که یک روال کوتاه و تکرارپذیر باشد: بخش مشکوک را در آنالیتیکس پیدا کنید، در یک منبع داده دوم تاییدش کنید و بعد ردش را تا نقطه ورود بگیرید. این ترتیب کمترین وقت را میگیرد:
- ترافیک را بر اساس نقطه ورود بشکنید. سشن، زمان تعامل و تبدیل را بر اساس source / medium، کمپین و صفحه ورود برای ۲۸ روز گذشته ببینید. برای ترافیک پولی این کار فقط با پارامترهای UTM یکدست ممکن است؛ بدون آن ها ربات های پنج جایگاه تبلیغ در یک ردیف «referral» گم میشوند.
- بخش هایی را که سه نشانه یا بیشتر دارند علامت بزنید. بخش، بازه زمانی و نشانه ها را یادداشت کنید تا بعدا بفهمید راه حل جواب داده یا نه.
- ساعت به ساعت و روز به روز نگاه کنید. ترافیک واقعی ریتم روزانه مخاطب شما را دارد؛ اتوماسیون اغلب صاف یا در موج های ساعت مشخص اجرا میشود.
- در لاگ سرور تاییدش کنید. وب سرور یا CDN هر درخواست را ثبت میکند، حتی ربات هایی که تگ آنالیتیکس را اجرا نکرده اند. دنبال همان رنج IP، user agent و زمان بندی بخش مشکوک بگردید. اگر لاگ خیلی بیشتر از بازدید صفحه آنالیتیکس درخواست نشان میدهد، بیشتر این فاصله رباتی است که تگ شما اصلا ندیده.
- خزنده ای را که ادعا میکند گوگل است بررسی کنید. خیلی از ربات ها خودشان را Googlebot جا میزنند. روش گوگل این است: روی IP جست وجوی معکوس DNS بزنید، ببینید نام با googlebot.com، google.com یا googleusercontent.com تمام میشود و بعد جست وجوی مستقیم DNS روی همان نام باید همان IP را برگرداند. گوگل رنج IP خزنده هایش را هم به صورت فایل JSON منتشر میکند.
- با پول مقایسه کنید. بخش مشکوک را با سفارش ها یا لیدهای واجد شرایط در پنل خودتان تطبیق بدهید. بخشی که ۳۰٪ سشن ها و ۲٪ سفارش ها را میآورد، علتش هر چه باشد، اولویت شماست.
- ردش را تا منبع بگیرید. برای ترافیک پولی تا سطح جایگاه، ناشر یا کلمه کلیدی پایین بروید. برای ترافیک ارگانیک و مستقیم سراغ صفحه های ورود و فرم هایی بروید که ربات ها به آن ها میرسند.
راهنمای ترکینگ سایت نشان میدهد رویدادها و داده خرید را چطور تنظیم کنید که قدم ششم ممکن شود.
کلیک فیک در تبلیغات پولی را چطور بسنجیم؟
کلیک فیک را برای هر کمپین و هر جایگاه میسنجند: کلیک پولی را با سشن هایی مقایسه کنید که تعامل واقعی دارند و بعد هزینه هر سشن واقعی و هزینه هر سفارش را بین جایگاه ها کنار هم بگذارید. فیلتر خود پلتفرم تبلیغاتی لایه اول است. گوگل ادز میگوید برای کلیک نامعتبری که قبل از صورتحساب پیدا کند پول نمیگیرد و فعالیت نامعتبری را که بعد از صورتحساب پیدا کند به صورت اصلاح صورتحساب برمیگرداند. ستون Invalid clicks را میشود به جدول کمپین ها اضافه کرد و گزارش Invalid Activity Credit برگشتی ها را برای کمپین های Search و Performance Max به تفکیک کمپین و شبکه نشان میدهد. در شبکه های تبلیغات همسان (نیتیو) داخلی، تبلیغ اینستاگرام از طریق پیج ها و تبلیغ در کانال های تلگرام معمولا چنین گزارشی ندارید و تنها مرجع شما آنالیتیکس خودتان است.
دو نکته از مستندات گوگل وقتی عدد شما با پلتفرم نمیخواند مهم است. گوگل ادز کلیک نامعتبری را که فیلتر کرده از گزارش هایش حذف میکند، اما آنالیتیکس شما ممکن است همان بازدید را ثبت کرده باشد. و هیچ استاندارد صنعتی برای نرخ «عادی» ترافیک نامعتبر وجود ندارد؛ پس هر فروشنده ای که عددی را به عنوان معیار مقایسه میدهد، عدد خودش را به شما میدهد.
یک مثال با عدد
فرض کنید یک فروشگاه اینترنتی در یک ماه ۳۰ میلیون تومان روی یک شبکه تبلیغات همسان خرج میکند. شبکه ۱۲ هزار کلیک با قیمت هر کلیک ۲٬۵۰۰ تومان حساب میکند. آنالیتیکس فروشگاه ۹٬۳۰۰ سشن با UTM همین کمپین ثبت کرده که فاصله عادی است: بعضی ها قبل از لود صفحه میروند. از این سشن ها ۲٬۷۰۰ تا چهار نشانه مشترک دارند: زمان تعامل حدود صفر ثانیه، یک شبکه هاستینگ، رزولوشن صفحه یکسان و حجم ثابت بین ساعت ۲ تا ۵ صبح. کمپین ۱۳۲ سفارش آورده است.
| شاخص | همه سشن ها | بدون ۲٬۷۰۰ سشن مشکوک |
|---|---|---|
| سشن | ۹٬۳۰۰ | ۶٬۶۰۰ |
| نرخ تبدیل | ۱۳۲ ÷ ۹٬۳۰۰ = ۱٫۴۲٪ | ۱۳۲ ÷ ۶٬۶۰۰ = ۲٫۰٪ |
| هزینه هر سشن | ۳۰٬۰۰۰٬۰۰۰ ÷ ۹٬۳۰۰ = حدود ۳٬۲۲۶ تومان | ۳۰٬۰۰۰٬۰۰۰ ÷ ۶٬۶۰۰ = حدود ۴٬۵۴۵ تومان |
| هزینه هر سفارش | ۳۰٬۰۰۰٬۰۰۰ ÷ ۱۳۲ = حدود ۲۲۷٬۲۷۳ تومان | همان ۲۲۷٬۲۷۳ تومان |
هزینه هر سفارش عوض نمیشود، چون سفارش ها واقعی بوده اند. چیزی که عوض میشود تشخیص است. مشکل این کمپین صفحه فرود ضعیفی با نرخ تبدیل ۱٫۴۲٪ نیست؛ صفحه فرودی است که بازدیدکننده واقعی را با نرخ ۲٪ تبدیل میکند، به علاوه یک مشکل ربات. با شکستن کمپین به جایگاه ها تصویر روشن تر میشود. فرض کنید جایگاه C هفت و نیم میلیون تومان از بودجه را گرفته، ۲٬۱۰۰ سشن از ۲٬۷۰۰ سشن مشکوک را آورده و فقط ۶ سفارش داشته است: هزینه هر سفارش ۱٬۲۵۰٬۰۰۰ تومان. بقیه جایگاه ها با ۲۲٫۵ میلیون تومان ۱۲۶ سفارش آورده اند، یعنی هر سفارش حدود ۱۷۸٬۵۷۱ تومان. تصمیم درست حذف جایگاه C و جابه جا کردن بودجه آن است و این را از میانگین کل سایت نمیدیدید. همین منطق در فرمول ROAS و بقیه تصمیم های بودجه در زنجیره شاخص های پرفورمنس مارکتینگ هم برقرار است: بازده را برای هر جایگاه و روی داده تمیز بسنجید.
بعد از پیدا کردن ترافیک ربات، چطور فیلتر یا بلاکش کنیم؟
ترافیک ربات را همان جایی که وارد میشود ببندید و به جای پاک کردن تاریخچه، گزارش ها را صادق نگه دارید. هر منبع ربات راه حل خودش را دارد:
- جایگاه تبلیغ و ناشر: جایگاه، اپ یا سایتی را که بخش مشکوک را فرستاده کنار بگذارید و با همین شواهد از شبکه تبلیغاتی برگشت هزینه بخواهید. در گوگل ادز از فرم Click Quality در همان بازه ۶۰ روزه ای استفاده کنید که گوگل برای بررسی میپذیرد.
- فرم و ثبت نام: اعتبارسنجی سمت سرور، محدودیت تعداد ارسال و چالش برای ارسال های مشکوک بگذارید تا لید فیک هیچ وقت تبدیل حساب نشود.
- اسکرپر و هجوم درخواست: از فایروال، محدودیت تعداد درخواست یا ابزار مدیریت ربات هاست یا CDN خودتان استفاده کنید. robots.txt اینجا کمکی نمیکند: مستندات گوگل میگوید robots.txt نمیتواند رفتار خزنده را اجبار کند و فقط خزنده های معتبر از آن پیروی میکنند.
- بازدید خودتان و آژانس: IP ها را به فیلتر ترافیک داخلی GA4 اضافه کنید، در حالت تست امتحان کنید و بعد فعالش کنید.
- گزارش ها: برای دوره های گذشته که دیگر تمیز نمیشوند یادداشت بگذارید و سگمنتی بسازید که منبع مشکوک را کنار بگذارد. عدد تمیز را کنار عدد خام گزارش کنید تا کسی ماه تمیز را با ماه آلوده مقایسه نکند.
ادپیکس با ترافیک نامعتبر چه میکند؟
ادپیکس پایش تقلب را از پلن استارتر به بالا دارد، با گزارش کلیک های نامعتبر، فهرست مجاز و خروجی فهرست مسدودسازی، و در پلن پرو مسدودسازی خودکار تقلب و دفتر شواهد برای درخواست بازپرداخت را هم اضافه میکند؛ پس این بررسی ها به این بستگی ندارد که یک نفر در تیم هر ماه یادش بماند انجامشان بدهد. ادپیکس پلتفرم آنالیتیکس وب برای تیم های ایرانی است: گزارش های هم سطح گوگل آنالیتیکس (ریل تایم، منابع ورودی، رفتار کاربران، قیف تبدیل و فروش) به علاوه لایه سنجش مارکتینگ، روی زیرساخت داخل ایران و با داشبورد فارسی.
چند نکته مخصوص کار با ربات است. گزارش های ادپیکس نمونه برداری نمیشوند؛ پس بخش مشکوک کوچکی مثل یک جایگاه روی یک صفحه فرود کامل شمرده میشود، نه تخمینی. راهنمای نمونه برداری داده در GA4 نشان میدهد گزارش های اکسپلوریشن GA4 کی به تخمین میروند؛ همان جایی که به یک بخش کوچک ربات کمتر از همه میشود اعتماد کرد. گزارش منابع ورودی و کمپین های UTM در همه پلن ها هست، حتی پلن رایگان، و قدم های ۱ تا ۳ روال بالا را پوشش میدهد. ادپیکس کنار گوگل آنالیتیکس بدون تداخل کار میکند و در مدت بررسی میتوانید هر دو را روی همان صفحه ها مقایسه کنید. برای سایت ایرانی، نگه داشتن یک ابزار دوم کنار GA4 همان برنامه کم ریسکی است که در مقاله ریسک های گوگل آنالیتیکس در ایران پیشنهاد شده است. پلن استارتر ماهی ۴۹۹ هزار تومان است و سگمنت مخاطبان، گزارش های سفارشی و دسترسی API را هم کنار پایش تقلب میآورد؛ فهرست کامل را در تعرفه ادپیکس ببینید. اینکه ادپیکس هر کلیک پولی و هر برش ترافیک را چطور امتیاز میدهد و هر حکم چه اقدامی میخواهد، در راهنمای تشخیص ترافیک فیک ادپیکس آمده است. معرفی ویژگی های ادپیکس توضیح میدهد تشخیص ترافیک نامعتبر چطور کنار تست lift و MMM قرار میگیرد و راهنمای جایگزین گوگل آنالیتیکس بقیه فرق های GA4، Matomo و ادپیکس را مقایسه میکند. اگر ترجیح میدهید لاگ خام و آنالیتیکس روی سرور خودتان بماند، مقایسه ماتومو و گوگل آنالیتیکس نشان میدهد میزبانی شخصی چقدر هزینه سرور و نگهداری دارد.
همین هفته از یک کمپین پولی شروع کنید: آن را به جایگاه ها بشکنید، هر بخشی را که سه نشانه یا بیشتر دارد علامت بزنید و قبل از تمدید بودجه، هزینه هر سفارش آن را با بقیه مقایسه کنید.
محاسبهگر CPM · CPC · CTR
شاخصهای هزینه و کلیک هر کمپین. پلن رایگان ادپیکس برای هر سایت تا ۱۰۰ هزار بازدید صفحه در ماه، بدون کارت بانکی. راهاندازی کمتر از پنج دقیقه طول میکشد.
پرسشهای متداول
چطور ترافیک ربات را در گوگل آنالیتیکس پیدا کنیم؟
ترافیک را بر اساس منبع، کمپین و صفحه ورود باز کنید و دنبال بخشی بگردید که زمان تعامل نزدیک صفر، حجم ثابت در ساعت های شب، تمرکز روی یک شهر یا شبکه و هیچ سفارشی ندارد. بعد بیرون از GA4 تاییدش کنید: همان الگو را در لاگ سرور ببینید و آن بخش را با سفارش های پنل فروشگاه مقایسه کنید.
آیا GA4 ترافیک ربات را خودکار فیلتر میکند؟
بله. GA4 ربات ها و خزنده های شناخته شده را با تحقیقات گوگل و فهرست بین المللی ربات ها و خزنده ها که IAB نگه داری میکند حذف میکند. این فیلتر خاموش نمیشود و نمیتوانید ببینید چقدر حذف شده است. رباتی که خودش را مرورگر عادی نشان بدهد در این فهرست نیست و به گزارش ها میرسد.
چند درصد ترافیک سایت ها ربات است؟
گزارش Bad Bot سال ۲۰۲۵ شرکت Imperva تخمین میزند ۵۱٪ کل ترافیک وب در سال ۲۰۲۴ خودکار بوده و ۳۷٪ آن را ربات های مخرب ساخته اند. سهم سایت شما به کانال ها و نوع سایت بستگی دارد و بخش زیادی از این ترافیک اصلا به آنالیتیکس نمیرسد، چون جاوااسکریپت اجرا نمیکند.
کلیک فیک با ترافیک ربات یکی است؟
کلیک فیک بخش تبلیغاتی همین مشکل است: کلیک روی تبلیغ که از آدم واقعی و علاقه مند نیامده، چه از ربات، چه از مزرعه کلیک و چه از جایگاه تبلیغی که کاربر را به کلیک اشتباهی میاندازد. ترافیک ربات گسترده تر است و اسکرپر، خزنده و اسپم فرم را هم که به تبلیغ ربطی ندارند شامل میشود.
آیا بستن ربات ها در robots.txt جلوی ترافیک ربات را میگیرد؟
نه. مستندات گوگل میگوید robots.txt نمیتواند رفتار خزنده را اجبار کند و فقط خزنده های معتبر از آن پیروی میکنند. robots.txt برای مدیریت خزنده های خوب است؛ برای ربات مخرب فایروال، محدودیت تعداد درخواست یا ابزار مدیریت ربات روی هاست یا CDN لازم است.
منابع و روش
رفتار GA4، گوگل ادز و گوگل سرچ از صفحه های راهنمای گوگل و Search Central در فهرست منابع است که ۱۶ آبان ۱۴۰۵ (۷ نوامبر ۲۰۲۶) خوانده شده اند. سهم ترافیک ربات تخمین خود Imperva برای سال ۲۰۲۴ است. کمپین مثال و همه عددهایش فرضی است و نسبت ها حساب ساده ای است که در همین مقاله انجام شده است. اطلاعات ادپیکس از سایت adpix.io است.
- Google Analytics Help: [GA4] Known bot-traffic exclusion
- Google Analytics Help: [GA4] Data filters
- Google Ads Help: Invalid clicks: definition
- Google Ads Help: About invalid traffic
- Google Ads Help: About the Invalid Activity Credit Report
- Imperva: 2025 Imperva Bad Bot Report
- Google Search Central: Verifying Googlebot and other Google crawlers
- Google Search Central: Introduction to robots.txt
- Media Rating Council: Invalid Traffic Guidelines update, public comment announcement (2020)
این مطلب با کمک هوش مصنوعی نوشته شده و پیش از انتشار توسط تیم ادپیکس بازبینی شده است. سیاست تحریریه