چطور داده های بازخوردی (فیدبک) کاربران در سراسر دنیا نتایج گوگل را بهبود می بخشند

محتوای زیر ترجمه مستقیم از منبع روابط عمومی سرچ گوگل است

هر جستجوی که در گوگل انجام میدهید یکی از میلیاردها جستجویی است که ما در روز دریافت میکنیم. سیستم های ما در کمتر از نیم ثانیه، میلیاردها صفحه موجود در وب را بررسی میکنند تا مرتبط ترین و کمک کننده ترین نتایج را در دسترس شما قرار دهند.

به دلیل اینکه نیاز به اطلاعات در مردم مدام در حال تغییر است، ما نیز برای پاسخگویی به این نیاز ها دائما الگوریتم هایمان را ارتقا میدهیم. در حقیقت سالانه هزاران بار. و ما همیشه در تلاش برای پیدا کردن روش های جدید هستیم تا نتایج کمک کننده تری را ارائه دهیم، چه درمورد یک قابلیت جدید باشد و یا توانایی درک یک زبان های متفاوت در موتور جستجو.

اصلاحاتی که ما انجام میدهیم، طی پروسه های ارزیابی بررسی میشوند به همین دلیل است که مردم سراسر دنیا گوگل را یک ابزار کاربردی برای جستجو میدانند. چند روشی که موجب بهتر شدن سرچ گوگل از طریق نگرش ها و بازخوردهای مردم (فید بک) سراسر دنیا میشود:

تیم تحقیقاتی موتور جستجوی گوگل

تغییراتی که ما در سرچ انجام میدهیم به این هدف است که مردم بتوانند براحتی اطلاعات کاردبری موردنظرشان را پیدا کنند، اما با توجه به علایق افراد، زبان مورد استفاده شان، و اینکه در کجای جهان زندگی میکنند، نیاز به اطلاعات متفاوت است. ماموریت ما این است که اطلاعات را بصورت جهانی در دسترس قرار دهیم، و برای پیگیری این هدف نسبت به تمامی کاربران مان متعهد هستیم.

در همین راستا ما یک تیم تحقیقاتی داریم که هدفش صحبت با مردم سراسر دنیا و شناسایی روش هایی برای بهبود سرچ است. ما از مردم میخواهیم که درمورد پروژه های ما به شکل های مختلف بازخورد بدهند و برای فهم نحوه دسترسی جوامع مختلف به اطلاعات آنلاین، تحقیقات میدانی انجام میدهیم.

برای مثال ما در یک بازه چندساله نیازهای منحصر بفرد و محدودیت های تکنیکال افراد را در دسترسی به اطلاعات آنلاین شناسایی کرده ایم. بنابراین ما Google Go را ساختیم، اپلیکیشنی که در موبایل های کم قدرت و اتصالات ضعیف اینترنت قابل استفاده است. در Google Go قابلیت های منحصر بفرد دیگری را نیز معرفی کرده ایم شامل یک قابلیت که به شما این امکان را میدهد که محتوای صفحه را گوش کنید، و این مورد برای افرادی که میخواهند یک زبان جدید بیاموزند و یا افرادی که حوصله خواندن متون طولانی را ندارند، بسیاری کاربردی است. قابلیت هایی مثل اینها بدون داشتن نگرش هایی از افرادی که اساسا از این قابلیت ها استفاده خواهند کرد، غیرممکن بود.

پس در این مورد درک ارتباط مستقیم نحوه و مدل استفاده مصرف کننده در قالب فیدبک های تحقیقاتی در مراحل ساخت محصول نرم افزاری بسیار اهمیت دارد.

رتبه دهندگان به کیفیت نتایج جستجوی گوگل – Search Quality Raters

بخش کلیدی پروسه ارزیابی ما، بازخورد گرفتن از کاربران روزانه است که ببینیم آیا سیستم رتبه بندی و اصلاحات ارائه شده کارکرد خوبی دارند یا خیر. اما منظورمان از “کارکرد خوب” چیست؟ ما یک راهنمای رتبه دهی را در دسترس عموم قرار داده ایم و در آن همه چیز را درباره اینکه چگونه سیستم های ما محتوای خوب را در صفحات اول قرار میدهند، توضیح داده ایم. این راهنما چیزی بالغ بر ۱۶۰ صفحه است، ولی اگر بخواهیم آنرا به یک جمله خلاصه کنیم میگوییم، سرچ به منظور نشان دادن مرتبط ترین نتایج از منابع معتمد و در دسترس، طراحی شده است.

لینک فایل PDF راهنمای رتبه دهی گوگل برای ارزیابان انسان کیفیت نتایج جستجو

سیستم ما از سیگنال های موجود در وب نیز استفاده میکند – مثلا کلماتی که سرچ میشوند و در صفحات وبسایت شما نیز وجود دارند، یا اینکه صفحات شما چگونه در فضای وب به یکدیگر مرتبط هستند – تا ببینیم چه اطلاعاتی به کلمات کلیدی های شما مرتبط هستند و آیا قابل اعتماد هستند یا خیر. اما عقایدی مثل مرتبط بودن و قابل اعتماد بودن قضاوت های انسانی هستند، در حقیقت برای فهم دقیق اینها ما نگرش های افراد (فیدبک)  را جمع آوری میکنیم.

برای انجام این کار، ما گروهی با بیش از ۱۰۰۰۰ عضور از سراسر دنیا داریم که آنها را “رتبه دهندگان کیفیت سرچ” می نامیم. رتبه دهندگان به ما کمک میکنند که ببینیم مردم نتایج ما را چگونه تجربه میکنند. آنها رتبه هایشان را بر مبنای راهنماهایی که ما ارائه داده ایم، مهیا میکنند و با استفاده از بهترین قضاوت هایشان، کاربران واقعی و نیاز به اطلاعات در آنهارا بازگو میکنند تا رتبه ها را مشخص کنند. قبل از ارائه رتبه بندی ها بر روی این افراد مطالعاتی انجام میشود و آزمون هایی از آنها گرفته میشود.

رتبه بندی ها چگونه کار میکنند

نحوه عملکرد کار یک رتبه دهنده: ما تعدادی کلمه کلیدی در نظر میگیریم ( حدودا چندصدتا). این دسته از کلمات کلیدی به گروهی از رتبه دهندگان داده میشود، و دو نوع از صفحات نتایج مرتبط با این جستجوها را به آن ها نشان میدهیم. دسته ای از نتایج برای نسخه اخیر گوگل است و دسته دیگر اصلاحاتی که اعمال کرده ایم .

رتبه دهندگان تمام صفحات موجود در لیست نتایج را بررسی میکنند و آنها را در مقایسه با کلمات کلیدی و بر مبنای راهنمای رتبه دهندگان، ارزیابی میکنند. آنها بررسی میکنند که ببینند آیا این صفحات نیاز به اطلاعات را بر مبنای کلماتی که سرچ شده اند، برآورده میکنند یا خیر و چیزهایی مثل اعتبار و قابل اعتماد بودن را نیز مورد بررسی قرار میدهند. برای ارزیابی چیزهایی مثل تخصص، اعتبار و قابل اعتماد بودن – که گاها از آنها بعنوان E-A-T نیز یاد میشود – از رتبه دهندگان خواسته میشود تا تحقیقات معتبری را در رابطه با منابع انجام بدهند.

چیزی که در عمل انجام میشود: فکر کنید عبارتی که قرار است سرچ بشود “دستور پخت کیک هویج” است. نتایج ممکن است شامل مقالاتی از سایت های دارای دستور پخت، مجلات مرتبط با غذا، برندهای محصولات غذایی و احتمالا بلاگ ها باشد. برای تشخیص اینکه آیا این صفحات نیاز به اطلاعات را برآورده میکنند یا خیر، یک رتبه دهنده باید ببیند هر یک از دستورالعمل های پخت چقدر برای فهمیدن آسان هستند، این دستور از نظر تصویری و عکس ها چقدر کمک کننده است، و آیا ویژگی های کاربردی دیگری مثل نوشتن لیست خرید و یا ماشین حسابی برای تغییر مقادیر در سایت وجود دارد.

برای فهم اینکه نویسنده در رابطه با موضوع مورد نظر تخصص دارد یا خیر، رتبه دهنده تحقیقات آنلاینی را انجام میدهد که ببیند آیا نویسنده گواهی نامه آشپزی دارد؟ در وبسایت های تغذیه ای دیگری پروفایل دارد و یا به عنوان منبع ذکر شده است؟ و آیا محتوای خوب دیگری دارد که منجر به نظرات مثبت شده باشد و یا در بین وبسایت هایی که رسپی(دستور پخت) ارائه میدهند رتبه گرفته باشد؟ اساسا رتبه دهندگان بررسی های عمیقی را انجام میدهند تا به سوال هایی از این دست پاسخ بدهند: آیا این صفحه قابل اعتماد است و یا سایت و نویسنده اش محبوبیت خوبی دارند؟

ارزیابی رتبه دهندگان مستقیما برروی نتایج رتبه بندی سرچ گوگل استفاده نمیشوند

وقتی رتبه دهندگان این تحقیقات را ارائه دادند، یک رتبه کیفی هم برای هر صفحه در نظر میگیرند. لازم به ذکر است که این رتبه مستقیما بر روی رتبه صفحه یا سایت در نتایج جستجو تاثیر ندارد. هیچ کس در رابطه با اینکه منبع “معتبر” و “قابل اعتماد” است تصمیم نمیگیرد. بطور خلاصه این رتبه هایی که رتبه دهنگان ارائه میدهند به منظور تعیین رتبه آنها در صفحه نتایج نیست. حقیقت این است که این یک کار غیرممکن و سیگنال ضعیفی برای استفاده خواهد بود. با وجود صدها و میلیاردها صفحه ای که مدام در حال تغییر هستند، ارزیابی تک تک آنها توسط یک انسان غیر ممکن خواهد بود.

در عوض رتبه ها داده هایی هستند که وقتی بطور کلی آنها را در نظر میگیریم به ما میگویند که سیستم های ما چقدر خوب کار میکنند تا محتوای خوبی را ارائه دهند که مطابق با ارزیابی های افراد– در کشور و سراسر دنیا – باشد.

تنها در سال گذشته به همرا رتبه دهندگان کیفی سرچ ها، بیش از ۳۸۳۶۰۵ تست کیفیت و ۶۲۹۳۷ آزمایش در امتداد هم انجام دادیم تا کیفیت نتایج را اندازه گیری کنیم و از این طریق توانستیم بیش از ۳۶۰۰ اصلاحات را در الگوریتم های سرچ مان اعمال کنیم.

روند تست محصول

تحقیقات و بازخورد رتبه دهندگان تنها بازخوردهایی نیستند که به هنگام اعمال اصلاحات در نظر میگیریم. همچنین لازم است بدانیم که این ویژگی ها وقتی که واقعا وارد سرچ و زندگی واقعی افراد میشوند چگونه کار خواهند کرد. برای اطمینان از دریافت این نگرش ها، مشارکت افراد با این قابلیت ها را در آزمایشات زنده تست میکنیم.

این آزمایشات “زنده” نامیده میشوند به این علت که در آنها گروه کوچکی از افراد که بطور تصادفی انتخاب شده اند و از آخرین ورژن سرچ(الگوریتم گوگل) استفاده میکنند، هدف قرار میگیرند. برای آزمودن یک تغییر، یک قابلیت را برای تعداد کمی سرچ هایی که دریافت میکنیم راه اندازی کرده و بعد معیارهای مختلفی را برای اندازه گیری تاثیر آن بررسی میکنیم.

آیا مردم بر روی قابلیت جدید کلیک کردند؟ آیا اکثر افراد آنرا رد کردند؟ آیا سرعت لود صفحه را کاهش داد؟ این نگرش ها به ما کمک میکنند که بفهمیم این قابلیت و یا تغییر جدید کمک کننده است و آیا مردم واقعا از آن استفاده میکنند.

در سال ۲۰۱۹ ما بیش از ۱۷۰۰۰ آزمایش زنده اجرا کردیم تا قابلیت ها و اصلاحات جدید در سرچ را بیازماییم. اگر آنرا با قابلیت هایی که راه اندازی شدند مقایسه کنید ( چیزی حدود ۳۶۰۰، به یاد دارید؟) متوجه خواهید شد که فقط بهترین ها و پر کاربردترین اصلاحات در سرچ ماندگار شدند.