Cara Kerja Google: Kisah Insinyur Peringkat Google – Cakupan & Analisis SMX West 2016

Halo teman teman. Dari waktu ke waktu di Linkarati ini kami meliput berita, tren, atau presentasi yang kami yakini layak untuk dibagikan dan diperkuat.

Hari ini saya menemukan tweet menarik dari Rae Hoffman:

jika Anda melihat ini https://t.co/JN9T1IOBjc & tidak menghabiskan waktu menontonnya & melakukan ini, semoga sukses dalam karir SEO Anda pic.twitter.com/YliYKcSFdq

— Rae Hoffman (@sugarrae) 31 Maret 2016

Tautan mengarah ke video SMX tentang Paul Haahr, Insinyur Perangkat Lunak di Google selama 14 tahun, yang memberikan presentasi di SMX West 2016 tentang cara kerja Google, dari sudut pandangnya sebagai Insinyur Peringkat Google.

Seperti yang dikatakan Danny Sullivan—yang memperkenalkan Paul—, gelar Paul tidak mencerminkan bahwa dia adalah bagian dari kepemimpinan senior dari tim peringkat Google .

Sebagai seorang SEO, ini seharusnya membuat jantung Anda berdetak kencang.

Danny mengulangi betapa beruntungnya kami (komunitas SEO) dengan kehadiran Paul. Dan seperti yang Anda lihat dari tweetnya, Rae sangat yakin bahwa ini adalah sesuatu yang perlu diperhatikan oleh setiap SEO secara mendalam, serta mencatat. Siapa saya untuk berdebat?

Saya sering menemukan bahwa menulis liputan presentasi mengajarkan saya lebih dari sekadar membuat catatan, karena saya harus melangkah lebih jauh dan menulis catatan yang dapat dipahami dan dihargai orang lain. Ini menambah lapisan pemikiran kritis lainnya.

Saya memutuskan untuk melakukan hal itu, untuk lebih memahami materi sendiri dan untuk membantu Anda mencerna presentasi lebih cepat. Menang-menang, bukan? Catatan: Rae memiliki catatan dan liputannya sendiri di sini.

Saya sarankan Anda mengikuti video, yang akan disematkan di seluruh. Di bawah ini saya juga menyematkan presentasi Paul dari Slideshare, yang akan saya klip dan posting gambar diam untuk menemani liputan saya.

Duduk, nikmati, dan beri tahu saya pendapat Anda.

Mari kita masuk ke dalamnya.

Catatan: Emanuele Vaccari menerjemahkan posting ini ke dalam bahasa Italia, bersama dengan beberapa pemikirannya sendiri. Anda dapat melihat posting terjemahannya di sini.

Apa yang Dilakukan Insinyur Peringkat Google

Saya sebenarnya akan melanggar salah satu aturan saya sendiri untuk liputan langsung dan mengabaikan urutan kronologis (tetapi hanya untuk saat ini — saya akan membahas presentasi secara kronologis, setelah bagian ini).

Paul memiliki tema yang tertanam di seluruh presentasinya yang menjadi tulang punggung presentasinya, menurut saya. Tema itu adalah "apa yang dilakukan insinyur peringkat?" .

Ada empat versi jawaban ini, menurut Paul, masing-masing sedikit menyempurnakan peran insinyur peringkat:

1. Tulis kode untuk server [pencarian Google] tersebut. Sumber: Slide 16
2. Cari sinyal baru. Kombinasikan sinyal lama dengan cara baru. Sumber: Slide 19
3. Optimalkan metrik kami [relevansi/niat dan kualitas pencari]. Sumber: Slide 24
4. Pindahkan hasil dengan peringkat bagus [dari eksperimen langsung dan penilai manusia] ke atas. Pindahkan hasil dengan peringkat buruk ke bawah. Sumber: Slide 55

Harap dicatat bahwa tanda kurung [ ] menunjukkan kata seru saya sendiri untuk memperjelas (tidak sempurna) slide Paul.

Jadi apa yang dilakukan Insinyur Peringkat Google? Takeaway utama yang saya terima: pastikan pencarian benar-benar meningkat untuk pengguna (manusia). Dan bagaimana mereka melakukannya? Dengan membuat Google lebih cocok dengan Pedoman Peringkat Kualitas Penelusuran .

Tweet selanjutnya dari Paul kepada Rae sekali lagi menekankan pentingnya Panduan Peringkat Kualitas Pencarian, dan bahwa SEO benar-benar harus membaca seluruh dokumen:

.@sugarrae Senang Anda menyukainya. Untuk transparansi, saya pikir pedoman penilai sebenarnya adalah masalah besar. Baca belum?https://t.co/llmUQJbkQ8

— Paul Haahr (@haahr) 31 Maret 2016

Kutipan favorit saya dari presentasi Paul datang ketika dia berbicara tentang Pedoman Peringkat Kualitas Pencarian Google pada menit 16:08. Kutipan itu sendiri adalah dari menit 16:48, selama slide 32 dalam presentasi. Paulus berkata:

"Jika Anda bertanya-tanya mengapa Google melakukan sesuatu, seringkali jawabannya adalah membuatnya [pencarian] terlihat lebih seperti yang dikatakan oleh pedoman penilai."

Paul Haahr, Insinyur Peringkat Google, SMX West 2016

Itu pernyataan yang kuat. Paul merangkum semua perubahan di Google sebagai upaya untuk lebih mencocokkan Pedoman Peringkat Kualitas Penelusuran, yang telah mereka terbitkan! Singkat cerita: Anda ingin memahami Google? Pergi membaca pedoman kualitas mereka.

Baiklah, mari kita masuk ke liputan kronologis presentasi Paulus.

Pencarian Google Hari Ini

Ada dua tema dalam pencarian Google hari ini, menurut Paul:

1. Ponsel Pertama
2. Fitur

Seluler memimpin kueri penelusuran, dan Google semakin memikirkan seluler terlebih dahulu. Ini bukan informasi baru untuk SEO, tetapi ini adalah sesuatu yang ditekankan oleh Paul.

Poin kedua yang ditekankan Paul adalah pentingnya fitur, khususnya di ponsel.

Geser Empat

Menariknya, Paulus mengatakan dalam ringkasan pencarian hari ini:

"Kita akan semakin memasuki dunia di mana pencarian dianggap sebagai asisten untuk semua bagian kehidupan Anda."

Paul Haahr, Insinyur Peringkat Google, SMX West 2016

Cara Kerja Google Penelusuran

Semua Google dulunya 10 tautan biru. Paul memecahkan masalah peringkat di era 10 tautan biru sebagai "Dokumen apa yang kami tampilkan? Dalam urutan apa kami menampilkannya?"

Geser Tujuh

Selain menarik: Paul meluangkan waktu sejenak untuk mengklarifikasi bahwa dia tidak akan pernah menyentuh topik iklan. Secara khusus, Paulus berkata:

"Iklan itu hebat, mereka menghasilkan banyak uang bagi kami, mereka bekerja sangat baik untuk pengiklan. Tapi pekerjaan saya, kami secara eksplisit diberitahu "jangan pikirkan efeknya pada iklan, jangan pikirkan efeknya pada pendapatan - hanya berpikir tentang membantu pengguna."

Paul Haahr, Insinyur Peringkat Google, SMX West 2016

menarik untuk mendengar tentang pemisahan yang jelas antara gereja dan negara - permisi, berbayar dan organik.

Kehidupan Sebuah Pertanyaan

Penjelasan Paul tentang peringkat dimulai dengan kehidupan kueri, untuk menjelaskan cara kerja penelusuran. Ada dua bagian dari mesin pencari:

1. Sebelumnya (sebelum kueri)
2. Pemrosesan kueri.

Sebelum kueri:

• Jelajahi web
• Analisis halaman perayapan
  • Ekstrak tautan (pencarian versi klasik)
  • Render konten (Javascript, CSS - Paul menekankan pentingnya ini.)
  • Semantik anotasi
• Buat indeks
  • Tautkan indeks buku
  • Untuk setiap kata, daftar halaman tempat kata itu muncul
  • Dipecah menjadi jutaan halaman
    • Halaman ini disebut "pecahan"
    • 1000-an pecahan untuk indeks web
  • Ditambah metadata per-dokumen.

Sumber: slide 10 dan 11.

Pemrosesan Kueri (ketika seseorang menggunakan penelusuran):

• Pemahaman dan perluasan kueri
  • Apakah nama kueri dikenal entitas?
  • Apakah ada sinonim yang berguna?
  • Konteks penting
• pengambilan dan penilaian
  • Kirim kueri ke semua pecahan
  • Setiap pecahan:
    • Menemukan halaman yang cocok
    • Menghitung skor untuk kueri+halaman
    • Mengirim kembali halaman N teratas berdasarkan skor
  • Gabungkan semua halaman teratas
  • Urutkan berdasarkan skor
• Penyesuaian pasca pengambilan
  • Pengelompokan host (berapa banyak halaman yang berasal dari domain yang sama), tautan situs
  • Apakah ada terlalu banyak duplikasi?
  • Penurunan pangkat spam, tindakan manual berlaku d

Sumber: Slide 12, 13, 14, dan 15.

Sinyal Skor Google

Paul mengacu pada satu nomor yang mewakili kecocokan antara kueri dan halaman.

Ini didasarkan pada sinyal penilaian, yang didasarkan pada dua kategori:

1. Mencetak sinyal berdasarkan halaman
2. Mencetak sinyal berdasarkan kueri.

Slide Delapan Belas

Di sini Paul mengutip versi dua pekerjaan insinyur peringkat: mencari sinyal baru, atau menggabungkan sinyal lama dengan cara baru . Paulus menggambarkan ini sebagai "keras dan menarik".

Metrik Utama dalam Peringkat: Relevansi, Kualitas, Waktu untuk Hasil

Paul menekankan relevansi sebagai metrik utama dalam hasil pencarian. Relevansi pada dasarnya dijelaskan sebagai "mencocokkan maksud pengguna".

Paul mengacu pada relevansi sebagai "metrik baris teratas kami" dan "metrik internal besar".

Ada dua lainnya, juga: kualitas dan waktu untuk menghasilkan (lebih cepat menjadi lebih baik). Dalam presentasi ini, relevansi dan kualitas menjadi fokus.

Pembobotan Peringkat Timbal Balik

CTR (click through rate) sering dibahas dalam SEO, terutama untuk peringkat pencarian. Apa nilai menjadi hasil teratas dalam organik versus menjadi nomor dua? Dibandingkan menjadi nomor empat? Hal ini sering dibicarakan dan diperdebatkan. Paul menjelaskan sudut pandang Google, dari segi nilai.

Dia mendefinisikan gagasan itu sebagai "pembobotan peringkat timbal balik":

Slide Dua Puluh Tiga

Untuk lebih jelasnya, Paul tidak membahas RKT. Sebaliknya, metrik internal yang menilai seluruh halaman pencarian.

Idenya mewakili penurunan 50% dalam nilai setiap posisi, dengan posisi nomor satu bernilai sepuluh kali lipat dari peringkat nomor sepuluh.

Cukup menarik.

Dan ini membawa Paul ke versi nomor tiga tentang apa yang dilakukan oleh Google Ranking Engineers: mengoptimalkan metrik kami [relevansi dan kualitas].

Geser Dua Puluh Empat

Bagaimana Google Menilai Hasil Pencarian?

Paul menjelaskan ada dua cara Google menganalisis kemanjuran hasil tertentu:

1. Eksperimen langsung
2. Penilai manusia.

Video di bawah ini:

Eksperimen Langsung

Google menjalankan pengujian A/B langsung pada lalu lintas nyata, dan kemudian mencari perubahan dalam pola klik.

"Kami menjalankan banyak eksperimen. Sangat jarang jika Anda melakukan penelusuran di Google dan Anda tidak melakukan setidaknya satu eksperimen."

Paul Haahr, Insinyur Peringkat Google, SMX West 2016

Paul meluangkan waktu sejenak untuk menjelaskan bahwa menafsirkan eksperimen langsung adalah tugas yang sulit.

Contoh utamanya (di bawah) adalah hasil dengan kotak jawaban. Secara tradisional, jika pencari mengklik ke situs yang akan dilihat sebagai hasil yang baik. Tetapi bagaimana jika si pencari melihat jawabannya, merasa puas, dan menutup diri? Secara tradisional itu akan dinilai sebagai hasil yang buruk, tetapi dalam kasus ini sebenarnya bisa menjadi hasil yang baik.

Geser Tiga Puluh

Inti dari contoh Paulus adalah untuk menunjukkan betapa sulitnya menganalisis kepuasan pencari.

Eksperimen Penilai Manusia di Google

Pengambilan paling penting dari bagian ini adalah bahwa mobile-first sekali lagi ditekankan di sini, dengan sebagian besar eksperimen penilai manusia dilakukan pada ponsel pintar .

Eksperimen penilai manusia bekerja sebagai berikut:

1. Tampilkan hasil penelusuran eksperimental orang sungguhan
2. Tanyakan seberapa bagus hasilnya (tingkat geser untuk relevansi dan kualitas)
3. Peringkat agregat di seluruh penilai

Sekali lagi, sangat penting untuk dicatat bahwa Google telah menerbitkan Pedoman Evaluator Kualitas Pencarian mereka.

Serius, tonton klip itu.

Contoh Peringkat Evaluator Kualitas Penelusuran

Paul mulai melihat contoh dan tangkapan layar eksperimen peringkat kualitas penelusuran pada menit 16:56

Saya merekomendasikan menonton video untuk bagian ini, karena Paul sangat bergantung pada slide. Untuk mengikuti, bagian presentasi ini dimulai pada slide 33.

Dua Skala untuk Menilai Hasil: Relevansi dan Kualitas

Ada dua skala yang disediakan Google kepada penilai untuk menilai kualitas hasil:

1. Kebutuhan Terpenuhi (relevansi)
2. Kualitas Halaman

Geser Tiga Puluh Lima

Eksperimen Mobile-First

Paul juga menekankan mobile-first.

Mereka mencapai ini dalam lima cara:

1. Semua instruksi relevansi adalah tentang kebutuhan pengguna seluler.
2. Permintaan seluler digunakan dua kali lebih banyak dalam eksperimen.
3. Lokasi pengguna disertakan dalam eksperimen.
4. Alat ini menampilkan pengalaman pengguna seluler.
5. Penilai mengunjungi situs web menggunakan ponsel pintar mereka.

Saya tidak bisa menekankan betapa pentingnya ini. Google jelas sangat menekankan pada seluler; tidak ada jalan tengah di sini.

Peringkat Kebutuhan Terpenuhi - Peringkat Relevansi

Ada lima kategori relevansi yang berbeda, yang didefinisikan sebagai "kebutuhan terpenuhi":

1. Sepenuhnya Bertemu
2. Sangat Bertemu
3. Cukup Bertemu
4. Sedikit Bertemu
5. Gagal Bertemu.

Penting untuk dicatat bahwa penilai tidak menilai hanya dengan lima opsi: mereka disajikan dengan skala geser yang dapat mendarat di mana saja di antara salah satu dari peringkat ini.

Mulai dari slide 41 Paul menelusuri contoh setiap peringkat:

Berikut video yang menyertainya:

Takeaways penting:

1. "Sepenuhnya memenuhi" hanya bisa ada ketika kueri tidak ambigu dan ada hasil yang dapat sepenuhnya memuaskan apa pun yang diinginkan pengguna dengan kueri.
2. "Sangat memenuhi" terkadang memerlukan dua hasil terpisah yang spesifik untuk memenuhi maksud pengguna.
3. "Cukup memenuhi" umumnya merupakan informasi yang baik.
4. "Sedikit memenuhi" dapat diterima tetapi bukan informasi yang bagus, dengan hasil yang diharapkan lebih baik untuk ditampilkan.
5. "Gagal bertemu" menggelikan, dengan Paul mengutip bug pencarian yang mengembalikan hasil buruk.

Peringkat Kualitas Halaman

Google melihat tiga konsep penting untuk menggambarkan kualitas halaman:

1. Keahlian
2. Kewibawaan
3. Dapat dipercaya.

Skala kualitas adalah dari tinggi ke rendah.

Halaman berkualitas tinggi:

• Jumlah konten utama berkualitas tinggi yang memuaskan.
• Keahlian, otoritas, dan kepercayaan jelas.
• Situs web memiliki reputasi yang baik.

Slide Lima Puluh

Halaman berkualitas rendah:

• Kualitas kontennya rendah
• Tidak banyak konten utama
• Tidak ada keahlian atau otoritas yang ditampilkan
• Situs web memiliki reputasi negatif
• Konten sekunder (iklan) mengganggu.

Slide Lima Puluh Satu

Mengoptimalkan Metrik Kualitas Penelusuran

Beberapa ratus ilmuwan komputer bekerja di rekayasa peringkat. Mereka fokus pada metrik dan sinyal, menjalankan eksperimen terus-menerus, membuat banyak perubahan — semuanya untuk membuat hasil penelusuran Google lebih baik (dan mencerminkan Pedoman Evaluator Kualitas Penelusuran dengan lebih akurat.

Proses pengembangan cukup standar untuk proses pengembangan perangkat lunak.

Geser Lima Puluh Empat

Sorotan penting:

1. Prosesnya bisa memakan waktu dari minggu ke bulan untuk menguji kode.
2. Analis Kuantitatif (pada dasarnya ahli statistik) meninjau data. Mereka menjaga agar para insinyur peringkat jujur, memberikan sebagian besar analisis perubahan yang tidak bias.
3. Panel tinjauan peluncuran meninjau ringkasan proyek, meninjau dokumentasi dan laporan, dan memperdebatkan manfaat dari perubahan peringkat.
4. Untuk benar-benar mendorong pembaruan langsung bisa cepat atau lambat, tergantung pada seberapa siap kode untuk algoritme.

Insinyur peringkat membuat pembaruan ini terutama untuk memindahkan hasil dengan peringkat bagus ke atas, dan memindahkan hasil dengan peringkat buruk ke bawah.

Apa yang Salah dalam Proses Pengembangan

Paulus berbicara tentang dua jenis masalah:

1. Peringkat buruk secara sistematis.
2. Metrik yang tidak menangkap konsep yang mereka pedulikan.

Peringkat buruk secara sistematis

Paul menggunakan contoh [pupuk pertanian texas]. Ternyata ini merek pupuk, tapi Google kembalikan produsennya. Tidak mungkin orang benar-benar menginginkan peta ke pabrikan, tetapi lebih suka melihat produk yang sebenarnya. Namun, penilai manusia secara konsisten menilai ini sebagai hasil "sangat memenuhi kebutuhan" .

Ini sebenarnya mengarah pada pola penambahan lebih banyak peta, yang sebenarnya menciptakan hasil berperingkat tinggi tetapi sebenarnya pengalaman penelusuran langsung yang buruk.

Metrik Tidak Ada

Paul mengutip masalah yang dialami Google dengan kualitas pada 2008-2011. Secara khusus, masalah dengan ladang konten .

Kebun konten dapat menghasilkan konten berkualitas rendah dan sangat relevan. Hal ini menyebabkan hasil berperingkat tinggi yang sebenarnya berkualitas rendah. Peternakan konten adalah apa yang menyebabkan Google menerapkan penggeser kedua dalam eksperimen penilaian manusia mereka, menilai kualitas hasil.

Sangat menarik untuk mendengar Paul mendiskusikan masalah dengan kumpulan konten dan pengaruhnya pada kualitas pencarian, dan bagaimana menerapkan metrik lain untuk menilai kemanjuran hasil pencarian mengatasi masalah tersebut.

Menarik juga tidak disebutkannya Panda di sini, begitulah cara Google menangani konten farm secara algoritmik.

Solusi untuk metrik yang hilang, menurut Paul, adalah dengan memperbaiki pedoman penilai atau mengembangkan metrik baru (bila perlu).

Geser Enam Puluh Tujuh

Dan itulah keseluruhan presentasi Paulus!

Pikiran Akhir dan Takeaways

Hanya beberapa pemikiran terakhir untuk menyelesaikan posting panjang ini.

1. Saya akan membaca Panduan Penilai Kualitas Penelusuran lebih cepat daripada nanti. Anda juga harus. Paul menekankan bahwa semua perubahan yang dibuat dalam peringkat pencarian harus mencerminkan dokumen itu. Ingin memahami peringkat Google? (sebagai SEO, jawabannya harus "YA!") Kemudian baca dokumen itu.
2. Google benar-benar mobile-first. Semua eksperimen penilai manusia sangat menekankan pengalaman yang mengutamakan seluler, hingga tingkat yang mengejutkan.
3. Hampir setiap penelusuran menyertakan eksperimen langsung.
4. Relevansi adalah metrik nomor satu di Google. Mereka mendefinisikan "relevansi" sebagai memenuhi kebutuhan pengguna (manusia) dalam pencarian. Jika Anda ingin peringkat lebih tinggi, pikirkan tentang memenuhi harapan dan kebutuhan pencari.
5. Google menempatkan nilai lebih pada hasil pertama. Setiap hasil berikutnya menurunkan 50% dari nilai hasil sebelumnya. Hasil #1 dianggap sepuluh kali lebih berharga daripada hasil #10.

Saya yakin ada takeaways penting lainnya, tetapi otak saya secara resmi digoreng. Umpan balik diterima — harap Anda menikmati liputannya.