Mulai November 2020, Google akan mulai merayapi beberapa situs melalui HTTP/2. Ini adalah versi utama HTTP berikutnya, yang lebih kuat, efisien, dan lebih cepat dari pendahulunya. Perubahan ini akan menguntungkan para profesional web yang memerlukan Googlebot untuk mendukung perayapan melalui HTTP/2. Untuk informasi lebih lanjut tentang HTTP/2, baca artikel panjang tentang topik HTTP/2.
Google berencana untuk secara bertahap beralih ke situs web perayapan melalui HTTP/2, yang lebih efisien dalam hal penggunaan sumber daya server. Perubahan ini akan terjadi secara bertahap, dengan Googlebot pertama-tama merayapi sejumlah kecil situs di h2, dan kemudian secara bertahap naik ke lebih banyak situs yang mungkin mendapat manfaat dari fitur yang awalnya didukung. Googlebot memutuskan situs mana yang akan dirayapi melalui h2 berdasarkan apakah situs tersebut mendukung h2 dan apakah situs dan Googlebot akan mendapat manfaat dari perayapan melalui HTTP/2. Jika server Anda masih hanya menggunakan HTTP/1.1, tidak apa-apa - tidak ada kerugian yang jelas untuk merayapi protokol ini.
Google sedang meningkatkan perayap Googlebot untuk mendukung HTTP/2. Perubahan ini akan meningkatkan kecepatan dan efisiensi perayapan tanpa berdampak negatif pada pengindeksan. Namun, beberapa pemilik situs mungkin ingin menyisih dari perubahan ini. Situs dapat melakukan ini dengan menginstruksikan server untuk merespons dengan kode status HTTP 421 saat Googlebot mencoba merayapi h2. Jika ini tidak memungkinkan, pemilik situs dapat mengirim pesan ke tim Googlebot (namun, solusi ini bersifat sementara).
Untuk informasi lebih lanjut dan jawaban atas pertanyaan yang mungkin Anda miliki, lihat pos terperinci Google (termasuk tautan ke Twitter dan forum bantuannya).
Menurut Google, perangkat lunak yang mereka gunakan untuk membuat Googlebot merayapi h2 cukup matang untuk digunakan dalam produksi. Namun, mereka mengatakan terserah pemilik situs web untuk meningkatkan server mereka. Googlebot hanya akan beralih ke perayapan situs h2 yang jelas menguntungkan - jika tidak ada manfaat yang jelas, Googlebot akan terus merayapi h1.
Cloudflare memiliki posting blog dengan berbagai cara untuk menguji situs untuk dukungan h2. Untuk meningkatkan versi situs Anda ke h2, Google menyarankan untuk berbicara dengan administrator server atau penyedia hosting Anda. Pemilik situs tidak dapat meyakinkan Googlebot untuk mendiskusikan h2 dengan situs mereka - jika situs mendukung h2 dan bagus untuk dirayapi, maka Googlebot akan beralih secara otomatis. Jika tidak, Googlebot akan terus merayapi HTTP/1.1.
Google telah mengumumkan bahwa mereka sekarang hanya akan merayapi situs melalui HTTP/2 jika ada manfaat yang jelas untuk situs tersebut. Perubahan terjadi setelah mereka menemukan bahwa beberapa situs memiliki sedikit manfaat saat merayapi HTTP/2. Mereka akan terus mengevaluasi peningkatan kinerja dan dapat mengubah kriteria konversi mereka di masa mendatang.
Pemilik situs yang terdaftar di Search Console akan menerima pesan bahwa beberapa lalu lintas perayapan dapat terus melalui HTTP/2 jika situs mereka memenuhi syarat untuk perayapan melalui HTTP/2. Situs juga dapat memeriksa log server mereka (misalnya, dalam file access.log jika situs berjalan di Apache) untuk melihat apakah mereka merayapi HTTP/2.
Googlebot mendukung sebagian besar fitur yang diperkenalkan oleh HTTP/2. Beberapa fitur yang mungkin bermanfaat untuk rendering, seperti server push, masih dalam evaluasi. Googlebot saat ini tidak mendukung HTTP/2 (h2c) teks biasa.
Google telah mengumumkan bahwa mereka akan menggunakan HTTP/2 untuk perayapan. Ini adalah versi protokol HTTP yang lebih baru dengan beberapa keunggulan, termasuk multiplexing dan konkurensi, kompresi header, dan server push.
Server push adalah fitur yang belum diaktifkan tetapi masih dalam evaluasi. Mungkin bagus untuk rendering, tetapi Google tidak memiliki sesuatu yang spesifik untuk dikatakan saat ini.
Agar memenuhi syarat untuk dirayapi melalui HTTP/2, situs web harus menggunakan HTTPS dan mendukung HTTP/2. Ini setara dengan cara browser modern menanganinya. Jika server merespons dengan versi protokol selain h2 selama handshake TLS, Googlebot akan keluar dan kembali lagi nanti di HTTP/1.1.
Jika Anda ingin mempelajari lebih lanjut tentang fitur dan pengikisan h2, Anda dapat bertanya kepada Google di Twitter. Manfaat utama h2 adalah menghemat sumber daya sisi server dan sisi Googlebot. Apakah Googlebot merayapi menggunakan h1 atau h2 tidak memengaruhi cara situs Anda diindeks, dan oleh karena itu seberapa banyak Google berencana untuk merayapi dari situs Anda. Situs yang dirayapi di h2 tidak memiliki keunggulan peringkat.