Pedoman Teknis

• Untuk membantu Google sepenuhnya memahami konteks situs Anda, izinkan semua aset situs Anda, seperti file CSS dan JavaScript, agar dapat dirayapi. Sistem pengindeksan Google merender laman web menggunakan HTML laman serta asetnya seperti file gambar, CSS, dan Javascript. Untuk melihat aset laman yang tidak dapat dirayapi oleh Googlebot dan untuk melakukan debug perintah pada file robots.txt Anda, gunakan Ambil sebagai Google dan alatPenguji robots.txt di Webmaster Tools
• Izinkan bot penelusuran merayapi situs Anda tanpa ID sesi atau argumen yang melacak jalurnya melalui situs itu. Teknik ini berguna untuk melacak tingkah laku pengguna individu, namun pola akses bot berbeda sepenuhnya. Memakai teknik ini dapat berakibat pengindeksan yang tidak lengkap pada situs Anda, karena bot tidak dapat menghapus URL yang tampak berbeda tetapi sebenarnya menunjuk ke laman yang sama.
• Pastikan server web Anda mendukung header HTTP If-Modified-Since. Fitur ini memungkinkan server web Anda memberi tahu Google apakah konten Anda berubah sejak terakhir kali kami merayapi situs. Mendukung fitur ini akan menghemat bandwidth dan overhead.
• Gunakan file robots.txt dalam server web Anda. File ini memberi tahu perayap direktori mana yang bisa atau tidak bisa dirayapi. Pastikan file itu sudah yang terbaru untuk situs sehingga Anda tidak memblokir perayap Googlebot secara tidak sengaja. Kunjungi http://code.google.com/web/controlcrawlindex/docs/faq.html untuk mempelajari cara memberi intruksi pada robot saat robot mengunjungi situs. Anda dapat menguji file robots.txt untuk memastikan Anda menggunakannya dengan benar dengan alat analisis robots.txt yang tersedia di Alat Webmaster Google.
• Lakukan upaya yang wajar untuk memastikan bahwa iklan tidak memengaruhi peringkat mesin telusur. Misalnya, tautan DoubleClick dan iklan AdSense Google diblokir agar tidak dirayapi dengan file robots.txt.
• Jika perusahaan Anda membeli sistem pengelolaan konten, pastikan sistem membuat laman dan tautan yang dapat dirayapi mesin telusur.
• Gunakan robots.txt untuk mencegah perayapan laman hasil penelusuran atau laman yang dibuat secara otomatis lainnya yang tidak memberikan banyak nilai bagi pengguna yang datang dari mesin telusur.
• Uji situs Anda untuk memastikan bahwa situs tersebut ditampilkan dengan benar di browser lain.
• Pantau kinerja situs dan optimalkan waktu pemuatan. Tujuan Google adalah memberikan pengguna hasil yang paling relevan dan pengalaman pengguna yang hebat. Situs cepat meningkatkan kepuasan pengguna dan meningkatkan keseluruhan kualitas web (khususnya untuk pengguna dengan sambungan internet yang lambat), dan kami berharap bahwa saat webmaster meningkatkan situs mereka, keseluruhan kecepatan web akan meningkat.
• Google sangat menganjurkan semua webmaster memantau kinerja situs secara berkala menggunakan Page Speed,YSlow, WebPagetest, atau alat lain. Untuk informasi, alat, dan sumber daya lainnya, lihat Mari Menjadikan Web Lebih Cepat.