Untuk mengetahui rangking dari suatu situs atau blog andaGoogle Index diibaratkan seperti sebuah database dari semua situs yang pernah dikunjungi atau terdata oleh google. Saat seseorang melakukan search pada mesin pencari google, maka google secara otomatis mengambil data-data dari database tersebut. Saat ini ada sekitar lebih dari 40 milliar situs yang terindex oleh google ini. (atau setara dengan 100.000.000 GB)
"Fakta : Ada sekitar 450 milliar situs yang tidak terindex google"Google mempunyai sebuah program yang dinamakan "spider" untuk tugas ini.
Karakter dari "spider" ini :
1. mampu berpikir layak orang dalam melakukan browsing
2. mereka bergerak dari halaman ke halaman, link ke link
3. mereka berusaha untuk melakukan index dari setiap halaman dari sebuah situs
Proses yang dilakukan spider ini (crawling) bisa terjadi :
1. beberapa kali dalam seminggu
2. sekali dalam 6 bulan
Cara atau tips : Update selalu situs atau blog anda secara teratur, agar situs atu blog anda dapat terindex lebih sering
"Fakta : Google membutuhkan sekitar 1.000.000 server proses crawling ini serta pendataannya."
Komparasi :
Facebook hanya memiliki : 180.000 server
Intel hanya memiliki : 75.000 server.
eBay hanya memiliki : 54.011 server.
7 ALASAN TERBANYAK MENGAPA SITUS ATAU BLOG TIDAK TERINDEX GOOGLE :
1. Kesalahan dalam mengkonfigurasi robot.txt file:
digunakan untuk memblokade bagian-bagian atau halaman dari sebuah situs atau blog yang tidak ingin ditelusuri atau terindex google
2. Konfigurasi htaccess file yang kurang baik
fungsi utamanya untuk SEO adalah melakukan redirect page dari domain lama ke domain baru
3. Penulisan meta tag yang salah terutama title, deskripsi dan autor tag
berikut adalah format yang benar :
<title>70 character atau lebih yang relevan dengan keyword</title>
<meta name="description"content="155 character">
Autor tag
<link href="http://plus.google.com/[profil G+ anda]" rel="author"></link>
4. Konfigurasi URL Parameter yang salah
anda dapat mengkonfigurasi parameter ini di webmaster tool untuk memberitahu google tentang link dinamis mana yang anda tidak ingin google meng-indexnya.
Warning Google : "incorectly configuring parameters can result in pages from your site being droped from our index"5. Low Pagerank
"sering tidak nya sebuah situs diindex, biasanya direprentasikan dari pagerank anda"6. Konektivitas DNS
-by "Matt Cuss"
Tips : "don't be cheap on servers and hosting"
7. Domain dengan track record buruk
domain para spammers akan di blacklist dari index google
SOLUSINYA :
1. cek error crawler di webmaster tool dan konfigurasikan alamatnya kepada google
2. berhatila-hatilah dengan "aplikasi AJAX" dalam sebuah content. Cari tahu panduan dan cara membuat agar applikasi tersebut terindex.
3. tambahkan robot.txt file dan pastikan itu bekerja dengan baik.
4. tambahkan sitemap dalam situs atau blog anda.
Sumber : Neil Patell