Search engine adalah salah satu fasilitas vital dari internet untuk menjelajahi lautan informasi yang begitu luas. Bayangkan saja, hanya dalam waktu beberapa detik ia dapat menyuguhkan ribuan bahkan jutaan alamat web (URL) yang memuat informasi berkaitan dengan kata kunci (keyword) yang Anda cari. Bisa Anda bayangkan, berapa juta orang yang mengakses Google setiap harinya, dan berapa juta keyword yang harus dilayani selama 24 jam non stop.
Setiap user pada umumnya bertujuan mencari informasi yang mereka butuhkan secepat mungkin. Jika Anda saat ini telah memiliki website, atau baru saja menyelesaikan sebuah website tentunya ingin agar informasi yang Anda sediakan di web mudah dicari orang. Sehingga yang perlu Anda ketahui sekarang adalah bagaimana mengoptimalkan website Anda agar dapat terlisting dengan baik pada search engine.
Cara Kerja Search Engine Sebelum mendaftarkan website ke search engine, ada baiknya kalau Anda mengetahui sekilas tentang cara kerjanya. Search engine merupakan sebuah sistem database yang dirancang untuk meng-index alamat-alamat internet (URL, FTP, dll). Untuk melaksanakan tugasnya ini, search engine memiliki program khusus yang biasanya disebut spider, bot, atau crawler.
Pada saat Anda mendaftarkan sebuah alamat web (URL), spider dari search engine akan menerima dan menganalisa URL tersebut. Dengan algoritma tertentu, spider akan memutuskan apakah web yang anda daftarkan layak diterima atau tidak. Jika layak, spider akan menambahkan URL tersebut ke sistem database mereka. Namun jika tidak, terpaksa Anda harus bersabar dan mengulangi pendaftaran dalam periode tertentu. Kecepatan crawler setiap search engine berbeda-beda. Jadi jika Anda mendaftarkan URL sekarang, kemungkinan baru bisa dilisting dalam 2 minggu hingga 2 bulan. Ini disebabkan karena ada ribuan URL baru yang mendaftar setiap harinya. Google.com dan AllTheWeb.com adalah dua search engine yang memiliki kapasitas crawler terbesar saat ini.
