Membangun mesin pencari itu sulit.
Ribuan programmer di seluruh dunia diam-diam mengetuk keyboard mereka mencoba membangun mesin pencari terbaik berikutnya. Sergey Brin dan Lawrence Page, pencipta Google yang terkenal, mengakui bahwa "merekayasa mesin pencari adalah tugas yang menantang." Sebuah mesin pencari digunakan untuk mencari informasi di Web. Sebuah mesin merayapi Internet dan mengindeks jutaan halaman informasi, mengeluarkan hasil ketika seseorang melakukan pencarian.
Dapatkan Perayap Web
Langkah 1
Dapatkan perayap Web, yang merupakan laba-laba atau bot yang merayapi Internet mengumpulkan halaman dari Web. Seekor laba-laba mengunjungi halaman Web, membacanya, dan mengikuti tautan ke halaman lain. Anda dapat menemukan perayap sumber terbuka atau membuat perayap Anda sendiri. Jika Anda ingin membuat crawler Anda sendiri, dapatkan daftar URL untuk seed crawler Anda. Perayap lambat mudah dibuat, tetapi membangun perayap berkinerja tinggi untuk mengindeks jutaan halaman lebih menantang.
Video Hari Ini
Langkah 2
Dapatkan bandwidth sebanyak yang Anda mampu. Anda memerlukan bandwidth ini untuk perayap Anda saat melintasi halaman web untuk mendapatkan.
Langkah 3
Membangun indeks. Semua yang ditemukan perayap Anda masuk ke indeks mesin telusur. Indeks seperti buku atau katalog raksasa yang berisi salinan setiap halaman Web yang ditemukan perayap. Anna Patterson dari Stanford University merekomendasikan pengindeksan hanya data yang Anda butuhkan untuk menyajikan jenis hasil pencarian Anda. Dia juga menyarankan agar Anda tidak mencoba untuk mengindeks "wastafel dapur" melainkan "mendapatkan sesuatu yang rapi."
Langkah 4
Indeks Anda berisi semua informasi yang ditemukan oleh perayap Web Anda.
Beri peringkat hasil Anda pada indeks menggunakan database berkinerja tinggi dan semua informasi di server Anda dari perayapan Web Anda. Anda perlu memproses kemungkinan jutaan halaman Web untuk membuat indeks Anda. Halaman-halaman yang tercatat dalam indeks Anda perlu diberi peringkat menurut urutan yang paling relevan bagi pencari Anda.
Langkah 5
Bangun situs web yang menarik untuk mengembalikan hasil pencarian.
Langkah 6
Luncurkan dan pasarkan mesin pencari Anda. Mesin pencari gratis harus membawa pengguna ke tempat yang mereka inginkan dengan cepat dan elegan, menurut Laszlo Xalieri dari Search Engine Watch.com. Dia mengatakan bahwa untuk menjalankan mesin pencari yang sukses, "tujuan Anda adalah menarik konsumen dan menjual akses ke mereka kepada pemasar."
Hal yang Anda Butuhkan
Sebuah situs
Perayap Web
Basis data berkinerja tinggi untuk mengindeks semua konten Anda
Banyak bandwidth untuk merayapi Web
Server untuk menyimpan informasi
A Ph.D. dalam ilmu komputer atau matematika (atau konsultan dengan yang sama)
Peringatan
Setiap programmer dapat memulai mesin pencari, tetapi memberikan hasil yang relevan adalah tantangan nyata.
