Bagi banyak orang, Google adalah internet. Ini adalah titik awal untuk menemukan situs baru, dan bisa dibilang penemuan paling penting sejak internet itu sendiri. Tanpa mesin pencari, konten web baru tidak akan dapat diakses oleh massa. Tapi tahukah kalian cara kerja mesin pencari?
Setiap mesin pencari memiliki tiga fungsi utama: crawling (untuk menemukan konten), mengindeks (untuk melacak dan menyimpan konten), dan retrieval(untuk mengambil konten yang relevan ketika pengguna meminta mesin pencari).
DAFTAR ISI
Crawling
Crwaling adalah awal dari semuanya, perolehan data tentang situs web. Ini melibatkan pemindaian situs dan mengumpulkan detail tentang setiap halaman sperti judul, gambar, kata kunci, halaman terkait lainnya, dll. Crawler yang berbeda juga dapat mencari detail yang berbeda, seperti tata letak halaman, tempat iklan ditempatkan, apakah tautan dijejalkan, dll.
Tapi bagaimana situs web dirayapi? Bot otomatis (disebut “spider”) mengunjungi halaman demi halaman secepat mungkin, menggunakan tautan halaman untuk menemukan tujuan selanjutnya. Bahkan di hari-hari awal, Google spider bisa membaca beberapa ratus halaman per detik. Saat ini, jumlahnya ribuan.
Ketika web crawler mengunjungi halaman, ia mengumpulkan setiap tautan pada halaman dan menambahkannya ke daftar halaman berikutnya yang akan dikunjungi. Ini pergi ke halaman berikutnya dalam daftar, mengumpulkan link pada halaman, dan mengulangi. Web Crawler juga mengunjungi kembali halaman sebelumnya sesekali untuk melihat apakah ada perubahan yang terjadi.
Ini berarti situs apa pun yang ditautkan dari situs yang diindeks pada akhirnya akan dirayapi. Beberapa situs dirayapi lebih sering, dan beberapa dirayapi ke kedalaman yang lebih besar, tetapi terkadang crawler dapat menyerah jika hierarki halaman situs terlalu kompleks. Salah satu cara untuk memahami cara kerja web crawler adalah dengan membuatnya sendiri. Perhatikan bahwa halaman dapat ditandai sebagai “noindex,” yang seperti meminta mesin pencari untuk melewatkan pengindeksannya.
Indexing
Setelah bot merayapi data, saatnya untuk pengindeksan. Indeks ini pada dasarnya adalah perpustakaan online situs web. Situs web kalian harus diindeks agar dapat ditampilkan di halaman hasil mesin pencari. Perlu diingat bahwa pengindeksan adalah proses yang konstan. Crawler kembali ke setiap situs web untuk mendeteksi data baru.
Baca Juga: 8 Kode HTTP Error Paling Umum Dengan Artinya
Conthnya ketika kalian membuat daftar semua buku yang kalian miliki, penerbitnya, penulisnya, genre mereka, jumlah halaman mereka, dll. Crawler adalah ketika kalian menyisir setiap buku sementara pengindeksan adalah saat kalian memasukkannya ke daftar kalian. Itu adalah versi skala kecil dari apa yang dilakukan Google, yang menyimpan semua data ini di pusat data yang luas dengan ribuan petabytes hard drive.
Retrieval Dan Ranking
Retrieval adalah ketika mesin pencari memproses permintaan pencarian kalian dan mengembalikan halaman yang paling relevan yang cocok dengan permintaan kalian. Sebagian besar mesin pencari membedakan diri mereka melalui metode pencarian mereka menggunakan kriteria yang berbeda untuk memilih dan memilah halaman mana yang paling cocok dengan apa yang ingin kalian temukan. Itu sebabnya hasil pencarian bervariasi antara Google dan Bing.
Algoritme peringkat memeriksa permintaan pencarian kalian terhadap miliaran halaman untuk menentukan relevansi masing-masing. Perusahaan menjaga algoritma peringkat mereka sebagai rahasia industri yang dipatenkan karena kompleksitasnya. Algoritma yang lebih baik diterjemahkan menjadi pengalaman pencarian yang lebih baik.
Mereka juga tidak ingin pembuat web menggunakan sistem permainan dan naik secara tidak adil ke puncak hasil pencarian. Jika metodologi internal mesin pencari keluar, semua jenis orang pasti akan mengeksploitasi pengetahuan itu sehingga merugikan pencari seperti pengguna. Eksploitasi mesin pencari itu mungkin, tentu saja, tetapi tidak lagi mudah.
Awalnya, cara kerja mesin pencari memberi peringkat situs berdasarkan seberapa sering kata kunci muncul pada halaman, yang mengarah pada “keyword stuffing” mengisi halaman dengan keyword-heavy nonsense.
Kemudian muncul konsep pentingnya link: mesin pencari menilai situs dengan banyak tautan masuk karena mereka mengartikan popularitas situs sebagai relevansi. Tapi ini mengarah ke link spamming di seluruh web. Saat ini, bobot tautan mesin pencari bergantung pada “authority” situs penghubung. Mesin pencari memberi nilai lebih pada tautan dari agen pemerintah daripada tautan dari direktori tautan.
Hari ini, algoritma peringkat diselimuti lebih banyak misteri daripada sebelumnya, dan “optimasi mesin pencari” tidak begitu penting. Peringkat mesin pencari yang baik sekarang berasal dari konten berkualitas tinggi dan pengalaman pengguna yang luar biasa.
Mesin Pencari Paling Populer
Dalam hal popularitas di seluruh dunia, Google telah menjadi #1 selama bertahun-tahun. Ini adalah daftar 5 mesin pencari terpopuler:
1. Google
Google adalah raksasa di industri dan mungkin memiliki algoritma paling canggih. Ini termasuk pembelajaran mesin, AI dan RankBrain , algoritma lain yang dapat mengubah bobot faktor peringkat sesuai dengan perilaku pengguna dan kualitas hasil sebelumnya. Lebih dari 70% pengguna internet di seluruh dunia melakukan pencarian mereka di Google sejak 1998.
Baca Juga: 5 Web Browser Terbaik Dan Tercepat Saat Ini
2. Baidu
Baidu adalah mesin pencari pertama yang diluncurkan di Cina pada tahun 2000. Ini seperti Google Google. Baidu bekerja sama dengan perusahaan seperti Microsoft, Qualcomm, Intel atau Daimler dalam berbagai proyek AI. Sama halnya dengan Google, mereka menawarkan banyak solusi lain seperti layanan cloud, peta, jejaring sosial, pencarian gambar dan video, dan banyak lainnya.
3. Bing
Microsoft meluncurkan mesin pencari mereka pada tahun 2009 sebagai proyek baru setelah mesin pencari sebelumnya MSN Search dan Windows Live Search. Tujuan utamanya adalah mengembangkan pesaing untuk Google. Dari sudut pandang global, itu tidak benar-benar ada tetapi di AS, Bing adalah alat paling populer ke-2 untuk pencarian internet.
4. Yahoo!
Awalnya, itu adalah salah satu penyedia email dan mesin pencari yang paling banyak digunakan. Perusahaan ini tumbuh secara signifikan pada 1990-an tetapi setelah 2000, mereka entah bagaimana mulai kurang inovasi dan kehilangan nilainya. Pada 2017, Yahoo! diakuisisi oleh Verizon Communications.
5. Yandex
Yandex Search adalah mesin pencari utama Rusia. Menurut Wikipedia, Yandex menghasilkan lebih dari 50% dari semua pencarian di Rusia. Meskipun algoritmanya tidak secanggih Google, algoritma ini terus menjadi lebih baik dengan mengintegrasikan AI dan pembelajaran mesin yang menganalisis pencarian dan belajar dari mereka.
Kesimpulan
Mungkin ada beberapa perbedaan dalam bagaimana cara kerja mesin pencari ,tetapi pada dasarnya tetap sama. Masing-masing dari mereka harus melakukan tugas-tugas berikut Crawling, Indexing, dan Retrieval.
Sekian informasi kali ini.Nantikan informasi menarik lainnya dan jangan lupa share informasi ini ke teman-teman kalian. Terimakasih…