Setiap webmaster tahu bahwa agar orang mulai mengunjungi sumber dayanya dari mesin telusur, sumber daya tersebut perlu diindeks. Tentang apa itu pengindeksan situs, bagaimana cara melakukannya, dan apa artinya, akan kami ceritakan di artikel ini.
Apa itu pengindeksan?
Jadi, kata "pengindeksan" itu sendiri berarti memasukkan sesuatu ke dalam register, sensus bahan yang tersedia. Prinsip yang sama berlaku untuk pengindeksan situs. Bahkan, proses ini juga bisa disebut memasukkan informasi tentang sumber daya Internet ke dalam database mesin pencari.
Jadi, segera setelah pengguna memasukkan frasa lain ke dalam bidang pencarian Google, skrip akan mengembalikan hasil kepadanya, termasuk judul situs Anda dan deskripsi singkatnya, yang kita lihat di bawah.
Bagaimana pengindeksan dilakukan?
Pengindeksan itu sendiri ("Yandex", atau Google - tidak berperan) cukup sederhana. Seluruh web Internet, dengan fokus pada basis data alamat IP yang dimiliki mesin pencari, dipindai oleh robot yang kuat - "laba-laba" yang mengumpulkaninformasi tentang situs Anda. Masing-masing mesin pencari memiliki jumlah yang sangat banyak, dan mereka bekerja secara otomatis 24 jam sehari. Tugas mereka adalah pergi ke situs Anda dan "membaca" semua konten di dalamnya, sambil memasukkan data ke dalam database.
Akibatnya, secara teori, pengindeksan situs tidak terlalu bergantung pada pemilik sumber daya. Faktor penentu di sini adalah robot pencari yang datang ke situs dan menjelajahinya. Inilah yang mempengaruhi seberapa cepat situs Anda muncul di hasil pencarian.
Istilah pengindeksan?
Tentu saja, sangat bermanfaat bagi setiap webmaster agar sumber dayanya muncul di hasil pencarian secepat mungkin. Ini akan memengaruhi, pertama, persyaratan untuk membawa situs ke posisi pertama, dan, kedua, saat tahap pertama monetisasi situs dimulai. Jadi, semakin cepat robot pencari "memakan" semua halaman sumber daya Anda, semakin baik.
Setiap mesin pencari memiliki algoritmanya sendiri untuk memasukkan data situs ke dalam databasenya. Misalnya, pengindeksan halaman di Yandex dilakukan secara bertahap: robot memindai situs secara konstan, kemudian mengatur informasi, setelah itu apa yang disebut "pembaruan" terjadi, ketika semua perubahan berlaku. Keteraturan acara semacam itu tidak ditetapkan oleh perusahaan: diadakan setiap 5-7 hari sekali (sebagai aturan), namun, dapat diadakan 2 dan 15 hari sebelumnya.
Pada saat yang sama, pengindeksan situs di Google mengikuti model yang berbeda. Di mesin pencari ini, "pembaruan" (pembaruan dasar) seperti itu terjadi secara teratur, oleh karena itu, tunggu setiap saat sampai robot memasukkan informasi ke dalam database, dan kemudianakan dipesan setiap beberapa hari, tidak perlu.
Berdasarkan hal di atas, kita dapat menarik kesimpulan berikut: halaman di Yandex ditambahkan setelah 1-2 "pembaruan" (yaitu, rata-rata dalam 7-20 hari), dan di Google ini bisa terjadi lebih cepat - secara harfiah dalam sehari.
Pada saat yang sama, tentu saja, setiap mesin pencari memiliki kekhasan tersendiri tentang bagaimana pengindeksan dilakukan. Yandex, misalnya, memiliki apa yang disebut "bot cepat" - robot yang dapat memasukkan data ke dalam masalah dalam beberapa jam. Benar, tidak mudah untuk membuatnya mengunjungi sumber Anda: ini terutama menyangkut berita dan berbagai acara terkenal yang berkembang secara real time.
Bagaimana cara masuk ke indeks?
Jawaban atas pertanyaan tentang bagaimana mengindeks situs Anda di mesin pencari sederhana dan kompleks. Pengindeksan halaman adalah fenomena alami, dan jika Anda bahkan tidak memikirkannya, tetapi katakan saja, simpan blog Anda, secara bertahap mengisinya dengan informasi, mesin pencari akan "menelan" konten Anda dengan sempurna seiring waktu.
Hal lain adalah ketika Anda perlu mempercepat pengindeksan halaman, misalnya, jika Anda memiliki jaringan yang disebut "satelit" (situs yang dirancang untuk menjual tautan atau memasang iklan, yang kualitasnya biasanya lebih buruk). Dalam hal ini, Anda perlu mengambil tindakan agar robot memperhatikan situs Anda. Berikut ini dianggap umum: menambahkan URL situs ke formulir khusus (disebut "AddUrl"); menjalankan alamat sumber daya melalui direktori tautan; tambahkan alamat ke direktoribookmark dan banyak lagi. Ada banyak diskusi di forum SEO tentang bagaimana masing-masing metode ini bekerja. Seperti yang ditunjukkan oleh praktik, setiap kasus adalah unik, dan sulit untuk menemukan alasan secara lebih akurat mengapa satu situs diindeks dalam 10 hari, dan yang lainnya dalam 2 bulan.
Bagaimana cara mempercepat masuk ke indeks?
Namun, logika di balik memasukkan situs ke dalam indeks lebih cepat didasarkan pada penautannya. Secara khusus, kita berbicara tentang pengaturan URL di situs gratis dan publik (bookmark, direktori, blog, forum); tentang membeli tautan di situs besar dan populer (menggunakan pertukaran Sape, misalnya); serta menambahkan peta situs ke formulir addURL. Mungkin ada metode lain, tetapi yang telah terdaftar dapat dengan aman disebut yang paling populer. Ingat, secara umum, semuanya tergantung pada situs dan keberuntungan pemiliknya.
Situs mana yang diindeks?
Menurut posisi resmi semua mesin pencari, situs yang melewati serangkaian filter masuk ke dalam indeks. Tidak ada yang tahu persyaratan apa yang terkandung di dalamnya. Hanya diketahui bahwa seiring waktu mereka semua meningkat sedemikian rupa untuk menyaring situs semu yang dibuat untuk mendapatkan uang dengan menjual tautan dan sumber daya lain yang tidak membawa informasi berguna bagi pengguna. Tentu saja, bagi para pembuat situs tersebut, tugas utamanya adalah mengindeks halaman sebanyak-banyaknya (untuk menarik pengunjung, menjual link, dll).selanjutnya).
Sumber daya apa yang dilarang oleh mesin pencari?
Berdasarkan informasi sebelumnya, kita dapat menyimpulkan situs mana yang kemungkinan besar tidak akan masuk ke SERP. Informasi yang sama disuarakan oleh perwakilan resmi mesin pencari. Pertama-tama, ini adalah situs yang berisi konten yang tidak unik dan dibuat secara otomatis yang tidak berguna bagi pengunjung. Ini diikuti oleh sumber daya di mana ada informasi minimum, dibuat untuk menjual tautan dan sebagainya.
Benar, jika Anda menganalisis hasil mesin pencari, Anda dapat menemukan semua situs ini di dalamnya. Oleh karena itu, jika kita berbicara tentang situs yang tidak akan muncul dalam hasil pencarian, kita harus memperhatikan tidak hanya konten yang tidak unik, tetapi juga sejumlah faktor lain - banyak tautan, struktur yang tidak diatur dengan benar, dan sebagainya.
Menyembunyikan konten. Bagaimana cara menonaktifkan pengindeksan halaman?
Mesin pencari merayapi semua konten di situs. Namun, ada teknik di mana Anda dapat membatasi akses robot pencari ke bagian tertentu. Hal ini dilakukan dengan menggunakan file robots.txt, di mana "laba-laba" mesin pencari bereaksi.
Jika file ini ditempatkan di root situs, pengindeksan halaman akan berjalan sesuai dengan skrip yang tertulis di dalamnya. Secara khusus, Anda dapat menonaktifkan pengindeksan dengan satu perintah - Larang. Selain itu, file juga dapat menentukan bagian situs yang akan menerapkan larangan ini. Misalnya, untuk melarang indeks seluruh situs, cukup tentukansatu garis miring "/"; dan untuk mengecualikan bagian "toko" dari hasil pencarian, cukup tentukan karakteristik berikut di file Anda: "/shop". Seperti yang Anda lihat, semuanya logis dan sangat sederhana. Pengindeksan halaman ditutup dengan sangat mudah. Pada saat yang sama, robot pencari mengunjungi halaman Anda, membaca robots.txt dan tidak memasukkan data ke dalam database. Sehingga Anda dapat dengan mudah memanipulasi untuk melihat karakteristik situs tertentu dalam pencarian. Sekarang mari kita bicara tentang bagaimana indeks diperiksa.
Bagaimana cara memeriksa pengindeksan halaman?
Ada beberapa cara untuk mengetahui berapa banyak dan halaman mana yang ada di database Yandex atau Google. Yang pertama - yang paling sederhana - adalah mengatur permintaan yang sesuai dalam formulir pencarian. Sepertinya ini: site:domen.ru, di mana alih-alih domen.ru Anda menulis, masing-masing, alamat situs Anda. Saat Anda membuat permintaan seperti itu, mesin pencari akan menampilkan semua hasil (halaman) yang terletak di URL yang ditentukan. Selain itu, selain hanya mencantumkan semua halaman, Anda juga dapat melihat jumlah total materi yang diindeks (di sebelah kanan frasa "Jumlah hasil").
Cara kedua adalah memeriksa pengindeksan halaman menggunakan layanan khusus. Sekarang ada banyak dari mereka, begitu saja mereka dapat disebut xseo.in dan cy-pr.com. Pada sumber daya seperti itu, Anda tidak hanya dapat melihat jumlah total halaman, tetapi juga menentukan kualitas beberapa di antaranya. Namun, Anda hanya membutuhkan ini jika Anda lebih memahami topik ini secara mendalam. Biasanya, ini adalah alat SEO profesional.
Tentang pengindeksan "dipaksa"
Saya juga ingin menulis sedikit tentang yang disebutPengindeksan "Paksa", ketika seseorang mencoba mengarahkan situsnya ke dalam indeks menggunakan berbagai metode "agresif". Pengoptimal tidak menyarankan melakukan ini.
Mesin telusur, paling tidak, memperhatikan aktivitas berlebihan yang terkait dengan sumber daya baru, dapat memberlakukan semacam sanksi yang berdampak negatif pada keadaan situs. Oleh karena itu, lebih baik melakukan segalanya agar pengindeksan halaman terlihat organik, bertahap dan semulus mungkin.
