Bagaimana Mesin Pencari Mencari, Merayap, dan Mengindeks Kandungan Anda?

Search Engine Optimization

Saya tidak sering mengesyorkan agar pelanggan membina sistem e-dagang atau pengurusan kandungan mereka sendiri kerana semua pilihan kebolehlihatan yang tidak diperlukan yang diperlukan pada masa ini - terutamanya tertumpu pada carian dan pengoptimuman sosial. Saya menulis artikel mengenai cara memilih CMS dan saya masih menunjukkannya kepada syarikat-syarikat yang saya bekerjasama dengan mereka yang tergoda hanya untuk membina sistem pengurusan kandungan mereka sendiri.

Walau bagaimanapun, benar-benar ada situasi di mana platform khusus adalah keperluan. Walaupun itu adalah penyelesaian yang optimum, saya masih mendorong pelanggan saya untuk membina ciri yang diperlukan untuk mengoptimumkan laman web mereka untuk carian dan media sosial. Pada dasarnya terdapat tiga ciri utama yang merupakan keperluan.

  • robots.txt
  • XML Sitemap
  • Metadata

Apa itu Fail Robots.txt?

robots.txt fail - yang robots.txt file adalah fail teks biasa yang ada di direktori root laman web dan memberitahu mesin pencari apa yang harus mereka sertakan dan kecualikan dari hasil carian. Dalam beberapa tahun kebelakangan ini, mesin pencari juga meminta agar anda memasukkan jalan ke peta laman XML di dalam fail. Inilah contoh saya, yang membolehkan semua bot merayapi laman web saya dan juga mengarahkannya ke peta laman XML saya:

User-agent: *
Sitemap: https://martech.zone/sitemap_index.xml

Apa itu Peta Laman XML?

XML Sitemap - Sama seperti HTML untuk dilihat di penyemak imbas, XML ditulis untuk dicerna secara terprogram. Peta laman XML pada dasarnya adalah jadual setiap halaman di laman web anda dan ketika ia terakhir dikemas kini. Peta laman XML juga dapat dirantai daisy ... itu adalah satu Peta Laman XML yang dapat merujuk ke peta laman yang lain. Itu bagus jika anda ingin mengatur dan menguraikan elemen laman web anda secara logik (Soalan Lazim, halaman, produk, dll.) Ke dalam Peta Laman mereka sendiri.

Peta laman sangat penting agar anda dapat memberitahu mesin pencari dengan berkesan apa kandungan yang anda buat dan kapan terakhir diedit. Proses yang digunakan oleh mesin pencari semasa pergi ke laman web anda tidak berkesan tanpa melaksanakan peta laman dan potongan.

Tanpa Peta Laman XML, anda mempertaruhkan halaman anda agar tidak ditemui Bagaimana jika anda mempunyai halaman arahan produk baru yang tidak dihubungkan secara dalaman atau luaran. Bagaimana Google menemuinya? Baiklah, letakkan ... sehingga pautan dijumpai, anda tidak akan dapat ditemui. Syukurlah, enjin carian membolehkan sistem pengurusan kandungan dan platform e-dagang melancarkan karpet merah untuk mereka!

  1. Google menemui pautan luaran atau dalaman ke laman web anda.
  2. Google mengindeks halaman dan memberi peringkat mengikut kandungannya dan apakah kandungan dan kualiti laman pautan yang merujuk.

Dengan Peta Laman XML, anda tidak membiarkan penemuan kandungan anda atau pembaharuan kandungan anda secara kebetulan! Terlalu banyak pembangun yang cuba mengambil jalan pintas yang menyakitkan juga. Mereka menerbitkan potongan kaya yang sama di seluruh laman web, memberikan maklumat yang tidak berkaitan dengan maklumat halaman. Mereka menerbitkan peta laman dengan tarikh yang sama di setiap halaman (atau semuanya dikemas kini ketika satu halaman dikemas kini), memberikan antrian kepada mesin pencari bahawa mereka bermain sistem atau tidak boleh dipercayai. Atau mereka sama sekali tidak menggunakan mesin pencari… jadi mesin pencari tidak menyedari bahawa maklumat baru telah diterbitkan.

Apa itu Metadata? Mikrodata? Coretan Kaya?

Coretan kaya ditandai mikrodata dengan teliti yang tersembunyi dari penonton tetapi dapat dilihat di halaman untuk digunakan oleh enjin carian atau laman media sosial. Ini dikenali sebagai metadata. Google mematuhi Schema.org sebagai standard untuk memasukkan perkara seperti gambar, tajuk, keterangan ... serta sejumlah coretan maklumat lain seperti harga, kuantiti, maklumat lokasi, penilaian, dan lain-lain. Skema akan meningkatkan keterlihatan mesin pencari anda dan kemungkinan pengguna akan mengklik melalui.

Facebook menggunakan OpenGraph protokol (tentu saja tidak mungkin sama), Twitter bahkan mempunyai potongan untuk menentukan profil Twitter anda. Semakin banyak platform menggunakan metadata ini untuk melihat pratonton pautan tertanam dan maklumat lain semasa mereka menerbitkan.

Halaman web anda mempunyai makna yang mendasari bahawa orang memahami ketika mereka membaca halaman web. Tetapi mesin pencari mempunyai pemahaman terhad tentang apa yang dibincangkan di halaman tersebut. Dengan menambahkan tag tambahan ke HTML halaman web anda — tag yang mengatakan, "Hai mesin pencari, maklumat ini menerangkan filem, tempat, atau orang, atau video khusus ini" - anda dapat membantu enjin carian dan aplikasi lain memahami kandungan anda dengan lebih baik dan paparkan dengan cara yang berguna dan relevan. Microdata adalah sekumpulan tag, diperkenalkan dengan HTML5, yang membolehkan anda melakukan ini.

Schema.org, Apa itu MicroData?

Sudah tentu, semua ini tidak diperlukan ... tetapi saya sangat mengesyorkannya. Apabila anda berkongsi pautan di Facebook, misalnya, dan tidak ada gambar, tajuk, atau keterangan yang muncul ... tidak banyak orang yang berminat dan benar-benar mengklik. Dan jika coretan Skema anda tidak ada di setiap halaman, sudah tentu anda masih boleh muncul dalam hasil carian ... tetapi pesaing mungkin mengalahkan anda apabila mereka mempunyai maklumat tambahan yang dipaparkan.

Daftarkan Peta Laman XML Anda dengan Search Console

Adalah mustahak bahawa, jika anda telah membina kandungan atau platform e-dagang anda sendiri, anda mempunyai subsistem yang melakukan ping pada mesin pencari, menerbitkan mikrodata, dan kemudian menyediakan peta laman XML yang sah untuk kandungan atau maklumat produk ditemui!

Setelah fail robots.txt, peta laman XML, dan coretan kaya anda disesuaikan dan dioptimumkan di seluruh laman web anda, jangan lupa mendaftar untuk Search Console setiap mesin pencari (juga dikenali sebagai alat Webmaster) di mana anda dapat memantau kesihatan dan penglihatan anda laman web di enjin carian. Anda bahkan dapat menentukan jalan Peta Situs anda jika tidak ada yang disenaraikan dan melihat bagaimana enjin carian menggunakannya, sama ada ada masalah dengannya atau tidak, dan bahkan bagaimana membetulkannya.

Lancarkan permaidani merah ke enjin carian dan media sosial dan anda akan mendapat kedudukan laman web anda lebih baik, entri anda di halaman hasil enjin carian diklik lebih banyak, dan halaman anda lebih banyak dikongsi di media sosial. Semuanya bertambah!

Bagaimana Robots.txt, Peta Laman, dan MetaData Bekerjasama

Menggabungkan semua elemen ini seperti melancarkan permaidani merah untuk laman web anda. Inilah proses merangkak yang dilakukan bot bersama dengan bagaimana mesin carian mengindeks kandungan anda.

  1. Laman web anda mempunyai fail robots.txt yang juga merujuk lokasi Peta Situs XML anda.
  2. CMS atau sistem e-dagang anda mengemas kini Peta Laman XML dengan mana-mana halaman dan tarikh penerbitan atau mengedit maklumat tarikh.
  3. Sistem CMS atau e-niaga anda melakukan ping kepada mesin pencari untuk memberi tahu mereka bahawa laman web anda telah diperbaharui. Anda boleh melakukan ping secara langsung atau menggunakan RPC dan perkhidmatan seperti itu Ping-o-matik untuk mendorong ke semua enjin carian utama.
  4. Search Engine segera kembali, menghormati fail Robots.txt, mencari halaman baru atau yang dikemas kini melalui peta laman, dan kemudian mengindeks halaman.
  5. Ketika mengindeks halaman anda, ia menggunakan mikrodata cuplikan kaya untuk meningkatkan halaman hasil mesin pencari.
  6. Oleh kerana laman web lain yang berkaitan dengan kandungan anda, kandungan anda berada pada kedudukan yang lebih baik.
  7. Semasa kandungan anda dikongsi di media sosial, maklumat cuplikan kaya yang dinyatakan dapat membantu melihat kandungan anda dengan betul dan mengarahkannya ke profil sosial anda.

2 Komen

  1. 1

    laman web saya tidak dapat mengindeks kandungan baru, saya mengambil peta laman web dan url di webmaster tetapi masih tidak dapat memperbaikinya. Adakah masalah google backend?

Apa yang anda fikir?

Laman web ini menggunakan Akismet untuk mengurangkan spam. Ketahui bagaimana data komen anda diproses.