11 Cara mengatasi index sitemap turun digooglewebmaster

Selamat Datang di Blog Orang IT,

Salah satu kepanikan yang sering dialami oleh blogger pemula adalah melihat jumlah index sitemap digooglewebmaster yang menurun atau tidak sesuai dengan jumlah posting blog. Sitemap atau Peta Situs berisi kumpulan url halaman yang dimiliki situs anda (tidak termasuk halaman statis), kalau jumlah postingan 1000 seharusnya isi dari sitemap juga 1000.

Beberapa minggu lalu kita melihat jumlah url yang dikirim sitemap ada 1000 dan terindex 900 kemudian hari ini setelah dicek lagi ternyata jumlah indexnya turun menjadi 300 tentunya ini membuat newbie panik

Setiap webmaster pernah mengalaminya termasuk saya , berbekal pengalaman ngeblog selama bertahun-tahun dan terbiasa dengan masalah index-deindex-reindex hingga penurunan index pada sitemap google search console yang membuat kita was-was apakah situs kita ditandai spam oleh google atau tidak , semua pengalaman yang berharga dimasa lalu ternyata bisa menjadi pembelajaran bagi newbie untuk menyelesaikan masalah mereka dengan lebih cepat

Google webmaster tools atau lebih dikenal sebagai google search console merupakan tools gratis yang disediakan oleh google untuk memantau performa situs web dan memberikan laporan kepada pengguna terkait aktivitas googlebot , masalah dalam website hingga teguran terkait manual action (pelanggaran manual)

Anda harus mendaftarkan situs anda ke google search console dan memasang metatag tepat dibawah kode <head> atau kalau GSC versi terbaru sekarang ini asalkan akun email yang didaftarkan GSC juga menjadi admin diblog yang bersangkutan secara otomatis kepemilikan situs dapat dikonfirmasi tanpa harus meletakkan kode tertentu

Nah kode dari google search console berperan seperti kode google analytic yang melakukan tracking terhadap aktivitas googlebot dan aktivitas pengunjung dalam website anda secara continue

Data yang anda lihat di GSC sifatnya bukanlah data terbaru melainkan data yang sudah di akumulasikan dari rekap laporan selama 3 bulan terakhir

Jadi meskipun anda melihat jumlah index situs 30 di GSC , sementara jika dicek langsung digoogle dengan query site:helmynia.com terkadang jumlahnya berbeda ( data lama vs data sebenarnya)

Google search console merekam aktivitas pengunjung disitus anda

Fungsi dari google search console sendiri adalah merekam setiap aktivitas pengunjung (organik , non-organik , robot) didalam situs anda , memperlihatkan keyword apa saja yang membawa pengunjung kesitus anda dan yang paling menarik perhatian pengguna adalah fitur sitemap

Setiap webmaster selalu mengirimkan peta situs mereka dengan format namadomain.com/sitemap.xml atau ada juga yang mengirim untuk setiap index https://www.helmynia.com/sitemap.xml?page=1-2-3-4 dimana setiap halaman maksimal berisi 150 url

Sitemap sendiri sifatnya otomatis diperbaharui jadi setelah menerbitkan kiriman terbaru anda tidak perlu mengirimkan sitemap berulang kali

Semakin banyak index sitemap menandakan halaman posting anda sudah terindex oleh mesin pencari google, anda juga bisa melihat tautan mana saja yang mengarah ke situs anda serta berbagai laporan menarik lainnya

Jumlah url sitemap otomatis mengikuti jumlah artikel yang anda miliki , kalau jumlah artikel saya 1400 berarti jumlah url didalam sitemap juga 1400 dan jumlah indexnya tentunya juga lebih dari 1300. Itu kalau website anda berada dalam performa terbaiknya

Tetapi jika para blogger mengeluh index yang tidak sesuai dengan jumlah konten blog berarti ada sesuatu hal yang membuat googlebot kesulitan merayapi daftar url sitemap terbaru dan biasanya diakibatkan oleh permasalahan internal

Ini pernah terjadi pada blog www.helmynia.com yang kebetulan pernah terdampak badai deindex google , bayangkan saja saat itu dari 300 total artikel yang terbit hanya menyisakan 1 index saja di pencarian yakni pada halaman homepage

Ini menjadi PR yang sulit dikerjakan , saya harus mengingat beberapa kemungkinan yang menjadi penyebabnya seperti spam link , jarang update , menerbitkan konten terlarang dll

Segala bentuk pelanggaran terhadap kebijakan google apabila dilakukan secara berulang kali maka dapat memicu sanksi dari algoritma filter pencarian yang kala itu cukup sensitive terlebih saat google telah mengonfirmasi bahwa update versi major tidak akan diberlakukan karena algoritma telah menyatu dengan mesin pencari

Ketika jumlah index situs menurun berarti jumlah keterlihatan halaman dimesin pencari juga menurun , hal ini berdampak pada penurunan visitor organik dan menurunnya penghasilan adsense

Penyebab index sitemap menurun dan sulit naik

Ini hanya opini dari hasil pengamatan mendalam selama bertahun-tahun ngeblog dan tentunya juga bersumber dari pengalaman teman-teman blogger didunia maya yang sempat mengeluhkan hal serupa dan tentu saja saya juga menganalisa situs mereka untuk mendapatkan kemungkinan sebagai berikut :

1. Blog jarang menerbitkan konten

Saya membandingkan bagaimana blog www.helmynia.com yang selalu update konten secara konsisten setiap hari , disini saya melihat setiap postingan terbaru selalu terindex google kurang dari 24 jam tanpa menggunakan fitur submit url dan tentu saja jumlah index sitemap dilaporan GSC selalu mengalami kenaikan

Sementara situs saya yang lain kebetulan sebulan cuma update 10-15 artikel saja terkadang mengalami index-deindex, setelah dipantau ternyata jumlah sitemapnya juga menurun

Ini menandakan bahwa google menyukai daftar situs yang selalu memperbaharui konten mereka setiap saat dan memberikan crawl budget yang lebih besar kepada situs yang dianggap aktif

Cobalah untuk menerbitkan konten setiap hari , jika tidak sanggup sewa jasa penulis kalau tidak mau karena menganggap aktivitas blogging sebagai pashion/hobi berarti anda harus bersabar, nanti lama kelamaan juga terindex dengan sendirinya

Baca juga : Manfaat update konten blog setiap hari

2. Artikel blog dianggap sudah kadaluarsa

Kemungkinan karena artikel blog dianggap sudah kadaluarsa , terlebih untuk blog dengan niche musiman (berita , loker , info cegatan dll) mereka cenderung menambahkan tahun disetiap judul postingan yang mereka terbitkan.

Judul yang mengandung tahun itulah yang membuat google menganggap konten anda sudah kadaluarsa jadi tidak diprioritaskan lagi bahkan dilewati saat perayapan googlebot.

Jika diamati hasil penelusuran kata kunci tertentu dengan tingkat persaingan padat , google memang lebih memprioritaskan daftar konten yang masih fresh dan memberi peringkat rendah untuk konten-konten lama

Ini karena google beranggapan bahwa artikel dengan topik pembahasan yang sama yang diterbitkan kemarin lebih terupdate informasinya dibandingkan artikel yang diterbitkan 2 tahun lalu

3. Adanya perbaikan index google

Ketika terjadi pembaharuan algoritma inti, kita melihat betapa tingginya tingkat fluktuasi dihasil pencarian , ini menandakan bahwa pada saat itu google mengangkat derajat situs yang kurang dihargai dan melakukan review ulang terhadap situs yang berusaha mempengaruhi hasil pencarian

Hampir setiap webmaster mengeluhkan penurunan trafik saat core update kemarin , seiring bertambahnya faktor filter pencarian membuat beberapa web mengalami deindex

Anda tau apa yang terjadi pada web-web dimasa lalu yang membeli sejumlah besar tautan setelah algoritm pinguin dirilis ? mereka hilang dari search engine

Anda tau apa yang terjadi ketika algoritma yang disebut webmaster sebagai badai florida datang? banyak penyedia jasa seo lokal yang gulung tikar akibat web client mereka hilang dari pencarian

4. Konten artikel dianggap menyalahi pedoman kualitas webmaster

Google sangat menjunjung tinggi legalitas dan menghormati undang-undang yang berlaku disetiap negara , google telah membuat larangan daftar konten apa saja yang mereka tidak dikehendaki

Seperti saat ada situs yang digugat terkait masalah hak cipta karena membajak produk tertentu , tidak serta merta google menghapus konten yang dimaksud melainkan blog tersebut juga masuk dalam pemantauan google pirate

Kebanyakan situs-situs yang terkena masalah hak cipta sering kali indexnya turun drastis seperti web-web grabber mp3 , video , software , game bajakan yang awal indexnya jutaan perlahan mulai dibersihkan dari database google

Ini mungkin juga berlaku untuk jenis konten terlarang lainnya seperti konten dewasa (ingat! beberapa negara termasuk indonesia menerapkan filter pencarian)

Selain kebijakan konten ternyata juga ada kebijakan untuk cuplikan kaya / snippet rich misal membuat rating bintang palsu

5. Blog tidak sehat

Selanjutnya adalah kondisi blog yang tidak sehat dimana banyak ditemukan tautan rusak baik didalam struktur pembangun blog (tema , plugin) hingga internal/eksternal link pada halaman postingan

Ketika mengikuti tautan mati 404 , googlebot membuang crawl budget mereka dengan percuma dan itu memberi tahu google bahwa situs anda masih dalam tahap perbaikan sehingga tidak layak ditampilkan untuk pengguna.

Google tidak ingin pengguna mereka mendapatkan pengalaman buruk ketika berkunjung kesitus anda oleh sebab itu cari dan perbaiki setiap broken link yang anda temukan disitus anda dengan segera

Beberapa layanan gratis untuk memeriksa broken link diblog anda :

https://www.brokenlinkcheck.com

https://www.deadlinkchecker.com

Untuk layanan berbayar anda bisa menggunakan ahrefs atau layanan audit similiarweb

6. Mengirimkan format sitemap yang salah

Penyebab selanjutnya adalah salah menggunakan format sitemap , ada beberapa format yang biasa digunakan oleh webmaster diantaranya

http://helmynia.com/atom.xml?redirect=false&start-index=1&max-results=500 maksimal url berisi 250

http://helmynia.com/atom.xml?orderby=update maksimal url 25

https://www.helmynia.com/sitemap.xml?page=4 url maksimal 150

https://www.helmynia.com/sitemap.xml untuk web dengan jumlah konten besar

Ada webmaster yang menggunakan semua format sitemap dan itu tidak berguna , gunakan saja format helmynia.com/sitemap.xml yang mengcover seluruh url situs anda dalam satu wadah

Cara mengatasi index sitemap yang turun

Kejadian ini pernah menimpa beberapa blog saya dimana jumlah index sitemap selalu lebih rendah (jauh dari jumlah konten yang saya miliki) bahkan itu berlangsung selama beberapa bulan , untungnya blog ini bukan sitemoney meski demikian gangguan seperti index turun hingga seolah-olah jumlah url yang terbaca tidak sesuai harus segera diperbaiki

Namun seiring pengalaman dan trial error selama berhari-hari hingga mencoba berbagai cara yang disarankan oleh blog-blog papan atas akhirnya secara perlahan jumlah index sitemap di GSC mulai meningkat, meski tidak bisa dikatakan 100% sesuai dengan jumlah konten setidaknya ada perubahan yang terlihat begitu berarti

Untuk anda yang mengalami masalah serupa dengan saya yakni index sitemap naik turun diwebmaster search console cobalah untuk melakukan perbaikan sebagai berikut:

1. Perbaiki error situs

Google webmaster biasanya melaporkan jumlah broken link yang ada diblog anda dari manapun sumber tautan itu berasal , error seperti ini jika diabaikan dapat membuat visibilitas anda turun

a) perbaiki halaman error 404

Jika anda menemukan halaman yang mengarah kepada dead link 404 segera perbaiki tautan tersebut dengan menghapusnya atau mengganti, ini wajar bagi blog yang telah berdiri selama berbulan-bulan lamanya terlebih ketika anda sering menyisipkan hyperlink aktif dari situs lain dan ternyata karena suatu alasan situs tersebut menghapus halamannya

b) perbaiki duplicate content

Content duplicate dianggap tidak memberikan manfaat lebih bagi pengunjung oleh sebab itu googlebot mengabaikan situs anda , ini sudah dikatakan berulang kali namun masih ada saja blogger ngeyel yang melakukan copy paste terhadap konten Blog Orang IT

Entah mereka itu bodoh atau bagaimana yang jelas menerbitkan konten hasil salinan membuat halaman anda tidak mendapatkan prioritas dalam peringkat

c) perbaiki error 5xx

Error ini disebabkan karena server yang buruk , file-file pembangun web yang diunggah ke server host yang tidak merespond permintaan atau penyedia layanan domain yang buruk

Intinya situs anda tidak bisa diakses untuk sesaat alias down / website unavaliable, website yang ketika dirayapi menghilang otomatis ditandai tidak ada maka tak heran google mendevaluasi index anda

Gunakan layanan seperti uptimerobot untuk memantau kehidupan website setiap saat, layanan ini gratis dan secara otomatis akan melakukan PING setiap 5-10-15 menit sekali jika website anda down maka mereka akan mengirimkan laporan melalui email

d) perbaiki direct link 3xx

Direct link alias link yang diakses harusnya link A tetapi dialihkan ke link B sebenarnya bukan masalah yang buruk tergantung jenis pengalihan yang digunakan apakah sementara 302 atau permanen 301

Meski demikian keberadaan link semacam ini akan menguras jumlah crawl budget yang pada akhirnya membuat halaman anda hanya sedikit dirayapi oleh googlebot

Untuk memeriksa direct link bisa melalui layanan ahrefs atau brokenlinkcheck silahkan cari kode status 3xx

2. Lakukan disavow link toxic

Backlink jaman dulu memiliki efek positif untuk meningkatkan popularitas blog tak peduli darimanapun mereka berasal , tetapi semenjak pinguin dirilis hingga terakhir kemarin fred update yang memeriksa equitas link nyatanya membuat beberapa website yang over backlink justru ditandai sebagai webspam

Tentu saja parameternya bukan hanya DA PA rendah tetapi lebih dari itu, seperti backlink dengan attribut dofollow only atau backlink DA PA tinggi yang dianggap sebagai paidlinks

Banyak situs yang menghilang dari google akibat backlink toxic , link-link semacam ini justru menjadi beban bagi situs yang ditaut sehingga membuatnya turun peringkat. Ini menyebalkan mengingat kita tidak tau apakah google sedang memberikan pinalti secara manual atau pinalti tidak terlihat oleh algoritm

Satu-satunya hal yang bisa anda lakukan adalah memfilter kualitas backlink yang menaut ke situs anda lalu memutuskannya dengan fitur google disavow

Gunakan alat premium seperti ahrefs (all in one) atau anda bisa mengeceknya secara manual di GSC pada menu link to your site

Beruntungnya dimasa lalu saya telah membuat tutorial memutus backlink sampah dari blog

3. Posting artikel baru dan tautkan ke artikel lama

Update artikel lama : Pertama anda harus mengupdate artikel lama dengan menambah 2-3 paragraf lebih banyak lebih bagus kemudian mempublikasikan ulang , pada sitemap mereka akan diurutkan berdasarkan tanggal pengeditan pada tag lastmode oleh sebab itu googlebot akan memprioritaskan setiap tautan yang dianggap baru baik artikel fresh atau artikel lama yang disunting

Jangan lupa mengirimkan url lama kehalaman fetch as atau inspeksi url agar halaman itu masuk dalam antrian index yang diprioritaskan google

Terbitkan artikel baru : Kedua, terbitkan artikel baru yang memberikan tautan link ke artikel lama . Bot spider bekerja seperti laba-laba yang merayap dari satu halaman kehalaman lain melalui jaring (tautan link)

Jika googlebot merayapi konten terbaru otomatis mereka juga merayapi segala tautan aktif yang berada dihalaman itu dan untuk url lama sama dengan melakukan crawl ulang

Anda wajib menghapus atau memodifikasi artikel lama yang dianggap sudah kadaluarsa karena itu menguras crawl budget , lihatlah ahrefs yang tidak segan-segan menghapus 20 artikel berkualitas tinggi mereka atau idunn yang menghapus 70 artikel mereka , apa yang didapat ? trafik mereka justru mengalami kenaikan

Terlalu banyak artikel tidak berharga dalam sebuah blog membuat eksistensi halaman lain berkurang , dan google panda menganggap kegagalan sebuah halaman sama dengan kegagalan seluruh web

Maksud konten yang gagal disini adalah konten yang tidak mendapatkan pembaca sama sekali bahkan setelah diterbitkan selama berbulan-bulan lamanya

Pertimbangkan untuk mengganti judul atau menambah paragraf jika memang itu diperlukan

4. Perbaiki struktur meta template

Pengalaman saya , jumlah index meningkat setelah mengganti template yang semula milik mastemplate menjadi evomagz, setelah ditelusuri mungkin ini disebabkan karena template yang tidak ramah terhadap mesin pencari

Ini masuk akal karena template yang didesain secara premium memberikan segala kemudahan bagi google bot untuk merayapi halaman tersebut

Ketika googlebot datang kesitus anda mereka mengambil banyak data seperti deskripsi , headline , image , type , author dll

Anda bisa menguji apakah struktur template anda dapat membantu menyajikan data yang diperlukan oleh googlebot atau tidak melalui alat gratis google struktur data testing tools = https://search.google.com/structured-data/testing-tool

Jika anda melihat adanya missing pada tag tertentu segera perbaiki , kabar baiknya saya pernah membahas bagaimana memperbaiki kesalahan pada google struktur data testing tools

Anda juga bisa meletakkan tag berikut dibawah kode <head

<b:include data='blog' name='all-head-content'/>

Meta ini secara otomatis akan menghasilkan daftar meta standar yang dibutuhkan oleh googlebot , setelah menerapkannya pada blog sekarang buka salah satu halaman posting dan klik ctrl+U

Anda akan melihat serangkaian meta standar yang dihasilkan oleh kode diatas , setelah menambahkannya kedalam template silahkan hapus meta lain yang dianggap memiliki fungsi yang hampir sama

5. Terbitkan artikel secara konsisten

Selanjutnya adalah menerbitkan artikel secara konsisten paling tidak seminggu 2x , lihatlah blog saya yang setiap hari selalu menerbitkan artikel terbaru

Jumlah crawl budgetnya tinggi , setiap artikel terbaru otomatis di index oleh googlesearch tanpa harus melakukan submit url. Ini menandakan bahwa google menganggap situs saya cukup aktif dan tentu sebagai efeknya peringkat beberapa konten dengan keyword tertentu diprioritaskan

Konten adalah aset berharga bagi sebuah blog , ini sepert investasi jangka panjang dimana sebuah konten yang anda hasilkan hari ini akan dibaca berulang kali oleh pengunjung situs dimasa depan

Nah itu dia beberapa cara meningkatkan jumlah index sitemap digoogle webmaster , sebenarnya ada cara ekstrim lain seperti melakukan ping , indexer hingga membangun tautan spam tetapi cara-cara seperti itu justru sangat beresiko untuk dicoba

Kesalahan dalam praktik SEO membuat situs anda diabaikan sepenuhnya oleh google

Berhati-hatilah dalam mengaplikasikan SEO jika anda tidak ingin website ditekan selamanya dari pencarian google

.... http://helmynia.com

Pegawai Kantoran dan Pekerja Serabutan Online "Apabila anak adam (manusia) telah meninggal dunia, maka terputuslah amalnya darinya, kecuali tiga perkara, yaitu sedekah jariyah (sedekah yang pahalanya terus mengalir), ilmu yang bermanfaat, atau anak saleh yang selalu mendoakannya." (HR Muslim No. 1631)

Vlog Orang IT

Widget HTML #1