U WMT sam našao u Coverage - Indexed, not submitted in sitemap brdo ovih stranica.
Kad kucam site:mojsajtcom samo jedna od ovih stranica se pojavljuje. I danas sam poslao zahtjev za uklanjanje
Te wp-content/uploads/2020/09/?SD (ili neka dva druga slova a ne SD9 izgledaju ovako (ako je to uopšte bitno)
Sad meni se nikako ne sviđa što gugl indexuje ovo. Ne razumijem zašto indexuje uopšte ove foldere ili šta je već ovo.
Ođe sam našao neko rješenje, sad dal je dobro ili nije nemam pojma pa da priupitam nekog ako zna bilo bi lijepo čut jel neko od ova dva rješenja dobro i trajno. Na ova rješenja mislim:
“Change your robots.txt situated in root directory, like this”
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Noindex: /wp-content/
Noindex: /wp-includes/
Ovo je drugo rješenje:
Incase you are willing to edit ht-access file, then that would be a better approach.
I myself use it on my site. My code below if put in htaccess files, blocks all PHP and backend specific files, but allows all images, videos, pdfs and various similar file formats to be indexed by Google and others.
# Serves only static files
RewriteCond %{REQUEST_FILENAME} -f
RewriteRule ^wp-(content|includes)/([^/]+/)*([^/.]+\.)+ (jp(e?g|2)?|png|gif|bmp|ico|css|js|swf|xml|xsl|html?|mp(eg[34])|avi|wav|og[gv]|xlsx?|docx?|pptx?|gz|zip|rar|pdf|xps|7z|[ot]tf|eot|woff2?|svg|od[tsp]|flv|mov)$ - [L]
RewriteRule ^wp-(content|includes|admin/includes)/ - [R=404,L]
da li su ispravni ovi načini i kodovi, koji bi vi odabrali?
Sad interesuje me koja od ova dva rješenja da primjenim. Da li ću ako zabranim indeksovanje wp-content tako zabraniti da se indexuju slike ili ne?
Imam još pokoje pitanje pa ako ko zna i oće odgovorit fala mu. Zašto se ovo događa na ovom sajtu a na nekim drugim se ne događa? Ovo je u pitanju novi sajt sa baš dosta sadržaja 150 članaka i zanimljivo da pola članaka nema kad se gugla site:mojsajtcom a eto danas prvi put vidim jednu od ovih wp-content/uploads/2020/09/?MA indexovanu
Da li je ovo možda normalno i treba tako? ili izaziva problem jer troši crawl budžet i indexuje sajdržaj koji je tanak i ne bi trebao bit indexovan.