Nükleer Bir Felaketten Kurtulmak! - KI4U.com'dan Shane Connor ile
Benim .. De
robots.txt Sitemde, Google tarafından dizine eklenmesini veya Google arama sonuçlarında yer almasını istemediğim bazı "teşekkür ederim" sayfalarına izin vermedim. Ancak bu sayfalar yakın zamanda Google'da aranabilir hale geldi. Bunların silinmesi için ne yapmalıyım?
robots.txt dosyası arama motoru indekslemesine izin vermemek için kullanılamaz ve kullanılmamalıdır. Yalnızca sayfaların dizine eklenmesini değil taranmasını engeller.
Sayfaların dizine eklenmesini önlemek için, sayfaların başlığında şu HTML meta etiketiyle sunun:
<meta name='robots' content='noindex'>
Veya bu HTTP başlığıyla:
X-Robots-Tag: noindex
Hizmet ettiğinizde
noindex yönergesi, sayfalar zamanla Google Arama'nın dışında kalacaktır. Bunları acilen kaldırmanız gerekirse, Google Eski İçerik Kaldırma Aracı'nı kullanarak gönderin. Bu, yalnızca sayfalar,
noindex direktif veya tamamen gitti.