WordPress, arama motorlarının siteleri endekslemesini önlemek için kullandığı yöntemi değiştiriyor.
Önceden kullanıcı bir sitenin Ayarlar> Okuma ekranında “Arama motorlarını bu siteyi dizine eklemekten vazgeçir” seçeneğini işaretlemişse, WordPress robot.txt dosyasına Disallow: / ekliyordu. Bu, taramayı önler ancak sitelerin arama sonuçlarında görünmesini her zaman engellemiyordu.
5.3’ten itibaren, WordPress sitenin arama motorlarında listelenmesini önlemek için güncellenmiş bir robot meta etiketi eklemek için robots.txt yöntemini bırakacak. Meta etiketi, indekslemeyi ve daha sonra taramayı önlemenin daha güvenilir bir yolunu sunuyor.