X-Robots-Tag: HTTP Header ile Google bot indekslemesini yönetmek

Google bot a söz geçirme sanatı başlıklı makalemde bahsetmiş olduğum Google Bot ile anlaşmak için kullanılabilecek tekniklerden bir tanesi de HTTP Header'a X-Robots-Tag komutu ile Google bot'a(veya başka söz dinleyen bir bot) sayfayı nasıl indekse alacağını bildirmek. Bu yöntem bazı durumlarda Seo açısından hayat kurtarıcı olabilir.

Lost Space - HTTP Header Status

Kullanım şekli çok bilinen meta etiketinden farksızdır, <meta name="robots" value="noindex, nofollow, nosnippet" /> meta etiketinde kullanılan değerler kullanılır.

Kullanım sonrası örnek bir header şöyle çıkar:

Status: HTTP/1.1 404 Not Found
Content-Type:	text/html; charset=utf-8	
Server:	Microsoft-IIS/7.5		
X-Robots-Tag:	noindex	
Date:	Sun, 22 Jan 2012 13:19:18 GMT	
Connection:	close	
Content-Length:	3540

Sisteme yada dile göre(Linux, Php, ISS, Asp) ve örnek kullanım şekilleri aşağıdaki gibidir, sunucu Apache kullanmayan bir Windows ise web.config, Apache kullanan bir sunucu ise .htaccess kullanmak tavsiye edilir fakat Php veya Asp/.Net gibi dillerde de Http Header göndermek mümkündür.

.htaccess ile – Resim dosyalarının noindex vermek

<FilesMatch "\.(gif|jpe?g|png)$">
Header set X-Robots-Tag "noindex"
</FilesMatch>

Php header ile – Herhangi bir sayfa veya php çalışan dosya için

header('X-Robots-Tag: noindex,nofollow');

Windows için web.config de kullanmak

<httpProtocol>
  <customHeaders>
<add name="X-Robots-Tag" value="noindex, noarchive, nosnippet" />
  </customHeaders>
</httpProtocol>

iPad’im artık jailbreaklı. 64gb canavar iPad2’yi asıl şimdi kullanmaya başlıyorum, yaşasın.

Bu jailbreak olayında Apple’ın parmağının olduğunua inanıyorum, hayır istenirse yengellenebilir veya çok ama çok zor hale getirilebilridi. Son çıkan A5 işlemciler için yanıo iPhone 4s ve iPAd 2 için jailbreak daha önceki jailbreaklardan farklı, inanılmaz kolay. Dfu moduna almanıza bile gerek kalmıyor 🙂 Sadece bir tıklama ve ardından bir restart, yapamayan liseli kalmaz sanıyorum. Dün akşam yaptığımda çok şaşırdım, bu kadar kolay olmamalıydı lan dedim bir pro+ kullanıcı olarak. http://blog.iphone-dev.org/

#SEO, Digital Marketing, Growth Hacking #wolkanca volkan@volkanyilmaz.com.tr

“X-Robots-Tag: HTTP Header ile Google bot indekslemesini yönetmek” için bir yorum

  1. hazırladığımız seo yarışmasına başvuru zamanı bu gece son buluyor! http://forum.sibersahne.org/showthread.php?tid=315 sayfamızı inceleyip yarışmaya katılıp ödül sahibi olabilirsiniz! 20 gün sürecek olacak yarışmaya katılıp hem sitenizi test edebilir hemde tadı tuzu olarak ödül sahibi olabilirsiniz. 10 dakikalık bir zaman ayırıp keyifli bir yarışma makalesi oluşturup bitiş tarihini bekleyiniz.15 şubatta yarışma bitecektir. bu fırsatı kaçırmayınız!