Robots.txt Nedir ? Ne İşe Yarar?

Erkan Karabulut

Yıldız Teknik Üniversitesi, Bilgisayar Mühendisliği lisans öğrencisi. Programlama Bilgisi: - Web - Büyük Veri - Veri Tabanı (MySQL) - Yapısal Programlama - Nesneye Dayalı Programlama Güncel Olarak Çalıştığı Konular: - Büyük veri üzerinde veri modelleme - MySQL Veri Tabanı - Nesneye Dayalı Programlama (Java)

Bunlar da hoşunuza gidebilir...

2 Cevaplar

  1. rıdvan dedi ki:

    hep duyuyordum ama ne olduğunu bi türlü çözememiştim bu robots.txt’yi. bu yazı sayesinde çözmüş oldum.

  2. cankut dedi ki:

    robots.txt dikkatli kullanılması lazım yoksa sitenin önemli sayfalarının indexlenmesini önleyebiliriz farkında olmadan.

Bir Cevap Yazın

E-posta hesabınız yayımlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir