Commandline

Site taşımalarında en sık gördüğüm hata şu: yeni site güzel, hızlı, her şey yerinde görünüyor. Ama eski sitede trafik getiren sayfaların bir kısmı hiçbir yere yönlenmiyor. Sonuç: iki ay sonra "trafik neden düştü?" toplantısı. Bunu önceden yakalamanın en ucuz yolu, eski sitenin arşivdeki URL'lerini alıp yenisinde tek tek denemek.

Soft 404, sunucunun 200 OK dediği ama sayfanın aslında "burada bir şey yok" dediği durum. Arama motoru bunu genelde fark eder ve sayfayı dizine almaz, ama Search Console raporu gelene kadar haftalar geçebilir. Ben önceden yakalamayı tercih ediyorum.

User-agent'ında "Googlebot" yazan her istek Googlebot değil. Kazıyıcıların önemli bir kısmı kendini Googlebot gibi tanıtıyor, çünkü birçok site onları engellemiyor. Log analizine başlamadan önce bu sahteleri ayıklamak gerekiyor.

Bazen sadece bir sitenin URL listesine ihtiyacım oluyor. Masaüstü tarayıcısı açmak, proje oluşturmak, ayar yapmak için fazla. wget zaten her sunucuda var.