Nasıl Google dizininden bir site veya parçalarını kaldırmak için

Google tarafından benimsenen indeksleme kavramına göre, bütünlük için bilgi ve sonuçların ihracında arama sorgusuna kendi uygunluk nesnellik oluşturdu. indeks spam için yasadışı içerik veya kaynakla web sitesini düşerse, bu sitenin sayfaları ortak veritabanı arama motoru işaretlenmiş edilmeyecektir. Bize göre öğrenmek önemlidir bir siteyi nasıl kaldırılacağını arama sunucusunun sonuçlarından ihracından sağlanan.

Sıfır endeksleme Google varyantları

Yeni kaynaklar hakkında bilgi toplamak için bir program - - arama robotu kez sayfası tarafından site sayfasını tarar, daha sonra, ayrıştırma için Google politikası gereksinimleri altında, bu dizine eklenecek zaman. indeksi ve aynı zamanda durağında arama - Ama aynı zamanda nasıl bir robots.txt aracılığıyla arama motorları için site veya parçalarını kaldırma göstermek.

Site bulunduğu sunucunun kök klasöründe, belli bir metin alanını oluşturur, bir bütün olarak kaynağın ihracı dışında tutmak için - Robots.txt söyledi. Bu bölge okumak talimatlara göre arama motorları ile tedavi ve hareket edilir.

Bir kullanıcı erişimi olsa bile Google arama motoru indeksleri sayfa, yasaklı görünümüne için unutmayın. tarayıcı 401 veya 403 ile yanıt verdiğinde "Erişim geçersiz", oldukça bunun için toplamak programlardan daha, sadece ziyaretçiler için de geçerlidir arama motoru.

anlamak için nasıl kaldırılacağını arama motoru indeksleme sitesini bir metin işaretçisi aşağıdaki satırları girmelisiniz:

Kullanıcı aracısı: Googlebot

Disallow: /

Bu dizine crawler'dır sitedeki tüm içeriğin yasağı gösterir. İşte bir siteyi nasıl kaldırılacağını tespit ikinci listeden kaynağı önbelleğe kalmaması, Google.

farklı protokoller için tarama uygulamaları

Eğer köprü için ayrı ayrı, örneğin, Google'ı indeksleme için özel kuralların uygulamak istediğiniz bireysel iletişim standartlarını, listelemek gerekirse protokoller http / https, aşağıdaki şekilde (örnek) robots.txt kayıt etmek de gereklidir.

(Http://yourserver.com/robots.txt) - Sitenizin alan adı (herhangi bir)

User-agent: * - Herhangi bir arama motoru

/ - Tam endeksleme sağlar: İzin

konuyla tamamen https protokolü bir siteyi nasıl kaldırılır

(Https://yourserver.com/robots.txt):

User-agent: *

Disallow: endeksleme açık / tam yasağı

Google SERPs gelen Hızlandırılmış kaldırma URL- kaynak adresleri

Eğer yeniden endeksleme için beklemek istemiyorsanız ve site gibi gizlemek istiyorsanız, mümkün olduğunca kısa sürede hizmet http://services.google.com/urlconsole/controller kullanmak önerilir. Ön robots.txt site sunucusu kök dizininde yerleştirilmiş olmalıdır. Bu uygun talimatları reçete edilmelidir.

nedense işaretçi kök dizininde düzenlenemez, arama motorlarından gizlemek istediğiniz hedefleri olan klasörde yeterli oluşturun. otomatik köprü adreslerini kaldırarak hizmetine bunu ve bakın sonra, Google robots.txt bir kusur dile klasörleri tarama olmayacaktır.

Bu görünmezlik süresi 3 ay boyunca ayarlanır. Bu süre sonunda, konuyla çekilen dizin, yine Google sunucu tarafından işlenecektir.

H kumaşla kısmen taramak için bir site kaldırmak için

Bir arama botu robots.txt içeriğini okurken zaman, belirli kararların içeriği temelinde yapılır. Diyelim ki anatom denilen dizinin tamamını gösteren çıkarmak istediğiniz varsayalım. Böyle düzenlemeler reçete için yeterlidir:

Kullanıcı aracısı: Googlebot

Disallow: / anatom

Ya da, örneğin, tüm resim türleri .gif dizine istiyorum. Bunu yapmak için, aşağıdaki liste eklemek:

Kullanıcı aracısı: Googlebot

Disallow: /*.gif$

İşte başka bir örnek. indeks giriş tipine eklerken onları, dinamik olarak oluşturulmuş sayfalarındaki bilgileri ayrıştırma silinecek edelim:

Kullanıcı aracısı: Googlebot

Disallow: / *?

Öyle olunca, ve arama motorları için kuralları açıklamaktadır. Başka bir şey sadece bu META etiketini kullanmak çok daha uygun olmasıdır. Ve yöneticileri genellikle arama motorlarının çalışmasını düzenleyen böyle bir standart kullanır. Ama biz gelecek makalelerde ele alacağız.