Web sitesi indeksleme nedir? Nasıl olur? Bu ve diğer soruların cevaplarını makalede bulabilirsiniz. Web indeksleme (arama motorlarında indeksleme), bir arama motoru robotu tarafından bir site hakkında veri tabanına bilgi ekleme işlemidir ve daha sonra böyle bir prosedürden geçen web projeleri hakkında bilgi aramak için kullanılır.
Web kaynaklarıyla ilgili veriler çoğunlukla anahtar kelimelerden, makalelerden, bağlantılardan, belgelerden oluşur. Ses, görüntü vb. de dizine eklenebilir. Anahtar kelime tespit algoritmasının arama motoruna bağlı olduğu bilinmektedir.
Dizinli bilgi türlerinde (flash dosyaları, javascript) bazı sınırlamalar vardır.
Başlatma yönetimi
Bir siteyi dizine eklemek karmaşık bir işlemdir. Bunu yönetmek için (örneğin, belirli bir sayfanın eklenmesini yasaklamak için), robots.txt dosyasını ve İzin Ver, İzin Verme, Tarama gecikmesi, Kullanıcı aracısı ve diğerleri gibi talimatları kullanmanız gerekir.
Ayrıca, etiketler ve aksesuarlar dizin oluşturmak, kaynağın içeriğini Google ve Yandex robotlarından gizlemek için kullanılır (Yahoo etiketi kullanır).
Goglle arama motorunda, yeni siteler birkaç günden bir haftaya kadar ve Yandex'de - bir ila dört hafta arasında dizine eklenir.
Sitenizin arama motoru sonuç sorgularında görünmesini istiyor musunuz? Daha sonra Rambler, Yandex, Google, Yahoo vb. tarafından işlenmelidir. Arama motorlarına (örümcekler, sistemler) web sitenizin varlığı hakkında bilgi vermelisiniz, sonra siteyi tamamen veya kısmen tarayacaklar.
Birçok site yıllardır dizine eklenmedi. Üzerindeki bilgiler sahipleri dışında kimse tarafından görülmez.
İşleme yöntemleri
Bir siteyi dizine eklemek birkaç yolla yapılabilir:
- İlk seçenek manuel eklemedir. Arama motorlarının sunduğu özel formlar aracılığıyla site verilerinizi girmeniz gerekiyor.
- İkinci durumda, arama motoru robotu kendi web sitenizi bağlantılarla bulur ve dizine ekler. Sitenizi, projenize yönlendiren diğer kaynaklardan gelen bağlantılarla bulabilir. Bu yöntem en verimli olanıdır. Bir arama motoru bu şekilde bir site bulursa onu önemli görür.
Zamanlama
Siteyi indekslemek çok hızlı değil. Süreler 1-2 hafta arasında değişmektedir. Yetkili kaynaklardan gelen bağlantılar (mükemmel PR ve Titz ile), sitenin arama motoru veritabanına yerleştirilmesini önemli ölçüde hızlandırır. Bugün, Google en yavaş olarak kabul edilir, ancak 2012'ye kadar bu işi bir hafta içinde yapabilirdi. İleNe yazık ki, işler çok hızlı değişiyor. Mail.ru'nun yaklaşık altı aydır bu alandaki web siteleri ile çalıştığı biliniyor.
Bir siteyi arama motorlarında indekslemek her uzman için mümkün değildir. Halihazırda arama motorları tarafından işlenen bir sitenin veritabanına yeni sayfalar ekleme zamanlaması, içeriğinin güncellenme sıklığından etkilenir. Bir kaynakta sürekli olarak yeni bilgiler görünüyorsa, sistem bunun sık sık güncellendiğini ve insanlar için yararlı olduğunu düşünür. Bu durumda işi hızlanır.
Bir web sitesinin indeksleme sürecini web yöneticilerine özel bölümlerden veya arama motorlarından takip edebilirsiniz.
Değişiklikler
Yani, sitenin nasıl dizine eklendiğini zaten anladık. Arama motoru veritabanlarının sık sık güncellendiği unutulmamalıdır. Bu nedenle, projenizin bunlara eklenen sayfa sayısı aşağıdaki nedenlerle değişebilir (hem azalabilir hem de artabilir):
- web sitesine karşı arama motoru yaptırımları;
- Sitede hataların bulunması;
- arama motoru algoritmalarını değiştirme;
- iğrenç barındırma (projenin bulunduğu sunucunun erişilememesi) vb.
Yandex'in sık sorulan soruların yanıtları
"Yandex" birçok kullanıcı tarafından kullanılan bir arama motorudur. İşlenen araştırma taleplerinin sayısı açısından dünyanın arama sistemleri arasında beşinci sırada yer almaktadır. Bir site eklediyseniz, veritabanına eklenmesi çok uzun sürebilir.
Bir URL eklemek, onun dizine eklenmesini garanti etmez. Bu, sistem robotunun anlatıldığı yöntemlerden sadece biridir. Yeni bir kaynak hakkında. Bir siteye diğer web sitelerinden çok az bağlantı varsa veya hiç bağlantı yoksa, onu eklemek daha hızlı bulmanıza yardımcı olur.
İndeksleme gerçekleşmediyse, Yandex robotundan bunun için bir uygulama oluştururken sunucuda herhangi bir hata olup olmadığını kontrol etmeniz gerekir. Sunucu bir hata bildirirse, robot işini sonlandıracak ve gidiş-dönüş sırayla tamamlamaya çalışacaktır. Yandex çalışanları, arama motoru veritabanına sayfa ekleme hızını artıramaz.
Yandex'te bir siteyi indekslemek oldukça zor bir iştir. Bir arama motoruna nasıl kaynak ekleyeceğinizi bilmiyor musunuz? Diğer web sitelerinden bağlantı varsa, özel bir site eklemenize gerek yoktur - robot onu otomatik olarak bulur ve dizine ekler. Bu tür bağlantılarınız yoksa arama motoruna sitenin var olduğunu söylemek için "URL Ekle" formunu kullanabilirsiniz.
Bir URL eklemenin, oluşturduğunuz öğenin dizine ekleneceğini (veya dizine ekleneceğini) garanti etmediğini unutmayın.
Birçok kişi Yandex'de bir siteyi indekslemenin ne kadar sürdüğünü merak ediyor. Bu şirketin çalışanları garanti vermez ve şartları tahmin etmez. Kural olarak, robot siteyi öğrendiğinden, aramadaki sayfaları iki gün içinde, bazen birkaç hafta içinde görünür.
Süreç
"Yandex", doğruluk ve dikkat gerektiren bir arama motorudur. Site indeksleme üç bölümden oluşur:
- Arama robotu kaynak sayfaları tarar.
- İçeriksitenin (içeriği) arama sisteminin veritabanına (indeks) kaydedilir.
- 2-4 hafta içinde, veritabanını güncelledikten sonra sonuçları görebilirsiniz. Siteniz arama sonuçlarında görünecek (veya görünmeyecek).
İndeksleme kontrolü
Web sitesi indeksleme nasıl kontrol edilir? Bunu yapmanın üç yolu vardır:
- Arama çubuğuna işletmenizin adını girin (örneğin, "Yandex") ve birinci ve ikinci sayfalardaki her bağlantıyı kontrol edin. Beyin çocuğunuzun URL'sini orada bulursanız, robot görevini tamamlamıştır.
- Arama çubuğuna web sitenizin URL'sini girebilirsiniz. Kaç internet sayfasının gösterildiğini, yani dizine eklendiğini görebileceksiniz.
- Mail.ru, Google, Yandex'deki web yöneticilerinin sayfalarına kaydolun. Site doğrulamasını geçtikten sonra, kaynağınızın performansını iyileştirmek için oluşturulan indeksleme sonuçlarını ve diğer arama motoru hizmetlerini görebileceksiniz.
Yandex neden başarısız oluyor?
Google'da bir sitenin indekslenmesi şu şekilde gerçekleştirilir: robot, sitenin tüm sayfalarını, düşük kaliteli ve kaliteli, seçmeden veritabanına girer. Ancak sıralamaya yalnızca faydalı belgeler dahil edilir. Ve "Yandex", tüm web çöplerini hemen hariç tutar. Herhangi bir sayfayı dizine ekleyebilir, ancak arama motoru sonunda tüm çöpleri ortadan kaldıracaktır.
Her iki sistemin de artımlı bir dizini vardır. Her iki düşük kaliteli sayfa da bir bütün olarak web sitesinin sıralamasını etkiler. Burada iş başında olan basit bir felsefe var. Belirli bir kişinin favori kaynaklarıkullanıcı ihracında daha yüksek pozisyonlarda yer alacaktır. Ancak aynı kişi geçen sefer beğenmediği bir siteyi bulmakta zorlanacak.
Bu nedenle, öncelikle web belgelerinin kopyalarının dizine eklenmesini engellemek, boş sayfaları kontrol etmek ve düşük kaliteli içeriğin dizine eklenmesini önlemek gerekir.
Yandex'i hızlandırın
Yandex'te site indekslemeyi nasıl hızlandırabilirim? Şu adımları izleyin:
- Bilgisayarınıza Yandex tarayıcısını kurun ve sitenin sayfalarına göz atmak için kullanın.
- Yandex. Webmaster'da kaynağı yönetme haklarını onaylayın.
- Twitter'da makalenin bağlantısını yayınlayın. Yandex'in 2012'den beri bu şirketle işbirliği yaptığı biliniyor.
- Site için Yandex'den arama ekleyin. "Dizin Oluşturma" bölümünde kendi URL'lerinizi girebilirsiniz.
- "Yandex. Metrica" kodunu "Sayfaların dizine eklenmesi yasaktır" seçeneğini işaretlemeden girin.
- Yalnızca robot için var olan ve izleyiciler tarafından görülemeyen bir Site Haritası oluşturun. Doğrulama onunla başlayacak. Site Haritası adresi robots.txt dosyasına veya "Web Yöneticisi" - "Dizin Oluşturma Ayarları" - "Site Haritası Dosyaları"na uygun biçimde girilir.
Ara işlemler
Web sayfası Yandex tarafından indekslenene kadar ne yapılması gerekiyor? Yerli arama motoru siteyi birincil kaynak olarak görmelidir. Bu nedenle, makalenin yayınlanmasından önce bile içeriğinin "Belirli metinler" formuna eklenmesi zorunludur. Aksi haldeintihalciler, kaydı kaynaklarına kopyalayacak ve veritabanında ilk olacak. Sonuç olarak, yazarlar olarak tanınacaklar.
Google Veritabanı
Google için yukarıda açıkladığımız önerilerin aynısı uygundur, yalnızca hizmetler farklı olacaktır:
- Google+ (Twitter'ın yerine);
- Google Chrome;
- Programcılar için Google Araçları - "Tara" - "Googlebot gibi görün" - "Tara" seçeneği - "Dizin" seçeneği;
- Google'dan bir kaynak içinde arama yapın;
- Google Analytics (Yandex. Metrics yerine).
Yasak
Site indeksleme yasağı nedir? Bunu hem tüm sayfaya hem de ayrı bir bölümüne (bağlantı veya metin parçası) yerleştirebilirsiniz. Aslında, hem küresel bir indeksleme yasağı hem de yerel bir yasak var. Nasıl uygulanır?
Robots.txt'de arama motoru veritabanına web sitesi ekleme yasağını ele alalım. robots.txt dosyasını kullanarak bir sayfanın veya tüm kaynak başlığının dizine eklenmesini şu şekilde hariç tutabilirsiniz:
- Kullanıcı aracısı:
- İzin verme: /kolobok.html
- İzin verme: /foto/
İlk nokta, talimatların tüm PS'ler için tanımlı olduğunu söylüyor, ikincisi kolobok.html dosyasının indekslenmesinin yasak olduğunu ve üçüncüsü, foto klasörünün tüm dolgusunun dosyaya eklenmesine izin vermiyor. veri tabanı. Birden fazla sayfayı veya klasörü hariç tutmanız gerekiyorsa lütfen hepsini Robots'ta belirtin.
Belirli bir İnternet sayfasının dizine eklenmesini önlemek için robots meta etiketini kullanabilirsiniz. robots.txt dosyasından farklıdırtüm PS'lere aynı anda talimat vermesi gerçeği. Bu meta etiket, html formatının genel ilkelerini takip eder. Etiketler arasında sayfa başlığına yerleştirilmelidir. Örneğin bir yasak girişi şöyle yazılabilir:.
Ajax
Yandex, Ajax sitelerini nasıl indeksler? Günümüzde Ajax teknolojisi birçok web sitesi geliştiricisi tarafından kullanılmaktadır. Tabii ki, büyük bir potansiyeli var. Bununla, hızlı ve üretken etkileşimli web sayfaları oluşturabilirsiniz.
Ancak, arama motoru robotu web listesini kullanıcıdan ve tarayıcıdan farklı "görür". Örneğin, bir kişi hareketli olarak yüklenen İnternet sayfaları ile rahat bir arayüze bakar. Bir tarayıcı için, aynı sayfanın içeriği boş olabilir veya komut dosyalarının çalışmadığı statik HTML içeriğinin geri kalanı olarak sunulabilir.
Ajax siteleri oluşturmak içinile bir URL kullanabilirsiniz, ancak arama motoru bunu kullanmaz. Genellikle URL'ninişaretinden sonraki kısmı ayrılır. Bu dikkate alınmalıdır. Bu nedenle https://site.ru/example gibi bir URL yerine https://site.ru adresinde bulunan kaynağın ana sayfasına başvuru yapar. Bu, İnternet sayfasının içeriğinin veritabanına girmeyebileceği anlamına gelir. Sonuç olarak, arama sonuçlarında görünmeyecektir.
Ajax sitelerinin dizine eklenmesini iyileştirmek için Yandex, arama robotundaki değişiklikleri ve bu tür web sitelerinin URL'lerini işleme kurallarındaki değişiklikleri destekledi. Bugün, web yöneticileri, kaynak yapısında uygun bir şema oluşturarak dizin oluşturma ihtiyacını Yandex arama motoruna gösterebilir. Bunun için ihtiyacınız olan:
- Sayfaların URL'sindekisembolünü değiştirinüzerinde !. Artık robot, bu İnternet sayfasının içeriğinin HTML versiyonuna başvurabileceğini anlayacaktır.
- Böyle bir sayfanın içeriğinin HTML versiyonu, ! ?_escaped_fragment_=. ile değiştirildi
