AI crawler erişimi

Yapay Zeka Tarayıcıları için Shopify robots.txt

Shopify robots.txt, AI tarayıcı erişimi, özel yollar, Googlebot riski ve aracılı alışveriş görünürlüğü için izleme konusunda pratik bir kılavuz.

ShopGox Editorial23.05.2026tr

Yapay zeka alışveriş sistemleri tarayamayacakları, okuyamayacakları veya güvenemeyecekleri şeyleri öneremez. Shopify mağazaları için robots.txt, ürün kataloğunuz ile arama motorları, yapay zeka asistanları, alışveriş acenteleri ve ticari tarayıcılar arasındaki ilk kapılardan biridir.

Amaç her şeye izin vermek değil. Amaç, önemli ürün, koleksiyon, resim ve yapılandırılmış veri yollarını erişilebilir tutarken, keşfe yardımcı olmayan sepet, ödeme, hesap, arama, filtre ve dahili yardımcı program yollarını korumaktır.

Robots.txt içerik kalitesini değil taramayı kontrol eder

Robots.txt, uyumlu tarayıcılara hangi yolları istememeleri gerektiğini söyler. Ürün şeması eklemez, yinelenen varyantları düzeltmez, ayrıntılı açıklamaları iyileştirmez veya dizine eklemeyi garanti etmez. Bunu, teknik SEO'nun yerine geçecek bir araç olarak değil, tarayıcılar için erişim kontrolü olarak değerlendirin.

Shopify'ın varsayılan olarak genellikle iyi işlediği şey

Açık bir nedeniniz olmadığı sürece bu varsayılanları koruyun

check_circleÜrün ve koleksiyon sayfaları taranabilir durumda kalmalıdır.
check_circleÜrün içeriğini oluşturmak için gereken statik varlıklar taranabilir durumda kalmalıdır.
check_circleSepet, ödeme, hesap ve dahili arama yolları genellikle tarayıcı erişimine ihtiyaç duymaz.
check_circleSite Haritası yolları keşfedilebilir durumda kalmalıdır.
check_circleGoogle Arama erişimini kasıtlı olarak kaldırmak istemediğiniz sürece Googlebot engellenmemelidir.

Shopify için mantıklı bir AI tarayıcı politikası

Visual summary diagram for Shopify robots.txt for AI Crawlers: What to Allow, Block, and Monitor.

Büyüme aşamasındaki bir e-ticaret sitesi için dengeli bir politika genellikle genel bir engellemeden daha iyidir. Keşif değeri oluşturabilen, özel ve düşük değerli yolları koruyabilen ve anormal trafik açısından günlükleri veya CDN analizlerini izleyebilen tarayıcılara izin verin.

Shopify için mantıklı bir AI tarayıcı politikası

Yol türü	Önerilen politika	Neden önemlidir
Ürün sayfaları	İzin ver	Yapay zeka alışveriş sistemlerinin ihtiyaç duyduğu ticari gerçekleri içerirler.
Koleksiyon sayfaları	İzin ver	Tarayıcıların kategorileri, envanter gruplamalarını ve dahili bağlantıları anlamalarına yardımcı olurlar.
Ürün resimleri	İzin ver	Resimler görsel aramayı, önizlemeleri ve daha zengin ürün anlayışını destekler.
Sepet ve ödeme	İzin verme	Keşfetmeye yardımcı olmazlar ve tarama atıklarına neden olabilirler.
Müşteri hesabı sayfaları	İzin verme	Özeldirler veya herkese açık olarak keşfedilmeleri açısından düşük değerlidirler.
Dahili arama ve filtrelenen URL'ler	Genellikle izin verme	Yinelenen veya sonsuz tarama yolları oluşturabilirler.
Site Haritası	İzin ver	Tarayıcıların kanonik URL'leri verimli bir şekilde bulmasına yardımcı olur.

Yapay zeka tarayıcıları için örnek Shopify robots.txt kuralları

Shopify mağazaları, temanın robots.txt.liquid şablonu aracılığıyla robot kurallarını özelleştirebilir. Özel kuralları küçük, belgelenmiş ve geri alınması kolay tutun. Başka bir mağazadan tarayıcı engellenenler listesini körü körüne kopyalamayın.

User-agent: *
Disallow: /cart
Disallow: /checkout
Disallow: /account
Disallow: /search
Disallow: /*?*sort_by=
Disallow: /*?*filter.

User-agent: Googlebot
Allow: /

User-agent: GPTBot
Disallow: /cart
Disallow: /checkout
Disallow: /account

User-agent: Google-Extended
Disallow: /

Google-Genişletilmiş, Googlebot ile aynı değildir

Google-Genişletilmiş, belirli Google AI eğitimi ve ürün kullanım örnekleri için ayrı bir kontroldür. Google-Extulated'i engellemek, Googlebot'u engellemekten farklıdır. Önceliğiniz Arama görünürlüğü ise bunları hiçbir zaman birbirinin yerine geçebilirmiş gibi görmeyin.

Robots.txt değiştirildikten sonra ne izlenecek

Değişiklik sonrası kontroller

1/robots.txt dosyasını açın ve oluşturulan son dosyanın beklediğiniz gibi olduğunu onaylayın.
2Ürün ve koleksiyon URL'lerinin Googlebot için engellenmediğini doğrulayın.
3Site haritası URL'lerinin hâlâ erişilebilir olup olmadığını kontrol edin.
4Temsili ürün sayfalarında tarayıcı erişim kontrolü çalıştırın.
5Tarama ani artışları için sunucu, CDN veya Shopify analizlerini izleyin.
6Hızlıca geri dönebilmek için her robots.txt değişikliğinin tarihli bir notunu tutun.

Yaygın Shopify robots.txt hataları

errorÖnemli değişken URL'ler parametrelere bağlı olduğunda tüm sorgu parametreleri engelleniyor.
errorÜrün önizlemeleri için gereken resim klasörlerinin engellenmesi.
errorYalnızca AI eğitim tarayıcılarını engellemeye çalışırken Googlebot'u engelleme.
errorRobots.txt dosyasının yinelenen içeriği tek başına düzeltebileceğini varsayıyoruz.
errorBazı tarayıcıların robots.txt dosyasını göz ardı edebileceğini veya değişen kullanıcı aracısı dizelerini kullanabileceğini unutmak.

FAQ

Shopify mağazaları AI tarayıcılarını engellemeli mi?keyboard_arrow_down

Varsayılan olarak değil. Yapay zeka alışveriş görünürlüğü önemliyse, alışveriş sepeti, ödeme, hesap, arama ve yinelenen filtreler gibi özel veya düşük değerli yolları engellerken tarayıcının herkese açık ürün ve koleksiyon sayfalarına erişmesine izin verin.

Robots.txt, Shopify ürün sayfalarını Google'dan kaldırabilir mi?keyboard_arrow_down

Robots.txt taramayı kontrol eder. Google bir URL'yi zaten biliyorsa taramayı engellemek, temiz bir noindex stratejisiyle aynı şey değildir. Google Arama için Googlebot'un önemli ürün sayfalarını engellememesine özellikle dikkat edin.

Shopify, robots.txt özelleştirmesine izin veriyor mu?keyboard_arrow_down

Evet, Shopify, temanın robots.txt.liquid şablonu aracılığıyla robots.txt özelleştirmesini destekler. Değişiklikleri ölçülü tutun ve oluşturulan /robots.txt dosyasını yayınladıktan sonra test edin.

Yapay zeka alışverişi için hangi Shopify URL'leri taranabilir kalmalıdır?keyboard_arrow_down

Ürün sayfaları, koleksiyon sayfaları, ürün resimleri, standart URL'ler ve site haritası URL'leri, ürün gerçeklerini, kategori bağlamını ve keşif bağlantılarını taşıdıkları için genellikle taranabilir durumda kalmalıdır.

İlgili araçlar

AI E-ticaret için Tarayıcı Erişim Denetleyicisi Product Sayfalar

AI tarayıcı erişimi, robots.txt kuralları, meta robotlar, X-Robots-Tag, site haritası keşfi, canonical sinyalleri ve AI aramaya hazır olma durumu için e-ticaret ürün sayfalarını kontrol edin.

Ürün Sayfaları için Shopify Şema Denetleyicisi

Ürün sayfaları için ücretsiz Shopify şema denetleyicisi. Ürün şemasını, varyant tekliflerini, uygulamaya eklenen meta verileri, Shopify Markets sinyallerini ve AI arama hazırlığını tarayın.

SEO ve AI Arama Hazırlığı için Shopify Ürün Sayfalarını Tarayın

Şema çakışmaları, değişken veriler, uygulamaya eklenen meta veriler, Markets hreflang ve AI aramaya hazır olma durumu için ücretsiz Shopify ürün sayfası tarayıcısı.

İlgili yazılar

Shopify Temsilci Ticaretine Hazırlık Kontrol Listesi

Shopify ürün sayfalarını AI müşterilerinin ve satın alma temsilcilerinin anlamasını, karşılaştırmasını ve önermesini kolaylaştıracak pratik bir kontrol listesi.

Shopify'da Ürün Şeması Nasıl Eklenir

Temalar, SEO uygulamaları, inceleme uygulamaları, varyantlar veya Pazarlarla çakışma yaratmadan Ürün ve Teklif JSON-LD'yi eklemeye yönelik pratik bir Shopify kılavuzu.