The Wall
Every monitored site × AI crawlers and search engines, as of 2025-09-01 — 1 of 46 sites block at least one AI crawler by name.
All cohorts
Top 1000 websites
US 500
Nasdaq 100
AI models
Cybersecurity
SEO & AI search
Creative rights-holders
Knowledge & UGC
National indices
Banks & fintech
E-commerce
European companies
Social Networks
Governments
Publishers
Show all bots
blocked by name
restricted by name
via wildcard only
allowed
AI crawlers
Search engines
| Site | GPTBot | ChatGPT-User | ClaudeBot | anthropic-ai | CCBot | Google-Extended | Applebot-Extended | PerplexityBot | Bytespider | Amazonbot | meta-externalagent | FacebookBot | Googlebot | Bingbot | DuckDuckBot | Baiduspider | YandexBot | Applebot |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 🇪🇸 Banco Santander | ||||||||||||||||||
| 🇬🇧 HSBC | ||||||||||||||||||
| 🇺🇸 JPMorgan Chase | ||||||||||||||||||
| 🇺🇸 Bank of America | ||||||||||||||||||
| 🇺🇸 Citigroup | ||||||||||||||||||
| 🇺🇸 Wells Fargo | ||||||||||||||||||
| 🇺🇸 Goldman Sachs | ||||||||||||||||||
| 🇺🇸 Morgan Stanley | ||||||||||||||||||
| 🇬🇧 Barclays | ||||||||||||||||||
| 🇬🇧 Standard Chartered | ||||||||||||||||||
| 🇺🇸 American Express | ||||||||||||||||||
| 🇨🇦 Royal Bank of Canada | ||||||||||||||||||
| 🇨🇦 Toronto-Dominion Bank | ||||||||||||||||||
| 🇦🇺 Commonwealth Bank | ||||||||||||||||||
| 🇦🇺 ANZ | ||||||||||||||||||
| 🇺🇸 Stripe | ||||||||||||||||||
| 🇨🇭 UBS | ||||||||||||||||||
| 🇩🇪 Deutsche Bank | ||||||||||||||||||
| 🇫🇷 BNP Paribas | ||||||||||||||||||
| 🇬🇧 Wise | ||||||||||||||||||
| 🇫🇷 Credit Agricole | ||||||||||||||||||
| 🇬🇧 Revolut | ||||||||||||||||||
| 🇬🇧 Monzo | ||||||||||||||||||
| 🇳🇱 ING Group | ||||||||||||||||||
| 🇬🇧 Starling Bank | ||||||||||||||||||
| 🇩🇪 N26 | ||||||||||||||||||
| 🇸🇪 Klarna | ||||||||||||||||||
| 🇫🇷 Qonto | ||||||||||||||||||
| 🇧🇷 Nubank | ||||||||||||||||||
| 🇺🇸 Robinhood | ||||||||||||||||||
| 🇺🇸 Chime | ||||||||||||||||||
| 🇺🇸 SoFi | ||||||||||||||||||
| 🇺🇸 Plaid | ||||||||||||||||||
| 🇺🇸 Coinbase | ||||||||||||||||||
| 🇺🇸 Kraken | ||||||||||||||||||
| 🇺🇸 Affirm | ||||||||||||||||||
| 🇺🇸 Brex | ||||||||||||||||||
| 🇺🇸 Ramp | ||||||||||||||||||
| 🇺🇸 Mercury | ||||||||||||||||||
| 🇨🇦 Wealthsimple | ||||||||||||||||||
| 🇺🇸 Capital One Financial | ||||||||||||||||||
| 🇳🇱 Adyen | ||||||||||||||||||
| 🇺🇸 Visa | ||||||||||||||||||
| 🇺🇸 Mastercard | ||||||||||||||||||
| 🇺🇸 PayPal Holdings | ||||||||||||||||||
| 🇺🇸 Block |