Μετάβαση στο περιεχόμενο
AI crawlers · μηνιαία Ζωντανό

Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ

Πώς οι δημοφιλείς εθνικοί ιστότοποι κάθε χώρας της ΕΕ αντιμετωπίζουν στο robots.txt τα AI crawlers αναζήτησης και εκπαίδευσης, και πόσοι δημοσιεύουν llms.txt.

Ενημερώθηκε · Μήνας δείγματος 10/2026 · 4.554 από 5.400 ιστοτόπους μετρήθηκαν σε 27 χώρες · Φάκελος Τύπου

Βασικά ευρήματα

  • Το 11% των ιστοτόπων που μετρήθηκαν αποκλείει στο robots.txt τουλάχιστον ένα AI crawler αναζήτησης ή απαντήσεων.
  • Το 21% αποκλείει τουλάχιστον ένα AI crawler εκπαίδευσης.
  • Το 77% δεν αποκλείει κανένα AI crawler.
  • Το 10% των ιστοτόπων που μπορέσαμε να ελέγξουμε δημοσιεύει έγκυρο αρχείο llms.txt.
  • Ο AI crawler που αποκλείεται συχνότερα είναι ο CCBot: τον αποκλείει το 19% των ιστοτόπων που μετρήθηκαν.

11%

Αποκλείουν AI crawler αναζήτησης ή απαντήσεων

21%

Αποκλείουν AI crawler εκπαίδευσης

77%

Δεν αποκλείουν κανένα AI crawler

10%

Δημοσιεύουν έγκυρο llms.txt

Ανά χώρα

Πρώτα εμφανίζεται το σύνολο της ΕΕ και μετά οι χώρες, από το μεγαλύτερο ποσοστό στο μικρότερο.

Χώρα Μετρήθηκαν Αποκλ. AI αναζήτησης Αποκλ. AI εκπαίδευσης Κανένας αποκλ. llms.txt
ΕΕ (27 χώρες) 4.554 11% 21% 77% 10%
Ελλάδα 164 5% 12% 86% 13%
Γερμανία 176 26% 44% 55% 8%
Φινλανδία 170 22% 28% 71% 3%
Ιταλία 161 22% 33% 65% 6%
Ισπανία 162 19% 28% 72% 6%
Κάτω Χώρες 173 18% 24% 74% 11%
Γαλλία 162 17% 29% 69% 6%
Σουηδία 183 16% 22% 77% 6%
Δανία 169 15% 24% 76% 15%
Βέλγιο 170 15% 22% 75% 10%
Ιρλανδία 167 13% 22% 76% 5%
Αυστρία 163 12% 23% 74% 6%
Τσεχία 180 10% 23% 73% 9%
Πολωνία 181 8% 27% 70% 12%
Εσθονία 171 8% 14% 85% 12%
Λουξεμβούργο 170 8% 12% 87% 9%
Πορτογαλία 164 7% 18% 80% 11%
Κύπρος 158 7% 16% 83% 14%
Κροατία 180 6% 12% 86% 12%
Βουλγαρία 170 6% 15% 84% 8%
Μάλτα 143 6% 18% 80% 10%
Λετονία 167 5% 19% 81% 10%
Σλοβακία 174 5% 17% 79% 13%
Λιθουανία 159 5% 21% 75% 14%
Ρουμανία 168 4% 17% 82% 14%
Ουγγαρία 179 3% 15% 83% 9%
Σλοβενία 170 1% 7% 90% 12%
Αποκλεισμός ανά AI crawler
Crawler Χρήση Ιστότοποι που το αποκλείουν
GPTBot · OpenAI Εκπαίδευση μοντέλων 18%
OAI-SearchBot · OpenAI Αναζήτηση και απαντήσεις AI 7%
ChatGPT-User · OpenAI Αναζήτηση και απαντήσεις AI 9%
ClaudeBot · Anthropic Εκπαίδευση μοντέλων 16%
Claude-SearchBot · Anthropic Αναζήτηση και απαντήσεις AI 6%
Claude-User · Anthropic Αναζήτηση και απαντήσεις AI 6%
PerplexityBot · Perplexity Αναζήτηση και απαντήσεις AI 9%
Perplexity-User · Perplexity Αναζήτηση και απαντήσεις AI 7%
Google-Extended · Google Άλλες χρήσεις AI 15%
Applebot-Extended · Apple Άλλες χρήσεις AI 14%
meta-externalagent · Meta Άλλες χρήσεις AI 15%
meta-webindexer · Meta Αναζήτηση και απαντήσεις AI —
meta-externalfetcher · Meta Αναζήτηση και απαντήσεις AI —
ExaSearchBot · Exa Αναζήτηση και απαντήσεις AI —
ExaUser · Exa Αναζήτηση και απαντήσεις AI —
KeenableBot · Keenable Αναζήτηση και απαντήσεις AI —
Keenable-User · Keenable Αναζήτηση και απαντήσεις AI —
Amazonbot · Amazon Άλλες χρήσεις AI 17%
CCBot Εκπαίδευση μοντέλων 19%

Περιλαμβάνονται οι ιστότοποι που αποκλείουν εξ ορισμού κάθε crawler (User-agent: *): το 4% όσων μετρήθηκαν.

Ανά μήνα
Μήνας Μετρήθηκαν Αποκλ. AI αναζήτησης Αποκλ. AI εκπαίδευσης llms.txt
10/2026 4.554 11% 21% 10%
09/2026 4.523 11% 18% 8%
08/2026 4.645 10% 17% 9%

Μεθοδολογία

Δείγμα: για καθεμία από τις 27 χώρες της ΕΕ, οι πρώτοι 200 ιστότοποι με το εθνικό domain της χώρας (π.χ. .de ή .gr) ανάμεσα στους 10.000 ιστοτόπους που επισκέφθηκαν περισσότερο οι χρήστες του Chrome στη χώρα αυτή τον μήνα 10/2026. Ένας ιστότοπος ανά καταχωρημένο domain, μόνο ασφαλείς (https) ιστότοποι. Πηγή: Chrome UX Report (Google, CC BY 4.0).

Ο crawler μας δηλώνεται ως RankProofBot και ακολουθεί το robots.txt κάθε ιστοτόπου. Μία φορά τον μήνα διαβάζει το robots.txt, το /llms.txt και την αρχική σελίδα, με ένα αίτημα τη φορά ανά ιστότοπο.

Ένας ιστότοπος αποκλείει ένα crawler όταν το robots.txt του απαγορεύει την αρχική σελίδα σε αυτό το crawler σύμφωνα με τους τυπικούς κανόνες (RFC 9309), μαζί με τους κανόνες για όλα τα crawlers. 846 από τους 5.400 ιστοτόπους δεν μετρούν στα ποσοστά: το robots.txt απάντησε με έλεγχο bot, όριο αιτημάτων ή σφάλμα διακομιστή, ή ο ιστότοπος δεν ήταν προσβάσιμος.

Ένα αρχείο llms.txt θεωρείται έγκυρο όταν είναι αρχείο κειμένου που ξεκινά με επικεφαλίδα Markdown, όπως ορίζει η πρόταση llms.txt. Ελέγχθηκαν 4.065 ιστότοποι.

Κανένας ιστότοπος δεν κατονομάζεται: αποθηκεύονται και δημοσιεύονται μόνο σύνολα ανά χώρα.

Φάκελος Τύπου: παράθεση, αναφορά και αναδημοσίευση

Στοιχεία έτοιμα για παράθεση από τον πιο πρόσφατο μήνα της μελέτης, το καθένα με την πηγή του.

Στοιχεία έτοιμα για παράθεση (5)

  • «Το 11% των ιστοτόπων που μετρήθηκαν αποκλείει στο robots.txt τουλάχιστον ένα AI crawler αναζήτησης ή απαντήσεων.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)

  • «Το 21% αποκλείει τουλάχιστον ένα AI crawler εκπαίδευσης.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)

  • «Το 77% δεν αποκλείει κανένα AI crawler.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)

  • «Το 10% των ιστοτόπων που μπορέσαμε να ελέγξουμε δημοσιεύει έγκυρο αρχείο llms.txt.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)

  • «Ο AI crawler που αποκλείεται συχνότερα είναι ο CCBot: τον αποκλείει το 19% των ιστοτόπων που μετρήθηκαν.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)

Λήψη δεδομένων

Ελεύθερη επαναχρησιμοποίηση με αναφορά στο RankProof και σύνδεσμο σε αυτή τη σελίδα. CC BY 4.0

Πώς να αναφέρετε αυτό το dataset

RankProof Research, «Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ», 2026. https://rankproof.eu/el/research/ai-crawler-access-eu

Κάθε χώρα και κάθε αριθμός παραπάνω έχει δική του διεύθυνση: πατήστε το όνομα μιας χώρας και αντιγράψτε τον σύνδεσμο από τον browser, για παράδειγμα https://rankproof.eu/el/research/ai-crawler-access-eu#country-gr.

Γραμμή πηγής με σύνδεσμο (HTML)

<a href="https://rankproof.eu/el/research/ai-crawler-access-eu">Πηγή: RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ (10/2026)</a> (<a href="https://creativecommons.org/licenses/by/4.0/">CC BY 4.0</a>)

Μετράται κάθε μήνα, μόλις δημοσιευτεί η νέα μηνιαία λίστα.