Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ
Πώς οι δημοφιλείς εθνικοί ιστότοποι κάθε χώρας της ΕΕ αντιμετωπίζουν στο robots.txt τα AI crawlers αναζήτησης και εκπαίδευσης, και πόσοι δημοσιεύουν llms.txt.
Ενημερώθηκε · Μήνας δείγματος 10/2026 · 4.554 από 5.400 ιστοτόπους μετρήθηκαν σε 27 χώρες · Φάκελος Τύπου
Βασικά ευρήματα
- Το 11% των ιστοτόπων που μετρήθηκαν αποκλείει στο robots.txt τουλάχιστον ένα AI crawler αναζήτησης ή απαντήσεων.
- Το 21% αποκλείει τουλάχιστον ένα AI crawler εκπαίδευσης.
- Το 77% δεν αποκλείει κανένα AI crawler.
- Το 10% των ιστοτόπων που μπορέσαμε να ελέγξουμε δημοσιεύει έγκυρο αρχείο llms.txt.
- Ο AI crawler που αποκλείεται συχνότερα είναι ο CCBot: τον αποκλείει το 19% των ιστοτόπων που μετρήθηκαν.
11%
Αποκλείουν AI crawler αναζήτησης ή απαντήσεων
21%
Αποκλείουν AI crawler εκπαίδευσης
77%
Δεν αποκλείουν κανένα AI crawler
10%
Δημοσιεύουν έγκυρο llms.txt
Ανά χώρα
Πρώτα εμφανίζεται το σύνολο της ΕΕ και μετά οι χώρες, από το μεγαλύτερο ποσοστό στο μικρότερο.
| Χώρα | Μετρήθηκαν | Αποκλ. AI αναζήτησης | Αποκλ. AI εκπαίδευσης | Κανένας αποκλ. | llms.txt |
|---|---|---|---|---|---|
| ΕΕ (27 χώρες) | 4.554 | 11% | 21% | 77% | 10% |
| Ελλάδα | 164 | 5% | 12% | 86% | 13% |
| Γερμανία | 176 | 26% | 44% | 55% | 8% |
| Φινλανδία | 170 | 22% | 28% | 71% | 3% |
| Ιταλία | 161 | 22% | 33% | 65% | 6% |
| Ισπανία | 162 | 19% | 28% | 72% | 6% |
| Κάτω Χώρες | 173 | 18% | 24% | 74% | 11% |
| Γαλλία | 162 | 17% | 29% | 69% | 6% |
| Σουηδία | 183 | 16% | 22% | 77% | 6% |
| Δανία | 169 | 15% | 24% | 76% | 15% |
| Βέλγιο | 170 | 15% | 22% | 75% | 10% |
| Ιρλανδία | 167 | 13% | 22% | 76% | 5% |
| Αυστρία | 163 | 12% | 23% | 74% | 6% |
| Τσεχία | 180 | 10% | 23% | 73% | 9% |
| Πολωνία | 181 | 8% | 27% | 70% | 12% |
| Εσθονία | 171 | 8% | 14% | 85% | 12% |
| Λουξεμβούργο | 170 | 8% | 12% | 87% | 9% |
| Πορτογαλία | 164 | 7% | 18% | 80% | 11% |
| Κύπρος | 158 | 7% | 16% | 83% | 14% |
| Κροατία | 180 | 6% | 12% | 86% | 12% |
| Βουλγαρία | 170 | 6% | 15% | 84% | 8% |
| Μάλτα | 143 | 6% | 18% | 80% | 10% |
| Λετονία | 167 | 5% | 19% | 81% | 10% |
| Σλοβακία | 174 | 5% | 17% | 79% | 13% |
| Λιθουανία | 159 | 5% | 21% | 75% | 14% |
| Ρουμανία | 168 | 4% | 17% | 82% | 14% |
| Ουγγαρία | 179 | 3% | 15% | 83% | 9% |
| Σλοβενία | 170 | 1% | 7% | 90% | 12% |
Αποκλεισμός ανά AI crawler
| Crawler | Χρήση | Ιστότοποι που το αποκλείουν |
|---|---|---|
GPTBot · OpenAI | Εκπαίδευση μοντέλων | 18% |
OAI-SearchBot · OpenAI | Αναζήτηση και απαντήσεις AI | 7% |
ChatGPT-User · OpenAI | Αναζήτηση και απαντήσεις AI | 9% |
ClaudeBot · Anthropic | Εκπαίδευση μοντέλων | 16% |
Claude-SearchBot · Anthropic | Αναζήτηση και απαντήσεις AI | 6% |
Claude-User · Anthropic | Αναζήτηση και απαντήσεις AI | 6% |
PerplexityBot · Perplexity | Αναζήτηση και απαντήσεις AI | 9% |
Perplexity-User · Perplexity | Αναζήτηση και απαντήσεις AI | 7% |
Google-Extended · Google | Άλλες χρήσεις AI | 15% |
Applebot-Extended · Apple | Άλλες χρήσεις AI | 14% |
meta-externalagent · Meta | Άλλες χρήσεις AI | 15% |
meta-webindexer · Meta | Αναζήτηση και απαντήσεις AI | — |
meta-externalfetcher · Meta | Αναζήτηση και απαντήσεις AI | — |
ExaSearchBot · Exa | Αναζήτηση και απαντήσεις AI | — |
ExaUser · Exa | Αναζήτηση και απαντήσεις AI | — |
KeenableBot · Keenable | Αναζήτηση και απαντήσεις AI | — |
Keenable-User · Keenable | Αναζήτηση και απαντήσεις AI | — |
Amazonbot · Amazon | Άλλες χρήσεις AI | 17% |
CCBot | Εκπαίδευση μοντέλων | 19% |
Περιλαμβάνονται οι ιστότοποι που αποκλείουν εξ ορισμού κάθε crawler (User-agent: *): το 4% όσων μετρήθηκαν.
Ανά μήνα
| Μήνας | Μετρήθηκαν | Αποκλ. AI αναζήτησης | Αποκλ. AI εκπαίδευσης | llms.txt |
|---|---|---|---|---|
| 10/2026 | 4.554 | 11% | 21% | 10% |
| 09/2026 | 4.523 | 11% | 18% | 8% |
| 08/2026 | 4.645 | 10% | 17% | 9% |
Μεθοδολογία
Δείγμα: για καθεμία από τις 27 χώρες της ΕΕ, οι πρώτοι 200 ιστότοποι με το εθνικό domain της χώρας (π.χ. .de ή .gr) ανάμεσα στους 10.000 ιστοτόπους που επισκέφθηκαν περισσότερο οι χρήστες του Chrome στη χώρα αυτή τον μήνα 10/2026. Ένας ιστότοπος ανά καταχωρημένο domain, μόνο ασφαλείς (https) ιστότοποι. Πηγή: Chrome UX Report (Google, CC BY 4.0).
Ο crawler μας δηλώνεται ως RankProofBot και ακολουθεί το robots.txt κάθε ιστοτόπου. Μία φορά τον μήνα διαβάζει το robots.txt, το /llms.txt και την αρχική σελίδα, με ένα αίτημα τη φορά ανά ιστότοπο.
Ένας ιστότοπος αποκλείει ένα crawler όταν το robots.txt του απαγορεύει την αρχική σελίδα σε αυτό το crawler σύμφωνα με τους τυπικούς κανόνες (RFC 9309), μαζί με τους κανόνες για όλα τα crawlers. 846 από τους 5.400 ιστοτόπους δεν μετρούν στα ποσοστά: το robots.txt απάντησε με έλεγχο bot, όριο αιτημάτων ή σφάλμα διακομιστή, ή ο ιστότοπος δεν ήταν προσβάσιμος.
Ένα αρχείο llms.txt θεωρείται έγκυρο όταν είναι αρχείο κειμένου που ξεκινά με επικεφαλίδα Markdown, όπως ορίζει η πρόταση llms.txt. Ελέγχθηκαν 4.065 ιστότοποι.
Κανένας ιστότοπος δεν κατονομάζεται: αποθηκεύονται και δημοσιεύονται μόνο σύνολα ανά χώρα.
Φάκελος Τύπου: παράθεση, αναφορά και αναδημοσίευση
Στοιχεία έτοιμα για παράθεση από τον πιο πρόσφατο μήνα της μελέτης, το καθένα με την πηγή του.
Στοιχεία έτοιμα για παράθεση (5)
-
«Το 11% των ιστοτόπων που μετρήθηκαν αποκλείει στο robots.txt τουλάχιστον ένα AI crawler αναζήτησης ή απαντήσεων.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)
-
«Το 21% αποκλείει τουλάχιστον ένα AI crawler εκπαίδευσης.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)
-
«Το 77% δεν αποκλείει κανένα AI crawler.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)
-
«Το 10% των ιστοτόπων που μπορέσαμε να ελέγξουμε δημοσιεύει έγκυρο αρχείο llms.txt.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)
-
«Ο AI crawler που αποκλείεται συχνότερα είναι ο CCBot: τον αποκλείει το 19% των ιστοτόπων που μετρήθηκαν.» — RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ, 10/2026 (4.554 ιστότοποι σε 27 χώρες της ΕΕ)
Λήψη δεδομένων
Ελεύθερη επαναχρησιμοποίηση με αναφορά στο RankProof και σύνδεσμο σε αυτή τη σελίδα. CC BY 4.0
Πώς να αναφέρετε αυτό το dataset
RankProof Research, «Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ», 2026. https://rankproof.eu/el/research/ai-crawler-access-eu
Κάθε χώρα και κάθε αριθμός παραπάνω έχει δική του διεύθυνση: πατήστε το όνομα μιας χώρας και αντιγράψτε τον σύνδεσμο από τον browser, για παράδειγμα https://rankproof.eu/el/research/ai-crawler-access-eu#country-gr.
Γραμμή πηγής με σύνδεσμο (HTML)
<a href="https://rankproof.eu/el/research/ai-crawler-access-eu">Πηγή: RankProof, Αποκλεισμός AI crawlers στους ιστοτόπους της ΕΕ (10/2026)</a> (<a href="https://creativecommons.org/licenses/by/4.0/">CC BY 4.0</a>) Δωρεάν εργαλεία για το θέμα
Οδηγοί για το θέμα
Μετράται κάθε μήνα, μόλις δημοσιευτεί η νέα μηνιαία λίστα.