Μετάβαση στο περιεχόμενο
210 440 8777

Γλωσσάρι, SEO & Analytics

Τι είναι το Crawl Budget;

Crawl budget είναι ο αριθμός σελίδων που η Google (ή άλλη μηχανή αναζήτησης) είναι διατεθειμένη να σαρώσει στο site σας σε μια δεδομένη χρονική περίοδο, καθορισμένος από crawl rate limit και crawl demand.

Επίσης γνωστό ως: προϋπολογισμός crawling, crawling budget, προϋπολογισμός σάρωσης

Crawl Budget, SEO & Analytics | Γλωσσάρι Symbols House of Brands

Ορισμός

Το crawl budget είναι ο συνδυασμός δύο μεγεθών: του crawl rate limit (πόσες αιτήσεις μπορεί ο Googlebot να στείλει στον server σας χωρίς να τον υπερφορτώσει) και του crawl demand (πόσο η Google θεωρεί ότι αξίζει να ξανασαρώσει τις σελίδες σας). Πρακτικά ορίζει πόσες σελίδες θα σαρώνει η Google καθημερινά και ποιες. Για μικρά sites (< 1.000 σελίδες) πρακτικά δεν είναι πρόβλημα. Για μεγάλα sites, eshop με 10.000+ SKUs, news sites και enterprise platforms, γίνεται κρίσιμος παράγοντας: αν η Google σαρώνει σελίδες χαμηλής αξίας ή διπλότυπες, δεν προλαβαίνει να ανακαλύψει και να indexάρει τις σημαντικές.

Πού χρησιμοποιείται

Σε eshop με 5.000+ προϊόντα, news sites με ημερήσια δημοσίευση, marketplaces, real estate portals, job boards, και οποιοδήποτε site με χιλιάδες σελίδες. Στη Symbols House of Brands το crawl budget είναι σημαντικό μέρος του [technical SEO audit](/glossario/technical-seo/) για κάθε [eshop](/kataskevi-eshop/) υλοποίησή μας, ειδικά σε migrations με πολλαπλά product variants, filter combinations, και faceted navigation URLs που πολλαπλασιάζουν το URL space.

Πλεονεκτήματα

  • Σε βελτιστοποιημένο crawl budget, οι νέες και ενημερωμένες σελίδες indexάρονται ταχύτερα (ώρες αντί για ημέρες)
  • Καλύτερη κατανομή Googlebot resources σε high-value σελίδες
  • Μειωμένο server load από αχρείαστες crawl requests σε low-value URLs
  • Ταχύτερη ανίχνευση νέων προϊόντων σε eshop και άρθρων σε news sites
  • Καλύτερα Search Console indexing metrics και faster ranking response σε αλλαγές

Συνηθισμένα λάθη

  • Faceted navigation με άπειρα filter combinations που παράγουν εκατομμύρια crawlable URLs
  • Duplicate URLs μέσω session IDs, tracking parameters (?utm=…), ή sort/filter params
  • Slow server response times (>2s) που ρίχνουν το crawl rate limit
  • Λανθασμένο robots.txt που είτε αποκλείει σημαντικά paths είτε επιτρέπει crawling σε άχρηστα
  • Παλαιά 404 και soft 404 σελίδες που εξακολουθούν να σαρώνονται
  • Redirect chains (301 → 301 → 200) που ξοδεύουν requests χωρίς λόγο
  • Λείπει sitemap.xml ή περιέχει URLs με noindex/canonical σε άλλη σελίδα

Ενδεικτικό κόστος

Το crawl budget optimization είναι κομμάτι του τεχνικού SEO. Από €800 για crawl audit + βασικές διορθώσεις σε eshop 1.000-5.000 σελίδων, έως €3.500+ για ολοκληρωμένο crawl budget project σε enterprise site με 50.000+ URLs (log file analysis, robots.txt strategy, canonical hygiene, faceted navigation cleanup, redirect chain reduction).

Τιμές με αναφορά:

Πότε αξίζει

Αν έχετε site με 5.000+ σελίδες και βλέπετε νέες σελίδες να μην indexάρονται εγκαίρως, όταν το Search Console αναφέρει «Discovered, not indexed» ή «Crawled, not indexed» σε μαζικές ποσότητες, όταν κάνετε migration μεγάλου eshop, ή όταν προσθέτετε faceted navigation και θέλετε να αποφύγετε explosion των crawlable URLs.

Συχνές ερωτήσεις

Έχει το site μου πρόβλημα crawl budget;
Ελέγξτε στο Search Console: Settings → Crawl stats. Αν βλέπετε crawl requests/day χαμηλότερα από το μέγεθος του site (π.χ. 500 requests/day για site 20.000 σελίδων) και ταυτόχρονα πολλές σελίδες σε «Discovered, not indexed», πιθανόν έχετε πρόβλημα. Επίσης έλεγχος log files με tool όπως Screaming Frog Log Analyzer.
Πόσες σελίδες σαρώνει η Google καθημερινά στο site μου;
Ρίξτε ματιά στο Search Console → Settings → Crawl stats → Total crawl requests. Το νούμερο κυμαίνεται από μερικές δεκάδες (μικρά sites) μέχρι εκατομμύρια (μεγάλα eshop και news sites). Το ζητούμενο δεν είναι απλά «περισσότερα» αλλά «σωστότερα»: crawls σε high-value σελίδες, όχι σε άχρηστα URLs.
Επηρεάζει το crawl budget το ranking μου;
Έμμεσα, ναι. Αν οι σημαντικές σελίδες δεν σαρώνονται εγκαίρως, δεν indexάρονται εγκαίρως, άρα δεν κατατάσσονται εγκαίρως. Επιπλέον, ο Google αλγόριθμος «αντικρούει» τα updates σας πιο αργά. Το crawl budget δεν είναι direct ranking factor αλλά δουλεύει σαν bottleneck.
Πώς μειώνω τον αριθμό των crawlable URLs σε site με faceted navigation;
Τρεις τακτικές: (1) rel="nofollow" σε filter links που δεν πρέπει να indexάρονται, (2) robots.txt disallow σε συγκεκριμένα URL patterns (π.χ. /category/?color=), (3) canonical tag σε όλα τα filtered URLs που δείχνει στην base category. Επίσης, καθαρίστε session IDs και tracking parameters από τα εσωτερικά links.
Ποιος έχει το μεγαλύτερο crawl budget;
Sites με υψηλή αυθεντικότητα (authority), γρήγορο server response, καθαρή δομή, και σταθερή δημοσίευση νέου περιεχομένου. Ένα Wikipedia λαμβάνει εκατομμύρια crawl requests/ημέρα. Ένα νέο site μπορεί να παίρνει 50-200. Δεν αγοράζεται, χτίζεται με σταθερότητα και quality signals.
Πώς επηρεάζει η ταχύτητα του server το crawl budget;
Άμεσα. Αν ο server σας απαντά αργά (>2s TTFB), ο Googlebot θα μειώσει τη συχνότητα crawls για να μη σας υπερφορτώσει. Αντίθετα, γρήγορος server (< 500ms TTFB) → Googlebot αυξάνει τη συχνότητα. Γι' αυτό static sites σε Cloudflare edge τυπικά έχουν καλύτερο crawl behavior από βαριά WordPress installations.
Χρειάζομαι crawl budget optimization σε site 300 σελίδων;
Πιθανότατα όχι. Για site < 1.000 σελίδες η Google σχεδόν πάντα σαρώνει τα πάντα εντός λίγων ημερών. Crawl budget optimization αρχίζει να αποδίδει σε 5.000+ σελίδες, και γίνεται κρίσιμο σε 50.000+ URLs (μεγάλα eshop, marketplaces, news sites).
Πώς κάνω log file analysis για crawl budget;
Κατεβάζετε τα server access logs (Apache, Nginx, ή Cloudflare) για ένα διάστημα 7-30 ημερών, τα φιλτράρετε για user-agent Googlebot, και αναλύετε ποια URLs σαρώνονται, πόσο συχνά, και τι status codes επιστρέφουν. Tools όπως Screaming Frog Log File Analyzer, Botify, ή OnCrawl το κάνουν εύκολο. Δίνει την πιο ακριβή εικόνα του τι πραγματικά συμβαίνει.

Έτοιμοι να ξεκινήσουμε;

Πες μας λίγα λόγια για το έργο σου. Θα σου στείλουμε σταθερή προσφορά σε 24 ώρες.