Scrapy

scrapy είναι ένα υψηλό επίπεδο web crawling και απόξεση πλαίσιο για τη σύνταξη αράχνες να ανιχνεύσουμε και να αναλύσει τις ιστοσελίδες για διάφορους σκοπούς, από την ανάκτηση πληροφοριών για την παρακολούθηση ή τον έλεγχο δικτυακών τόπων.

Χαρακτηριστικά :

• Απλό:
• scrapy σχεδιάστηκε με γνώμονα την απλότητα, παρέχοντας τα χαρακτηριστικά που χρειάζεστε χωρίς να πάρει με τον τρόπο σας


• Παραγωγική:
• Απλά γράψτε τους κανόνες για να εξαγάγετε τα δεδομένα από τις ιστοσελίδες και αφήστε scrapy ανιχνεύσουμε το σύνολο του web site σας


• Fast:
• scrapy χρησιμοποιείται σε αντιολισθητικές αλυσίδες παραγωγής για να ξύσετε εντελώς πάνω από 500 τοποθεσίες λιανικής πώλησης καθημερινά, όλα σε ένα διακομιστή


• Extensible:
• scrapy σχεδιάστηκε με επεκτασιμότητα στο μυαλό και έτσι παρέχει διάφορους μηχανισμούς για να συνδέσετε νέο κώδικα χωρίς να χρειάζεται να αγγίξει τον πυρήνα πλαισίου


• Φορητά:
• scrapy τρέχει σε Linux, Windows, Mac και BSD


• Open Source και 100% Python:
• scrapy είναι εντελώς γραμμένο σε Python, γεγονός που καθιστά πολύ εύκολο να χαράξει


• Καλά δοκιμασμένη:
• scrapy διαθέτει ένα εκτεταμένο σύνολο δοκιμών με πολύ καλή κάλυψη κώδικα

Απαιτήσεις :

• Python