Scrapy

Scrapy er et højt niveau webcrawling og skrabning ramme for at skrive edderkopper til at kravle og parse websider til alle former for formål, fra informationssøgning til overvågning eller teste websteder.

Egenskaber :

• Enkel:
• Scrapy er designet med enkelthed for øje, ved at give de funktioner, du har brug for uden at komme i vejen for dig


• Produktiv:
• Bare skriv reglerne til at udtrække data fra websider og lad Scrapy gennemsøge hele hjemmeside for dig


• Fast:
• Scrapy bruges i produktionen crawlere til helt skrabe mere end 500 detailhandler sites dagligt, alle i én server


• Extensible:
• Scrapy er designet med mulighed for senere udvidelser og så det giver flere mekanismer til at sætte ny kode uden at skulle røre rammer kernen


• Bærbar:
• Scrapy kører på Linux, Windows, Mac og BSD


• Open Source og 100% Python:
• Scrapy er fuldstændigt skrevet i Python, hvilket gør det meget nemt at hacke


• velafprøvet:
• Scrapy har en omfattende test suite med meget god kode dækning

Krav :

• Python