Scrapy

Scrapy on korkea web indeksoinnin ja kaapimalla puitteet kirjoittaa robotit indeksoida ja jäsentää verkkosivujen kaikenlaisia ​​tarkoituksiin, mistä tiedonhaku seurantaan tai testaus sivustoja.

Ominaisuudet :

• Yksinkertainen:
• Scrapy on suunniteltu yksinkertaisuus mielessä, antamalla tarvittavat ominaisuudet saamatta omalla tavalla


• Tuottava:
• Kirjoita vain sääntöjä poimia tietoja verkkosivuilta ja anna Scrapy indeksoi koko sivuston sinulle


• Fast:
• Scrapy käytetään tuotannossa indeksointitoiminnoille täysin haalimaan yli 500 jälleenmyyjä sivustoja päivittäin, kaikki yhdessä palvelin


• Extensible:
• Scrapy on suunniteltu laajennettavuutta mielessä ja niin se tarjoaa useita mekanismeja plug uuden koodin koskematta puitteet ydin


• Kannettava:
• Scrapy toimii Linux, Windows, Mac ja BSD


• Open Source ja 100% Python:
• Scrapy on kirjoitettu Pythonilla, mikä tekee siitä erittäin helppo hakata
  
• Hyvin testattu:
• Scrapy on laaja testi sviitti erittäin hyvää koodia kattavuus

Vaatimukset :

• Python