PHPCrawl

Software kuvakaappaus:
PHPCrawl
Ohjelmiston tiedot:
Versio: 0.83
Lähetyksen päivämäärä: 1 Mar 15
Kehittäjä: Uwe Hunfeld
Lupa: Vapaa
Suosio: 80

Rating: 3.0/5 (Total Votes: 1)

Voidaan käyttää kirjallisesti haku indeksoijat (hämähäkit), että minun verkkosivuja eri tietoja.
PHPCrawl hankkii tietoa sen konfiguroitu hakemaan ja siirtää sen tehokkaampia sovelluksia jatkojalostukseen.

Ominaisuudet :

  • Suodattimet URL ja Content-Type tiedot
  • Määritä tapoja käsitellä evästeitä
  • Määritä tapoja käsitellä robots.txt tiedostoja
  • Rajoita toimintaansa eri tavoin
  • Multi--toimintatiloista

Mitä uutta tässä julkaisussa:

  • Kiinteä vikoja:
  • Linkkejä, jotka ovat osittain urlencoded ja osittain ei jää uudelleen / koodattu oikein nyt.
  • Poistettu tarpeeton debug var_dump () kohteesta PHPCrawlerRobotsTxtParser.class.php
  • Palvelin-nimi-merkinnällä TLS / SSL toimii oikein nyt.
  • & quot; base-href & quot; -tags vuonna sivustot saavat tulkita oikein nyt uudelleen.

Mitä uutta versiossa 0.80 beta:

  • Koodi oli täysin refactored, monille PHP5-OO- koodi ja paljon koodia kirjoitettiin uudelleen.
  • Lisätty kyky käyttää käytössä useita prosesseja hämähäkki verkkosivuilla. Method & quot; goMultiProcessed () & quot; lisätty.
  • Uusi overridable menetelmä & quot; initChildProcess () & quot; Lisätään aloittamisen lapsen prosesseja käytettäessä tela in moniajoa-tilassa.
  • Implementet vaihtoehto, sisäinen SQLite välimuistia-mekanismi URL-osoitteita, joiden avulla voidaan hämähäkki erittäin suuret sivustot.
  • Method & quot; setUrlCacheType () & quot; lisätty.
  • Uusi menetelmä setWorkingDirectory () lisätään määrittelemiseksi sijainti telaketjutraktoreille tilapäinen työskentely-hakemistoon manuaalisesti. Sentähden menetelmä & quot; setTmpFile () & quot; merkitään vanhentunut (ei ole toimintoa enää).
  • Uusi menetelmä & quot; addContentTypeReceiveRule () & quot; korvaa vanhan menetelmän & quot; addReceiveContentType () & quot;.
  • toiminto & quot; addReceiveContentType () & quot; edelleen läsnä, mutta oli merkitty vanhentunut.

Vaatimukset :

  • PHP 5 tai uudempi
  • PHP OpenSSL tuki

Vastaavia ohjelmistoja

Kommentit PHPCrawl

Kommentteja ei löytynyt
Lisää kommentti
Ota kuvia!
Haku luokan mukaan