PHPCrawl

Software kuvakaappaus:
PHPCrawl
Ohjelmiston tiedot:
Versio: 0.83
Lähetyksen päivämäärä: 1 Mar 15
Kehittäjä: Uwe Hunfeld
Lupa: Vapaa
Suosio: 26

Rating: nan/5 (Total Votes: 0)

Voidaan käyttää kirjallisesti haku indeksoijat (hämähäkit), että minun verkkosivuja eri tietoja.
PHPCrawl hankkii tietoa sen konfiguroitu hakemaan ja siirtää sen tehokkaampia sovelluksia jatkojalostukseen.

Ominaisuudet :

  • Suodattimet URL ja Content-Type tiedot
  • Määritä tapoja käsitellä evästeitä
  • Määritä tapoja käsitellä robots.txt tiedostoja
  • Rajoita toimintaansa eri tavoin
  • Multi--toimintatiloista

Mitä uutta tässä julkaisussa:

  • Kiinteä vikoja:
  • Linkkejä, jotka ovat osittain urlencoded ja osittain ei jää uudelleen / koodattu oikein nyt.
  • Poistettu tarpeeton debug var_dump () kohteesta PHPCrawlerRobotsTxtParser.class.php
  • Palvelin-nimi-merkinnällä TLS / SSL toimii oikein nyt.
  • & quot; base-href & quot; -tags vuonna sivustot saavat tulkita oikein nyt uudelleen.

Mitä uutta versiossa 0.80 beta:

  • Koodi oli täysin refactored, monille PHP5-OO- koodi ja paljon koodia kirjoitettiin uudelleen.
  • Lisätty kyky käyttää käytössä useita prosesseja hämähäkki verkkosivuilla. Method & quot; goMultiProcessed () & quot; lisätty.
  • Uusi overridable menetelmä & quot; initChildProcess () & quot; Lisätään aloittamisen lapsen prosesseja käytettäessä tela in moniajoa-tilassa.
  • Implementet vaihtoehto, sisäinen SQLite välimuistia-mekanismi URL-osoitteita, joiden avulla voidaan hämähäkki erittäin suuret sivustot.
  • Method & quot; setUrlCacheType () & quot; lisätty.
  • Uusi menetelmä setWorkingDirectory () lisätään määrittelemiseksi sijainti telaketjutraktoreille tilapäinen työskentely-hakemistoon manuaalisesti. Sentähden menetelmä & quot; setTmpFile () & quot; merkitään vanhentunut (ei ole toimintoa enää).
  • Uusi menetelmä & quot; addContentTypeReceiveRule () & quot; korvaa vanhan menetelmän & quot; addReceiveContentType () & quot;.
  • toiminto & quot; addReceiveContentType () & quot; edelleen läsnä, mutta oli merkitty vanhentunut.

Vaatimukset :

  • PHP 5 tai uudempi
  • PHP OpenSSL tuki

Vastaavia ohjelmistoja

pyelasticsearch
pyelasticsearch

20 Jul 15

Tipue drop
Tipue drop

20 Jul 15

SearchBlox
SearchBlox

10 Dec 15

Fuzzysearch
Fuzzysearch

12 Apr 15

Kommentit PHPCrawl

Kommentteja ei löytynyt
Lisää kommentti
Ota kuvia!
Haku luokan mukaan