Apache Flume

Apache Flume kehitettiin välittäjänä, joka kerää tukit sovelluksesta ja toimittaa sen toiseen.
Sen pitäisi toimia useimpien Java-sovelluksia ja kehittäjien pitäisi olla varma, Flume suojattu tietojen katoamista vastaan ​​ja palvelun kaatumisesta.
Lokitietoja virtautetaan reaaliaikaisesti kautta vikasietoisia järjestelmiä tukee monien vikasietoisuuden ja hyödyntämistä mekanismeja.
Koska Flume kulkee yhdestä keskeisestä sijainnista, kehittäjät voivat helposti hallita sitä ja hyödyntää resurssejaan tilastoja ja analytiikan tarkoituksiin.
Piilotettu ominaisuus Flume on sen todellinen "data-agnostikko" järjestelmään. Tämä tarkoittaa, että voit helposti vaihtaa tietovirran lähteen alkaen lähdöistä mitään muuta ja käytä Flume turvallisesti yhteenlaskettu tietoa eri tyyppisiä palveluja.
Näitä voivat olla sähköpostiviestejä, sosiaalisen median puroihin, verkkoliikenteen, ja niin edelleen.

Mikä on uusi tässä julkaisussa:

• poistaminen SSLv2Hello aiheuttaa Java 6 asiakkaita rikkoa
• Ota SSLv2Hello varten Avro Lähde ja NettyAvroRpcClient
• Ota SSLv2Hello for HttpSource
• Lisätty dev-tuki src tarrapallon
• Unit test TestHTTPSource.java epäonnistui IBM JDK 1.7
• HTTP Source pitäisi pystyä estämään ennalta protokollien.
• HTTPS epäonnistuvat Java 6
• Salli kokoonpano mahdollisti pöytäkirjojen Avro lähde ja RPC asiakas

Mikä on uusi versiossa 1.5.2:

• poistaminen SSLv2Hello aiheuttaa Java 6 asiakkaita rikkoa
• Ota SSLv2Hello varten Avro Lähde ja NettyAvroRpcClient
• Ota SSLv2Hello for HttpSource
• Lisätty dev-tuki src tarrapallon
• Unit test TestHTTPSource.java epäonnistui IBM JDK 1.7
• HTTP Source pitäisi pystyä estämään ennalta protokollien.
• HTTPS epäonnistuvat Java 6
• Salli kokoonpano mahdollisti pöytäkirjojen Avro lähde ja RPC asiakas

Mikä on uusi versiossa 1.5.0:

• Uusi ominaisuus:
• Esittele jonkinlainen SpillableChannel
• Anna SpoolDir siirtää vain tiedostonimen on lähde tapahtuman
• Flume Context ei tue float tai double kokoonpanoarvoja.
• Päivitä morphlines ja 0.7.0
• flume-ng-log4jappender Tuki käyttäjälle toimitetaan otsikot
• Elasticsearch Sink for ES HTTP API
• Lisätty pesuallas Kite Tietoaineistot
• taustatulostushakemisto ei pitäisi aina kuluttaa vanhin tiedosto ensin.
• Improvement:
• Flume käyttöopas näyte kokoonpanoissa korjaamisessa
• Tee SpoolDir työskennellä Sub-hakemistot
• taustatulostushakemisto lähde pitäisi pystyä vaihtamaan tai jättää epämuodostuneet merkkejä
• Käsittele suurempi hyötykuorma kautta SyslogUDPSource
• Päivitä morphline kirjaston riippuvuus 0.5.0 release
• Vähentää päällekkäisiä tapahtumia aiheuttama reset-liitäntä-intervalli

Mikä on uusi versiossa 1.3.0:

• Lisätty HTTP Post Lähde
• ElasticSearch Sink
• Flume hyväksyä viestin nykyisiä paikallisia Scribe
• Lisätty multiport syslog lähde
• Tiedosto Kanava pitäisi tukea salausta
• Luo SpoolDirectory Lähde ja Client
• kuormantasaus RPC asiakas olisi tuettava eksponentiaalinen backoff epäonnistuneiden solmuista
• Sora- RollingFileSink n vasta-tilaan, kun agentti pysäyttää
• Regex Extractor torjuntahävittäjä

Mikä on uusi versiossa 1.2.0:

• Toteutetaan Kestävä muistikanavan
• Luotu kehittäjän opas Flume NG
• Client SDK
• Toteutetaan kestävä FileChannel
• Toteutettu Torjuntahävittäjät (aiemmin tunnettu nimellä Decorators) ja Flume 1.x
• Toteutetaan HBase Sink joka tukee pöytä käyttöoikeudet
• Toteutetut Timestamp torjuntahävittäjä
• Asynchronous HBase Sink

vaatimukset

• Java 1.6 tai uudempi