Apache Flume

Apache Flume blev udviklet som et mellemled, der samler logs fra et program og leverer den til en anden.
Det bør arbejde med de fleste Java-programmer og udviklere bør være sikker, Flume bliver beskyttet mod tab af data og fiasko service.
Log data streames i realtid via fejltolerant systemer med understøttelse af mange failover og nyttiggørelse mekanismer.
Fordi Flume løber fra ét centralt sted, kan udviklere nemt administrere det og også udnytte sine ressourcer til statistik og analytics formål.
En skjult funktion i Flume er dens egentlige "data-agnostiker" system. Dette betyder at du kan nemt skifte en datastrøm kilde fra en log output til noget andet og bruge Flume sikkert aggregerede oplysninger fra forskellige typer af tjenester.
Disse kan være e-mails, sociale medier streams, netværkstrafik, og så videre

Hvad er nyt i denne udgivelse:.

• Fjernelse SSLv2Hello forårsager Java 6 klienter at bryde
• Aktiver SSLv2Hello for Avro Source og NettyAvroRpcClient
• Aktiver SSLv2Hello for HttpSource
• Tilføjet dev-støtte til src tarball
• Unit test TestHTTPSource.java mislykkedes med IBM JDK 1.7
• HTTP Source skal kunne blokere en foranstillet sæt protokoller.
• HTTPS test mislykkes på Java 6
• Tillad konfiguration af aktiverede protokoller Avro kilde og RPC-klient

Hvad er nyt i version 1.5.2:

• Fjernelse SSLv2Hello forårsager Java 6 klienter at bryde
• Aktiver SSLv2Hello for Avro Source og NettyAvroRpcClient
• Aktiver SSLv2Hello for HttpSource
• Tilføjet dev-støtte til src tarball
• Unit test TestHTTPSource.java mislykkedes med IBM JDK 1.7
• HTTP Source skal kunne blokere en foranstillet sæt protokoller.
• HTTPS test mislykkes på Java 6
• Tillad konfiguration af aktiverede protokoller Avro kilde og RPC-klient

Hvad er nyt i version 1.5.0:

• Ny funktion:
• Indføre en slags SpillableChannel
• Tillad SpoolDir at passere netop filnavnet, som er kilden til en begivenhed
• Flume Kontekst understøtter ikke float eller dobbelt konfigurationsværdier.
• Opgrader morphlines til 0.7.0
• rende-ng-log4jappender Support bruger leveret overskrifter
• Elasticsearch Sink for ES HTTP API
• Tilføjet en vask for Kite datasæt
• spooling mappe bør ikke altid indtage den ældste fil først.
• Forbedring:
• Flume Brugervejledning prøve konfigurationer behøver fastsættelse
• Lav SpoolDir arbejde med Sub-mapper
• Spooling mappe kilde bør være i stand til at erstatte eller ignorere misdannede tegn
• Håndtag større nyttelast via SyslogUDPSource
• Opgrader morphline bibliotek afhængighed til en 0.5.0 release
• Reduktion dublerede hændelser forårsaget af reset-tilslutning-interval

Hvad er nyt i version 1.3.0:

• Tilføjet HTTP Indlæg Source
• ElasticSearch Sink
• Flume vedtage besked fra eksisterende lokale Scribe
• Tilføjet en multiport syslog kilde
• File Kanal bør støtte kryptering
• Opret en SpoolDirectory Kilde og Client
• Load Balancing RPC-klient bør støtte eksponentiel backoff mislykkede noder
• Dump RollingFileSink tæller status, når agent stopper
• Regex Extractor Interceptor

Hvad er nyt i version 1.2.0:

• Gennemført en Holdbar Memory Channel
• Oprettet developer guide til Flume NG
• Client SDK
• Gennemført en holdbar FileChannel
• Gennemførte tilløbsbassiner (tidligere kendt som Dekoratører) for Flume 1.x
• Gennemført en HBase Sink, som understøtter adgang tabelniveau
• Implementeret Tidsstempel Interceptor
• Asynchronous HBase Sink

Krav :

• Java 1.6 eller højere