Apache Flume

Apache Flume jött létre egy közvetítő rendszer, amely összegyűjti naplók egy kérelmet, és eljuttatja azt egy másik.
Meg kell dolgozni a legtöbb Java alkalmazások és fejlesztők kell afelől, Flume védve az adatvesztéstől és szolgáltatás meghibásodása.
Bejelentkezés adatok streamelt valós időben történik, hibatűrő rendszerek támogatása számos átálláshoz és mechanizmusok mellett.
Mivel Flume fut egy központi helyről, a fejlesztők könnyen kezelni, és azt is bekapcsolódjanak a források statisztikai és elemzési célokra.
A rejtett funkció a Flume a tényleges "data-agnosztikus" rendszer. Ez azt jelenti, könnyen lehet váltani egy adatfolyam forrása egy naplót, hogy semmi más, és használja Flume hogy biztonságosan összesített információkat a különböző típusú szolgáltatásokat.
Ezek lehetnek e-mail üzenetek, közösségi média folyamok, a hálózati forgalmat, és így tovább.

Mi az új ebben a kiadásban:

• eltávolítása SSLv2Hello okoz Java 6 ügyfelek megtörni
• Engedélyezze SSLv2Hello Avro Forrás és NettyAvroRpcClient
• Engedélyezze SSLv2Hello a HttpSource
• Added dev-támogatás src tarballokon
• Egység vizsgálat TestHTTPSource.java nem az IBM JDK 1.7
• HTTP Forrás képesnek kell lennie arra, hogy blokkolja egy előre protokolloknak.
• HTTPS teszt sikertelen a Java 6
• Hagyjuk konfiguráció engedélyezve protokollok Avro forrás és RPC-ügyfél

Mi az új a 1.5.2-es verzió:

• eltávolítása SSLv2Hello okoz Java 6 ügyfelek megtörni
• Engedélyezze SSLv2Hello Avro Forrás és NettyAvroRpcClient
• Engedélyezze SSLv2Hello a HttpSource
• Added dev-támogatás src tarballokon
• Egység vizsgálat TestHTTPSource.java nem az IBM JDK 1.7
• HTTP Forrás képesnek kell lennie arra, hogy blokkolja egy előre protokolloknak.
• HTTPS teszt sikertelen a Java 6
• Hagyjuk konfiguráció engedélyezve protokollok Avro forrás és RPC-ügyfél

Mi az új a 1.5.0 verzió:

• Új funkció:
• Tegyünk valami SpillableChannel
• Hagyjuk SpoolDir át csak a fájl nevét, ami a forrása egy esemény
• Flume Context nem támogatja float vagy dupla konfigurációs értékeket.
• Frissítsd morphlines a 0.7.0
• szűkítő-ng-log4jappender Support felhasználó által megadott fejléc
• Elasticsearch Sink for ES HTTP API
• Added mérséklődik a Kite adathalmazok
• nyomtatási könyvtárat nem mindig felemészti a legrégebbi fájlt először.
• Improvement:
• Flume Használati útmutató mintabeállításokat igénylő rögzítése
• SpoolDir dolgozni alkönyvtárakat
• nyomtatási könyvtárba forrás képesnek kell lennie arra, hogy kicseréli vagy figyelmen kívül hagyja a hibás karakter
• Handle nagyobb hasznos terhet keresztül SyslogUDPSource
• Frissítsd morphline könyvtár függőség egy 0.5.0 kiadás
• csökkentése ismétlődő események által okozott Reset-connection-intervallum

Mi az új a 1.3.0 verzió:

• Added HTTP Post Forrás
• ElasticSearch Sink
• Flume elfogadja üzenetet meglévő helyi Scribe
• Added multiporton syslog forrás
• Fájl Channel-nek támogatnia kell a titkosítás
• Hozzon létre egy SpoolDirectory Forrás és Client
• terheléselosztás RPC-ügyfél támogatnia kell exponenciális backoff A meghibásodott csomópont
• Billenő RollingFileSink a számláló állapota, amikor ügynök leáll
• Regex Extractor Interceptor

Mi az új verzióban 1.2.0:

• végre egy tartós Memory Channel
• Alkotó fejlesztői útmutatót Flume NG
• Client SDK
• végre egy tartós FileChannel
• Megvalósult Interceptors (korábbi nevén Lakberendezők) a Flume 1.x
• valósított HBase Sink, amely támogatja a tábla szinten access
• Megvalósult Timestamp Interceptor
• aszinkron HBase Sink

követelmények :

• Java 1.6 vagy újabb