Apache Flume

Apache Flume został opracowany jako system, który zbiera logi pośrednika z jednej aplikacji i dostarcza go do innego.
Powinien działać z większością aplikacji Java i programistów powinien mieć pewność, Flume są chronione przed utratą danych i awarii serwisu.
Dane dziennika jest przekazywany w czasie rzeczywistym za pośrednictwem awarii systemów tolerancyjnych ze wsparciem dla wielu mechanizmów failover i odzysku.
Ponieważ Flume prowadzi z jednej centralnej lokalizacji, deweloperzy mogą łatwo zarządzać, a także dopasować się do jego zasobów dla celów statystycznych i analitycznych.
Ukryty cechą Flume jest jego rzeczywisty układ "data-agnostykiem". Oznacza to, że można łatwo przełączać źródła strumienia danych na wyjście z dziennika do niczego innego i korzystać z koryta bezpiecznie zbiorcze informacje z różnych rodzajów usług.
Mogą to być wiadomości e-mail, społecznych strumieni multimedialnych, ruch w sieci, i tak dalej

Co nowego w tym wydaniu:.

• Usuwanie SSLv2Hello powoduje Java 6 klientów złamać
• Włącz SSLv2Hello dla Avro Source i NettyAvroRpcClient
• Włącz SSLv2Hello dla HttpSource
• Dodane dev-wsparcie src archiwum
• Test Jednostka TestHTTPSource.java nie powiodło się z IBM JDK 1.7
• HTTP źródłowy powinien być w stanie zablokować przedrostkiem zestawu protokołów.
• nie na testy HTTPS Java 6
• Pozwala na konfigurację włączonych protokołów w Avro źródła i RPC klienta

Co nowego w wersji 1.5.2:

• Usuwanie SSLv2Hello powoduje Java 6 klienci złamać
• Włącz SSLv2Hello dla Avro Source i NettyAvroRpcClient
• Włącz SSLv2Hello dla HttpSource
• Dodane dev-wsparcie src archiwum
• Test Jednostka TestHTTPSource.java nie powiodło się z IBM JDK 1.7
• HTTP źródłowy powinien być w stanie zablokować przedrostkiem zestawu protokołów.
• nie na testy HTTPS Java 6
• Pozwala na konfigurację włączonych protokołów w Avro źródła i RPC klienta

Co nowego w wersji 1.5.0:

• Nowa funkcja:
• Przedstaw jakieś SpillableChannel
• Zezwalaj spooldir przejść tylko nazwę pliku, który jest źródłem zdarzenia
• Flume Kontekst nie obsługuje pływak lub wartości podwójnych konfiguracji.
• Upgrade do 0.7.0 morphlines
• nagłówki dostarczone koryta-ng-log4jappender użytkowników Pomoc
• Elasticsearch Umywalka dla ES HTTP API
• Dodane zlew do Kite zbiorów danych
• katalog buforowania nie zawsze pierwsze należy spożywać najstarszy plik.
• Wzrost:
• przykładowe konfiguracje Podręcznik użytkownika muszą Flume mocowania
• spooldir pracy z podkatalogów
• oczekująca źródło katalogu powinien być w stanie wymienić lub zignorować znaki zniekształcone
• Uchwyt większych ładunków poprzez SyslogUDPSource
• Upgrade zależność morphline biblioteki do 0.5.0 wydaniu
• Zmniejszenie duplikaty zdarzeń spowodowanych przez reset-connection-przedziału

Co nowego w wersji 1.3.0:

• Dodane HTTP post Źródło
• ElasticSearch Sink
• Flume przyjąć wiadomość z istniejącej lokalnej Scribe
• Dodane źródłem multiport syslog
• Plik Kanał powinien obsługiwać szyfrowanie
• Tworzenie SpoolDirectory i klienta Źródło
• Równoważenie obciążenia klienta RPC powinny wspierać wykładniczy odczekiwanie nieudanych węzłów
• Dump stan licznika RollingFileSink zatrzymuje, gdy Agent
• Regex Extractor Interceptor

Co nowego w wersji 1.2.0:

• Wdrożone Trwała Pamięć kanału
• Utworzono przewodnik dla deweloperów Flume NG
• SDK Client
• Wdrożone trwałe FileChannel
• Wdrożone przechwytujące (znany wcześniej jako dekoratorów) dla Flume 1.x
• Wdrożone HBase Sink który wspiera dostępu na poziomie tabeli
• Wdrożone Datownik Interceptor
• Asynchronous HBase Sink

Wymagania :

• Java w wersji 1.6 lub wyższej,