(openPR) Streaming von Log-Daten in das Hadoop Distributed File System (HDFS)
New York und San Francisco, 18. Mai 2015. Auf der RSA Conference in San Francisco zeigte BalaBit erstmals die neue Version seiner syslog-ng Premium Edition. Sie empfiehlt sich vor allem mit erweiterter Unterstützung für Big-Data-Umgebungen, da das Tool große Datenvolumen perfekt verwalten kann. Hohe Verarbeitungsgeschwindigkeit, Vielseitigkeit und Richtigkeit bei der Auslieferung von Log-Daten in große, zentrale Daten-Repositories zeichnen sie aus.
Mit seiner jüngsten Version unterstützt die syslog-ng Premium Edition 5F3 das direkte Senden von Logs an Hadoop. Syslog-ng Nutzer können damit Log-Daten direkt in das Hadoop Distributed File System (HDFS) streamen und müssen diese nicht mehr manuell ins HDFS laden. Hadoop ist ein leistungsfähiges Werkzeug, um große Mengen Daten zu speichern und Informationen für eine Vielzahl von Anwendungsfällen zu gewinnen.
"Mit dieser Version von syslog-ng lassen sich Daten aus praktisch jeder Quelle sammeln, transformieren und über die HDFS-Cluster Anbindung an Hadoop streamen. Es sind also keine eigenen Jobs mehr für den Transfer der Daten ins HDFS notwendig", verspricht Zoltán Györko, CEO und Mitbegründer von BalaBit. "Man kann sich syslog-ng als ETL-Tool (Extract Transform Load) für die Log-Daten vorstellen. Es ist ideal für große Datenumgebungen, da die neue Version sehr gut in großen Unternehmensumgebungen skaliert und auch mit sehr vielen, unterschiedlichen Datentypen umgehen kann. Es kann in hybriden Umgebungen Daten flexibel an viele Ziele weiterleiten. Viele syslog-ng Nutzer nutzen syslog-ng und Hadoop zusammen. Dieses neue Feature erlaubt eine nahtlose Datenpipeline aus der vorhandenen Log-Infrastruktur in das Hadoop-Cluster."
Neben der neuen Version von syslog-ng Premium Edition hat BalaBit auch die neueste Version seiner Log-Management-Appliance syslog-ng Store Box 4F1 (SSB) vorgestellt. Die neue Version bietet Unterstützung für das proprietäre Transportprotokoll RLTPTM (Reliable Log Transfer Protocol), das Nachrichtenverluste bei Verbindungsunterbrechungen verhindert. Es wird zur Übertragung zwischen syslog-ng Premium Edition-Hosts und der syslog-ng Store Box genutzt (beispielsweise zwischen Clients und SSB oder auf der Strecke Client-Relais-SSB) und verhindert den Verlust von Nachrichten.
Die neueste Version unterstützt offiziell die Hyper-V-Plattform von Microsoft für virtualisierte Umgebungen. Damit kann die SSB nun mit den beiden am weitesten verbreiteten Server-Virtualisierungsplattformen (VMware ESXi und Hyper-V) eingesetzt werden, die gemeinsam einen Marktanteil von 75 Prozent abdecken.
Die syslog-ng Premium Edition 5F3 und die syslog-ng Store Box 4F1 stehen ab sofort zum Download verfügbar:
https://www.balabit.com/network-security/syslog-ng/central-syslog-server
https://www.balabit.com/network-security/syslog-ng/log-server-appliance
