{"id":2871,"date":"2017-08-28T14:56:33","date_gmt":"2017-08-28T14:56:33","guid":{"rendered":"https:\/\/anexia.com\/blog\/de\/?p=2871"},"modified":"2022-04-19T09:19:39","modified_gmt":"2022-04-19T07:19:39","slug":"big-data-logmanagement-mit-der-anexia-engine","status":"publish","type":"post","link":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/","title":{"rendered":"Big Data Logmanagement mit der Anexia Engine"},"content":{"rendered":"

Ein zentrales Logmanagement ist essentiell f\u00fcr die \u00dcberwachung und Analyse von gr\u00f6\u00dferen IT-Infrastrukturen, damit Probleme fr\u00fchzeitig erkannt und im schlimmsten Fall Ausfallzeiten so kurz wie m\u00f6glich gehalten werden k\u00f6nnen.<\/p>\n

Anexia \u00fcberwacht f\u00fcr seine Kunden rund um die Uhr tausende Netzwerkkomponenten, Server und Applikationen, die \u00fcber den ganzen Globus verteilt sind. Dabei geht es nicht nur um Metriken und Verf\u00fcgbarkeiten, auch Sicherheitsl\u00fccken und Angriffe m\u00fcssen erkannt werden. Diese Anforderungen haben unter anderem zur Entwicklung des Anexia Engine<\/a> CloudLog Moduls gef\u00fchrt. CloudLog ist ein Cloud Service, der massenhaft Log- und Metrikdaten aus unterschiedlichsten Systemen speichert und analysiert.<\/p>\n

CloudLog unterst\u00fctzt Vielzahl von Datenquellen<\/strong><\/h2>\n

Jedes Ger\u00e4t, das Logdaten exportiert, kann auch an CloudLog angebunden werden. Der Service bietet eine Vielzahl von standardisierten Schnittstellen an und unterst\u00fctzt auch die Integration eigener Protokolle. Dabei ist es unbedeutend in welchem Format die Nachrichten \u00fcbertragen werden. Dynamische Datenmodelle erlauben es, dem Anwender selbst zu definieren wie die Nachrichten behandelt und aufgeschl\u00fcsselt werden m\u00fcssen. Zus\u00e4tzlich k\u00f6nnen auch weitere Informationen wie z.B. GeoIP Daten hinzugef\u00fcgt werden.<\/p>\n

\"Logdatan<\/a><\/p>\n

Visualisierungstool f\u00fcr grafische Aufbereitung <\/strong><\/h2>\n

Nutzer k\u00f6nnen die Daten w\u00e4hrend der Einlieferung\u00a0in Echtzeit verfolgen und filtern. F\u00fcr ein typisches Troubleshooting-Szenario gibt es eine Live Ansicht des aktuellen Datenstroms. Historische und indizierte Daten k\u00f6nnen sp\u00e4ter durch noch komplexere Abfragen durchsucht werden. Anwender k\u00f6nnen h\u00e4ufig verwendete Suchen abspeichern oder in einen Alarm \u00fcberf\u00fchren.<\/p>\n

So sieht der Live Viewer aus:<\/p>\n

\"Live<\/a>
\nUnd so sieht der Daten Viewer aus:<\/p>\n

\"Data<\/a><\/p>\n

Innerhalb der Anexia Engine kann ein eigenes Visualisierungstool die CloudLog-Daten grafisch darstellen. Dabei kann der Anwender aus Chart- und Dashboard-Vorlagen f\u00fcr vordefinierte Themen und Applikationen w\u00e4hlen, aber auch eigene Visualisierungen definieren. Nutzer k\u00f6nnen einzelne Charts aber auch das gesamte Dashboard beliebig filtern. Auch mehrere Datenquellen kombiniert k\u00f6nnen visualisiert werden. Dashboards k\u00f6nnen zudem im Lese-Modus geteilt werden, was sich beispielsweise sehr gut f\u00fcr Monitoring Bildschirme eignet. Au\u00dferdem ist es m\u00f6glich, einmalige oder periodische PDF Reports aus den Dashboards zu generieren.<\/p>\n

Hier ein Beispiel f\u00fcr ein Dashboard:<\/p>\n

\"Dashboard<\/a><\/p>\n

Alarm-Funktion f\u00fcr Notf\u00e4lle<\/strong><\/h2>\n

Eines der wichtigsten und n\u00fctzlichsten Features in CloudLog ist die Alarm-Funktion. Damit k\u00f6nnen Anwender Benachrichtigungen f\u00fcr bestimmte Ereignisse \u00fcber verschiedenste Kan\u00e4le definieren. Dazu geh\u00f6ren neben einfachen Schwellwerten (CPU Load, Traffic, Anzahl der Anfragen etc.) auch komplexe Bedingungen f\u00fcr die Erkennung eines Vorfalls. Zum Beispiel kann das System im Windows Event Log die Ausf\u00fchrung von Ransomware wie WannaCry automatisch erkennen und so Schlimmeres verhindern. Die Benachrichtigung kann per E-Mail, SMS, WebHook und zu Dritt-Anbieter Systemen erfolgen. Dies erm\u00f6glicht, dass automatisierte Gegenma\u00dfnahmen eingeleitet werden k\u00f6nnen.<\/p>\n

Technische Informationen<\/strong><\/h2>\n

CloudLog ist horizontal skalierbar und bietet branchen\u00fcbliche und standardisierte Schnittstellen wie syslog, HTTP, E-Mail, einfache TCP\/UDP Streams und Kafka. Dadurch k\u00f6nnen Datenquellen auch mit vorhandenen Services wie Rsyslog, Logstash\/Beats, Fluentd oder Flume angebunden werden. Ein eigener Security Layer, welcher mit der Elasticsearch API kompatibel ist, bildet die CloudLog Query API nach au\u00dfen, wor\u00fcber Nutzer eigene Anwendungen aber auch externe Visualisierungs- und Analysetools wie Kibana oder Grafana problemlos anbinden k\u00f6nnen. Dadurch entstehen keine Einschr\u00e4nkungen in der Weiterverarbeitung der Daten, selbst die Rohdaten lassen sich bei Bedarf wieder in vollem Umfang exportieren.<\/p>\n

Fazit<\/strong><\/h2>\n

Bei der \u00dcberwachung von IT-Infrastrukturen, Netzwerkkomponenten, Servern und Applikationen fallen tausende von Daten an. Entscheidend f\u00fcr eine fr\u00fchzeitige Erkennung von Problemen, Sicherheitsl\u00fccken oder Angriffen und damit eventuell verbundenen Ausfallzeiten ist ein zentrales Logmanagement. Das Anexia CloudLog Modul analysiert die anfallenden Daten systematisch und bereitet sie grafisch auf, um die Nutzer bestm\u00f6glich \u00fcber Auff\u00e4lligkeiten zu informieren. Mit ersten Testkunden haben wir verschiedene Anwendungsf\u00e4lle durchgespielt und unser Modul entsprechende Szenarien angepasst. Dadurch ist CloudLog ein m\u00e4chtiges Tool geworden, das auf gro\u00dfe wie kleine Projekte individuell angepasst werden kann. F\u00fcr welche F\u00e4lle sind Sie noch auf der Suche nach einem Big-Data-Tool? Lassen Sie es uns wissen: info@anexia-engine.com<\/a><\/p>\n","protected":false},"excerpt":{"rendered":"

In diesem Blogpost erkl\u00e4rt Michael Rauter vom Anexia Engine-Team was im Engine-Modul CloudLog steckt, einer Platform zum Big Data Logmanagement.<\/p>\n","protected":false},"author":27,"featured_media":2459,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[10],"tags":[384,376,405,14],"yoast_head":"\nBig Data Logmanagement mit der Anexia Engine - ANEXIA Blog<\/title>\n<meta name=\"description\" content=\"In diesem Blogpost erkl\u00e4rt Michael Rauter vom Anexia Engine-Team was im Engine-Modul CloudLog steckt, einer Platform zum Big Data Logmanagement.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/\" \/>\n<meta property=\"og:locale\" content=\"de_DE\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Big Data Logmanagement mit der Anexia Engine - ANEXIA Blog\" \/>\n<meta property=\"og:description\" content=\"In diesem Blogpost erkl\u00e4rt Michael Rauter vom Anexia Engine-Team was im Engine-Modul CloudLog steckt, einer Platform zum Big Data Logmanagement.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/\" \/>\n<meta property=\"og:site_name\" content=\"ANEXIA Blog\" \/>\n<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/anexiagmbh\/\" \/>\n<meta property=\"article:published_time\" content=\"2017-08-28T14:56:33+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2022-04-19T07:19:39+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg\" \/>\n\t<meta property=\"og:image:width\" content=\"672\" \/>\n\t<meta property=\"og:image:height\" content=\"372\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/jpeg\" \/>\n<meta name=\"author\" content=\"Michael Rauter\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:creator\" content=\"@_ANEXIA\" \/>\n<meta name=\"twitter:site\" content=\"@_ANEXIA\" \/>\n<meta name=\"twitter:label1\" content=\"Verfasst von\" \/>\n\t<meta name=\"twitter:data1\" content=\"Michael Rauter\" \/>\n\t<meta name=\"twitter:label2\" content=\"Gesch\u00e4tzte Lesezeit\" \/>\n\t<meta name=\"twitter:data2\" content=\"3\u00a0Minuten\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\/\/schema.org\",\"@graph\":[{\"@type\":\"WebPage\",\"@id\":\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/\",\"url\":\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/\",\"name\":\"Big Data Logmanagement mit der Anexia Engine - ANEXIA Blog\",\"isPartOf\":{\"@id\":\"https:\/\/anexia.com\/blog\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#primaryimage\"},\"image\":{\"@id\":\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg\",\"datePublished\":\"2017-08-28T14:56:33+00:00\",\"dateModified\":\"2022-04-19T07:19:39+00:00\",\"author\":{\"@id\":\"https:\/\/anexia.com\/blog\/#\/schema\/person\/87d56191d49bf0669df65f7061c912fa\"},\"description\":\"In diesem Blogpost erkl\u00e4rt Michael Rauter vom Anexia Engine-Team was im Engine-Modul CloudLog steckt, einer Platform zum Big Data Logmanagement.\",\"breadcrumb\":{\"@id\":\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#breadcrumb\"},\"inLanguage\":\"de\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"de\",\"@id\":\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#primaryimage\",\"url\":\"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg\",\"contentUrl\":\"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg\",\"width\":672,\"height\":372,\"caption\":\"engine_blogreihe_teaser_EN\"},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"Home\",\"item\":\"https:\/\/anexia.com\/blog\/de\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"Big Data Logmanagement mit der Anexia Engine\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\/\/anexia.com\/blog\/#website\",\"url\":\"https:\/\/anexia.com\/blog\/\",\"name\":\"ANEXIA Blog\",\"description\":\"[:de] ANEXIA Blog - Technischen Themen, Anexia News und Insights [:]\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\/\/anexia.com\/blog\/?s={search_term_string}\"},\"query-input\":\"required name=search_term_string\"}],\"inLanguage\":\"de\"},{\"@type\":\"Person\",\"@id\":\"https:\/\/anexia.com\/blog\/#\/schema\/person\/87d56191d49bf0669df65f7061c912fa\",\"name\":\"Michael Rauter\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"de\",\"@id\":\"https:\/\/anexia.com\/blog\/#\/schema\/person\/image\/\",\"url\":\"https:\/\/secure.gravatar.com\/avatar\/b04babbd46f6b0df584fb0975fe38722?s=96&d=mm&r=g\",\"contentUrl\":\"https:\/\/secure.gravatar.com\/avatar\/b04babbd46f6b0df584fb0975fe38722?s=96&d=mm&r=g\",\"caption\":\"Michael Rauter\"},\"url\":\"https:\/\/anexia.com\/blog\/author\/mrauter\/\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Big Data Logmanagement mit der Anexia Engine - ANEXIA Blog","description":"In diesem Blogpost erkl\u00e4rt Michael Rauter vom Anexia Engine-Team was im Engine-Modul CloudLog steckt, einer Platform zum Big Data Logmanagement.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/","og_locale":"de_DE","og_type":"article","og_title":"Big Data Logmanagement mit der Anexia Engine - ANEXIA Blog","og_description":"In diesem Blogpost erkl\u00e4rt Michael Rauter vom Anexia Engine-Team was im Engine-Modul CloudLog steckt, einer Platform zum Big Data Logmanagement.","og_url":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/","og_site_name":"ANEXIA Blog","article_publisher":"https:\/\/www.facebook.com\/anexiagmbh\/","article_published_time":"2017-08-28T14:56:33+00:00","article_modified_time":"2022-04-19T07:19:39+00:00","og_image":[{"width":672,"height":372,"url":"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg","type":"image\/jpeg"}],"author":"Michael Rauter","twitter_card":"summary_large_image","twitter_creator":"@_ANEXIA","twitter_site":"@_ANEXIA","twitter_misc":{"Verfasst von":"Michael Rauter","Gesch\u00e4tzte Lesezeit":"3\u00a0Minuten"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"WebPage","@id":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/","url":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/","name":"Big Data Logmanagement mit der Anexia Engine - ANEXIA Blog","isPartOf":{"@id":"https:\/\/anexia.com\/blog\/#website"},"primaryImageOfPage":{"@id":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#primaryimage"},"image":{"@id":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#primaryimage"},"thumbnailUrl":"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg","datePublished":"2017-08-28T14:56:33+00:00","dateModified":"2022-04-19T07:19:39+00:00","author":{"@id":"https:\/\/anexia.com\/blog\/#\/schema\/person\/87d56191d49bf0669df65f7061c912fa"},"description":"In diesem Blogpost erkl\u00e4rt Michael Rauter vom Anexia Engine-Team was im Engine-Modul CloudLog steckt, einer Platform zum Big Data Logmanagement.","breadcrumb":{"@id":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#breadcrumb"},"inLanguage":"de","potentialAction":[{"@type":"ReadAction","target":["https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/"]}]},{"@type":"ImageObject","inLanguage":"de","@id":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#primaryimage","url":"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg","contentUrl":"https:\/\/anexia.com\/blog\/wp-content\/uploads\/2017\/04\/engine_blogreihe_teaser_EN.jpg","width":672,"height":372,"caption":"engine_blogreihe_teaser_EN"},{"@type":"BreadcrumbList","@id":"https:\/\/anexia.com\/blog\/de\/big-data-logmanagement-mit-der-anexia-engine\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Home","item":"https:\/\/anexia.com\/blog\/de\/"},{"@type":"ListItem","position":2,"name":"Big Data Logmanagement mit der Anexia Engine"}]},{"@type":"WebSite","@id":"https:\/\/anexia.com\/blog\/#website","url":"https:\/\/anexia.com\/blog\/","name":"ANEXIA Blog","description":"[:de] ANEXIA Blog - Technischen Themen, Anexia News und Insights [:]","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/anexia.com\/blog\/?s={search_term_string}"},"query-input":"required name=search_term_string"}],"inLanguage":"de"},{"@type":"Person","@id":"https:\/\/anexia.com\/blog\/#\/schema\/person\/87d56191d49bf0669df65f7061c912fa","name":"Michael Rauter","image":{"@type":"ImageObject","inLanguage":"de","@id":"https:\/\/anexia.com\/blog\/#\/schema\/person\/image\/","url":"https:\/\/secure.gravatar.com\/avatar\/b04babbd46f6b0df584fb0975fe38722?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/b04babbd46f6b0df584fb0975fe38722?s=96&d=mm&r=g","caption":"Michael Rauter"},"url":"https:\/\/anexia.com\/blog\/author\/mrauter\/"}]}},"lang":"de","translations":{"de":2871,"en":6779},"amp_enabled":true,"pll_sync_post":[],"_links":{"self":[{"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/posts\/2871"}],"collection":[{"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/users\/27"}],"replies":[{"embeddable":true,"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/comments?post=2871"}],"version-history":[{"count":15,"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/posts\/2871\/revisions"}],"predecessor-version":[{"id":6781,"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/posts\/2871\/revisions\/6781"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/media\/2459"}],"wp:attachment":[{"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/media?parent=2871"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/categories?post=2871"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/anexia.com\/blog\/wp-json\/wp\/v2\/tags?post=2871"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}