<?xml version="1.0" encoding="utf-8" standalone="yes"?><rss version="2.0" xmlns:atom="http://www.w3.org/2005/Atom"><channel><title>Centralized Logging – apt-upgrade.me – Homelab, Linux &amp; DevSecOps</title><link>https://www.apt-upgrade.me/nl/tag/centralized-logging-nl/</link><description>One nerd's homelab: Linux, Kubernetes, security, and the occasional disaster.</description><language>nl-NL</language><lastBuildDate>Fri, 19 Dec 2025 15:50:47 +0100</lastBuildDate><atom:link href="https://www.apt-upgrade.me/nl/tag/centralized-logging-nl/index.xml" rel="self" type="application/rss+xml"/><item><title>Staren in de leegte: een liefdesbrief aan logbestanden</title><link>https://www.apt-upgrade.me/nl/2025/12/19/staring-into-the-void-a-love-letter-to-log-files/</link><pubDate>Fri, 19 Dec 2025 15:50:47 +0100</pubDate><guid>https://www.apt-upgrade.me/nl/2025/12/19/staring-into-the-void-a-love-letter-to-log-files/</guid><description>&lt;article class="wp-log-nerd-post"&gt;Als je ooit naar een terminal vol logberichten hebt zitten staren, weet je het: in logs vertellen systemen&#10;de waarheid. Ze zijn luidruchtig, soms lelijk, maar absoluut onmisbaar als er iets misgaat. Vandaag heb ik &lt;strong&gt;Graylog&lt;/strong&gt; en &lt;strong&gt;Fluent Bit&lt;/strong&gt; op mijn server geïnstalleerd. Niet alleen&#10;omdat ik professioneel met deze tools werk, maar ook omdat ik ze in de toekomst steeds vaker ga gebruiken, want mijn homelab is bedoeld om&#10;te experimenteren, te leren en mijn brein bezig te houden.&lt;h2&gt;Waarom logging ertoe doet&lt;/h2&gt;&lt;p&gt;Logging is een van de meest fundamentele bouwstenen van betrouwbare systemen. Metrics vertellen je&#10;&lt;em&gt;dat&lt;/em&gt; er iets mis is, logs vertellen je &lt;em&gt;waarom&lt;/em&gt;. Centrale logging wordt cruciaal&#10;zodra je meer dan één machine beheert.&lt;/p&gt;&lt;h2&gt;Fluent Bit, Graylog &amp;amp; Sidecar&lt;/h2&gt;&lt;p&gt;&lt;strong&gt;Fluent Bit&lt;/strong&gt; fungeert als clientcomponent op de server. Zijn taak is simpel:&#10;logs lokaal verzamelen en naar Graylog sturen.&lt;/p&gt;&lt;p&gt;&lt;strong&gt;Graylog&lt;/strong&gt; levert de GUI en de backend waar logs worden opgeslagen, verwerkt, doorzocht&#10;en gebruikt voor alerting. Je kunt het makkelijk gebruiken om logberichten van enkele duizenden&#10;servers te verzamelen en centraal te analyseren.&lt;/p&gt;&lt;p&gt;&lt;strong&gt;Sidecar&lt;/strong&gt; is een extra service waarmee je de&#10;Fluent Bit-agent centraal vanuit Graylog configureert, wat uitrollen en wijzigingen een stuk makkelijker maakt.&lt;/p&gt;&lt;h2&gt;Geheugentuning &amp;amp; eerste lessen&lt;/h2&gt;&lt;p&gt;Functioneel werkte alles behoorlijk goed, maar ik moest de RAM-behoefte&#10;flink terugschroeven. Opvallend genoeg greep Graylog meteen swapruimte — terwijl de server&#10;in totaal 32 GB RAM beschikbaar heeft.&lt;/p&gt;&lt;p&gt;Die Java-gerelateerde geheugenonderwerpen zijn nog nieuw voor me, dus daar moet ik me&#10;verder in verdiepen. Voor het begin was een &lt;strong&gt;Grafana-dashboard&lt;/strong&gt; enorm&#10;handig om CPU- en RAM-gebruik in detail te volgen.&lt;/p&gt;&lt;p&gt;Om het heapgebruik te beperken, heb ik de volgende regel toegevoegd aan&#10;&lt;code&gt;/etc/graylog/datanode/datanode.conf&lt;/code&gt;:&lt;/p&gt;&lt;pre&gt;&lt;code&gt;opensearch_heap = 2g&lt;/code&gt;&lt;/pre&gt;&lt;h2&gt;Voorbeeldconfiguratie van Fluent Bit&lt;/h2&gt;&lt;p&gt;Hieronder staat de huidige &lt;strong&gt;Fluent Bit&lt;/strong&gt;-configuratie die op mijn Ubuntu/Debian-systeem draait. Ze verzamelt logs uit meerdere lokale bronnen (systemd-journal, syslog, auth-logs en kernellogs) en stuurt alles door naar Graylog via de &lt;em&gt;GELF&lt;/em&gt;-output over TCP.&lt;/p&gt;&lt;p&gt;Deze setup werkt goed voor een homelab-omgeving en ligt toch dicht bij wat je in productie zou draaien.&lt;/p&gt;&lt;pre&gt;&lt;code&gt;&amp;#10;############################################&amp;#10;# Fluent Bit – Ubuntu / Debian&amp;#10;############################################&amp;#10;&amp;#10;[SERVICE]&amp;#10; Flush 30&amp;#10; Daemon Off&amp;#10; Log_Level info&amp;#10; storage.type memory&amp;#10;&amp;#10;&amp;#10;###################################################################&amp;#10;# INPUTS&amp;#10;###################################################################&amp;#10;&amp;#10;# Systemd Journal (primary input source)&amp;#10;[INPUT]&amp;#10; Name systemd&amp;#10; Tag journal.*&amp;#10; Read_From_Tail On&amp;#10;&amp;#10;&amp;#10;# /var/log/syslog&amp;#10;[INPUT]&amp;#10; Name tail&amp;#10; Path /var/log/syslog&amp;#10; Tag syslog.*&amp;#10; DB /var/log/fluent-bit/db_syslog.db&amp;#10; Mem_Buf_Limit 5MB&amp;#10; Skip_Long_Lines On&amp;#10;&amp;#10;&amp;#10;# Authentication Logs&amp;#10;[INPUT]&amp;#10; Name tail&amp;#10; Path /var/log/auth.log&amp;#10; Tag auth.*&amp;#10;&amp;#10;&amp;#10;# Kernel Log&amp;#10;[INPUT]&amp;#10; Name tail&amp;#10; Path /var/log/kern.log&amp;#10; Tag kernel.*&amp;#10;&amp;#10;&amp;#10;###################################################################&amp;#10;# OUTPUT&amp;#10;###################################################################&amp;#10;&amp;#10;[OUTPUT]&amp;#10; Name gelf&amp;#10; Match *&amp;#10; Host 192.168.10.x&amp;#10; Port 12201&amp;#10; Mode udp&amp;#10; Gelf_Short_Message_Key log&amp;#10; Gelf_Host_Key host&amp;#10;&lt;/code&gt;&lt;/pre&gt;&lt;p&gt;&lt;/p&gt;&lt;p&gt;Met deze configuratie stuurt Fluent Bit alle relevante systeemlogs betrouwbaar naar Graylog,&#10;waar ze geïndexeerd, doorzocht en voor alerting gebruikt kunnen worden.&lt;/p&gt;&lt;h2&gt;Tot slot&lt;/h2&gt;&lt;p&gt;Centrale logging is een krachtig hulpmiddel — zelfs (of juist) in een homelab. Het helpt je&#10;gevoel te ontwikkelen voor productiesystemen en maakt troubleshooting veel minder pijnlijk als dingen&#10;uiteindelijk stukgaan.&lt;/p&gt;&lt;/article&gt;</description></item><item><title>📡 Logs verzenden als een pro: Fluent Bit ontmoet Ansible in mijn homelab</title><link>https://www.apt-upgrade.me/nl/2025/05/26/%F0%9F%93%A1-shipping-logs-like-a-pro-fluent-bit-meets-ansible-in-my-homelab/</link><pubDate>Mon, 26 May 2025 13:01:05 +0200</pubDate><guid>https://www.apt-upgrade.me/nl/2025/05/26/%F0%9F%93%A1-shipping-logs-like-a-pro-fluent-bit-meets-ansible-in-my-homelab/</guid><description>&lt;p&gt;Inmiddels is mijn kleine homelab uitgegroeid tot een kleine maar krachtige vloot virtuele machines — bijna een dozijn ervan zoemen lekker door. Maar meer services betekent meer logs… en meer chaos. 🌀&lt;/p&gt;&#10;&lt;p&gt;Om orde in die chaos te brengen, gebruik ik de open-source log shipper &lt;strong&gt;Fluent Bit&lt;/strong&gt; om logs van al mijn VM&amp;rsquo;s te verzamelen en door te sturen naar een centrale &lt;strong&gt;OpenSearch&lt;/strong&gt;-instantie voor analyse en visualisatie.&lt;/p&gt;&#10;&lt;p&gt;&lt;strong&gt;Het doel?&lt;/strong&gt; &lt;em&gt;Alles verzamelen&lt;/em&gt; — van waarschuwingen over schijfruimte, mislukte inlogpogingen en systemd-ruis tot sappige kernelmeldingen. Alle logs van al mijn machines moeten netjes geïndexeerd en doorzoekbaar terechtkomen in één OpenSearch-dashboard.&lt;/p&gt;</description></item></channel></rss>