Netdata + Caddy: add monitoring for http-server

files/caddyproxy/Caddyfile.j2

@@ -4,6 +4,12 @@
 
 {
     grace_period 15s
+
+    admin :2019
+
+    # Enable metrics in Prometheus format
+    # https://caddyserver.com/docs/metrics
+    metrics
 }
 
 # -------------------------------------------------------------------

files/netdata/go.d/prometheus.conf

@@ -0,0 +1,9 @@
+update_every: 5
+autodetection_retry: 0
+
+jobs:
+  - name: caddyproxy
+    url: http://caddyproxy:2019/metrics
+    selector:
+      allow:
+        - "caddy_http_*"

files/netdata/netdata.conf.j2

@@ -19,7 +19,7 @@
 	# cpu cores = 2
 	# libuv worker threads = 16
 	# profile = standalone
-	hostname = rivendell
+	hostname = {{ host_name }}
 	# glibc malloc arena max for plugins = 1
 	# glibc malloc arena max for netdata = 1
 	# crash reports = all

playbook-caddyproxy.yml

@@ -60,8 +60,13 @@
         state: "present"
         remove_orphans: true
 
-    - name: "Reload caddy"
-      community.docker.docker_compose_v2_exec:
-        project_src: '{{ base_dir }}'
-        service: "{{ service_name }}"
-        command: caddy reload --config /etc/caddy/Caddyfile
+    # - name: "Reload caddy"
+    #   community.docker.docker_compose_v2_exec:
+    #     project_src: '{{ base_dir }}'
+    #     service: "{{ service_name }}"
+    #     command: caddy reload --config /etc/caddy/Caddyfile
+
+    - name: "Restart application with docker compose"
+      community.docker.docker_compose_v2:
+        project_src: "{{ base_dir }}"
+        state: "restarted"

playbook-netdata.yml

@@ -11,6 +11,7 @@
     app_user: "{{ app_name }}"
     base_dir: "/home/{{ app_user }}"
     config_dir: "{{ (base_dir, 'config') | path_join }}"
+    config_go_d_dir: "{{ (config_dir, 'go.d') | path_join }}"
     data_dir: "{{ (base_dir, 'data') | path_join }}"
 
   tasks:
@@ -30,6 +31,7 @@
         mode: "0770"
       loop:
         - "{{ config_dir }}"
+        - "{{ config_go_d_dir }}"
         - "{{ data_dir }}"
 
     - name: "Copy netdata config file"
@@ -40,6 +42,14 @@
         group: "{{ app_user }}"
         mode: "0640"
 
+    - name: "Copy prometheus plugin config file"
+      ansible.builtin.copy:
+        src: "files/{{ app_name }}/go.d/prometheus.conf"
+        dest: "{{ config_go_d_dir }}/prometheus.conf"
+        owner: "{{ app_user }}"
+        group: "{{ app_user }}"
+        mode: "0640"
+
     - name: "Grab docker group id."
       ansible.builtin.shell:
         cmd: |
@@ -62,3 +72,8 @@
         project_src: "{{ base_dir }}"
         state: "present"
         remove_orphans: true
+
+    - name: "Restart application with docker compose"
+      community.docker.docker_compose_v2:
+        project_src: "{{ base_dir }}"
+        state: "restarted"

vars/vars.yml

@@ -1,118 +1,119 @@
 $ANSIBLE_VAULT;1.1;AES256
-33323766373637333861393930366564333561663231636433373131353535386464643763396633
-6261626463656534366434613865336366323036643731650a306466306261303831356534343133
-36386134346137333762646363393532666239386339393131326164366363386531613935356634
-6362633333613839380a323666643935313437613161623338373734323438613062623831613565
-64666231316139653463666234633262393430633231373564623862376566636134626333393034
-61343461383739626130353931306536353739353165383737656133383738363235376331636135
-64626561386362646334663232313132343534353533313663313836373435316634336539313562
-66333732366666663163343263636664326663623135633338616638353532623832356464366137
-32383165396562613162373430356331396631323630396263393637373566393935333632386465
-38623135316164333563633262666361663234383935343735393637323834356561336633373333
-31633333323132393339336365393433663266373363666339643632353232363762326633363661
-66373861376561303038636135393132353639386530383338386237383433663334623533636162
-32396562653031396463393862633062346463643466353865393933373533323661623039626538
-30343438326462626137643835643466643236373836383665396362346135333466623264633033
-66626430646632346139663431643930646361363262366436353861643838663764643363306633
-30303462316666646261343439336131336234326236356666323336356131386263303333633863
-66623834356263623766386431336165653034623264623263626536626333363534323064323037
-34393066663664353837346333663162623864383730323566646534336537623162303339653235
-34343262373364313361316539653661656435343532353237313465653832313366383338333639
-61386230626534386438386262396464656533303630306432376133636132376635613939343838
-36393539343431326132616561366466663966386537633537386138623937343932653937623939
-39663366306635346233323830643066386565616461346132613835343264353662613233353231
-63343066663731663630343034363632663964323831336532663831663065326462613264343665
-32386339313563363730303231643166326635323137393134323732353936626438663161333338
-64626237656132653364663661363466613861306430333039343030616631663735383836303436
-65383334386337626633643135353830306639353162306463313036313263613330316534376266
-33326463623539393531303033356237613331663830663636323630383666333964626130333966
-31343731356234396165633330613362363339653837633038616330366635363863333332656133
-38636238383664653566613737373731313264633632656536656234653766613036343134386636
-38643735613762383530363732303738613062336363383038313337326266376461393663633333
-30316433613338373362333333383538376631383335346536366338663438313736313564663531
-64313331623238313438636563313662623231346439393066386361353236306265343865323066
-66383463396134633731643332383064663761653430313935646236386162313366643937633938
-62656461363635366139343463653435363161393862353034616562363237636638346565636362
-37616365636338616430313638656562613162346163356238306532396333306564633232383535
-38613561363664653333626561373661376232363930643934333566313662613835376163616461
-36656164656563333662616339663333353466636266633130386334643338346332326334376630
-66373031383637353562653837316561373338306438333534376165356663613330316661383137
-34386634626663326135383434383762656165393065323136326432613533626338396161623631
-31633565373065333834363363363430633162376334343763393639653862363537313432383037
-33646333386237306662313066343635386636323964366463386434653263353539393732303134
-33383735363331386431303537666139383539326237313535353466393436633061313761386534
-65333936613665616139343965366239306132636131393964656136363232656630626234653962
-62623363323331383035393266343563383730386166353464323837633063366536376631313166
-35613236326232396239626238396161386232363261376366303637326239383330663736633766
-63363562383464326138663738383464343131343636363735303866373937653839663264396431
-63373232343366356339626466336262383538626366653738313564303034373537383863363166
-36363039666534333237353535323438356135303730336233323636396539666436306661613236
-62653966653965383233376537666562643736646261636336633661653931636536663765373330
-33366536663536613536626466363165396461616231316663653739373233323763373631333161
-31383337653634343465616566353665363163316534646132636133373633623866353236313931
-66323939633737353037643365653531313131346366316234656464396131333939373362646361
-65396230646535336638623066393734623964663933653930386438383237666636303135616334
-38366333663334363733386237313233373664373534363930396237323837376332656364666261
-31323866666564653861386464343335396663646234386362333562396564636434376261376531
-66613437666131346262383861383139396665623264363639336664303863343665636239373331
-66333361393539313535656532383032653130633565356534353034613036336566636237333164
-31633831646433313930323665373165663639393662383561363133636134383237646235613035
-65666438303236366435613562636133383365653630343563303036373033346135343064383433
-34356666313264303763663665333761376539346462656635356537616532663339373532376362
-64636233306665353066306632363737653034636535363533666464366264383963313937313833
-65643064646463313763343366373066663130623866333432366135353132356231366436333733
-37373535306134663239313035303832333438363233646239656266346132656364383361313066
-32386161326336356331323330326139333938393739383362386239316237346137666231633164
-37383638363864303131626461393936616332646239623434376161353736656231633233313964
-38383136626337383339303835363130346236323131366564333836303564633735623530663934
-35626430303631613565383266363163343563323232653838323365613131663163646432653332
-35376335666463646661623864343639393035643636623963343936623963316339623864386538
-33373737306437383861633131656131616461333432616235346335316162386534316263303639
-37646538356163336636353864623830336532366139306532356133616165336461323737383062
-32666164353237363237363232633431376437343832363838386264623965663131326534383461
-63343764323231333036663733303634383030383836653462303336656337313662306564373132
-35353930343734646633613131623230363662316434373337333434326230383364626165643066
-66343461303732663938303966656434653737366338623966373538313936636363353733613931
-34323764613131636632653066663533356636363636373064326536376163393231313763363632
-37353964323763386233623438386636353930396562653863643161343439636437366535393434
-66303763373537323039336430343564663666313131643036623064363837613937336161323562
-65363238373462613730653363333566636361303264633461356432313830353238633766396566
-38393333653038643836373331646332633364666630613762623163353434326165303038653635
-30646231663636653637386138643233666136636438613234333535666161643035663863656466
-32353166353165666161663830643331393466333031613233303262623863623861333431313436
-30313361613832336532653537653632623633653838393736646539633738363263653165623430
-65306366333936323262663365643734356332336430383961363863396134326430303563346462
-34303363626435383534653963353636393330373839356438336139616662616462633764363034
-65346530636530383163663136386363336366663230316264346664386534633837653436323630
-34363666663764313463393635393863623865353035616433356263653664363838666164396234
-30333730643162633832303533623531326561373935346234646433363335646562613066343062
-36336234653333643830653062343831633033323561313566613866326135316338656133333239
-65363664623261636239616439613361346433313133333831616532343130383833353332633331
-34383437666335663266303161636162626663303263366261653966623761396235636264346666
-35366431643535373462616235313034353864366662643837353163353763636564663862316332
-65323133373539313531326137356362356334386332336438373763363836623863393239633030
-66386637303430623836636235653138633033346166326335383934643433363563303939666133
-62333232376335356564363135656339333337303565356565376337326632346130643631616132
-64633037326562393236616236663434623939646535336634646637316632306138383834363032
-65383336343533663638616535613638303236613563316635383238376636306266643037333432
-62363864613230306335656562356130613966313263646566373864356135653830393431323664
-38313234386630653834386531393862386533643339666365626466353332373539653736653333
-35396265393736393939633663613965356263343234303437393862356161363832336334303764
-65393136656630366262616264613464613436613938646433363864643838663835393638313731
-32343835396361626366636362636630633330356263316265326632666434386365356234646131
-38316338636339613138623232363361663430303136323734376135366431336364643063303566
-35366263633433333537373733313830313433633162333166346435363539353862313464316263
-63653263373133633237653633326363656330373838306432333936656564323231376235663839
-63353331636531366138646539323565316362656365303139616364393264643130383137383361
-61343935373138393632663031633865663733353064343232376565363831356263306532363866
-38323366316432366632656237656564396636656331653334323763663035313735343361383833
-65333961663766636635353137666239323636373761653864396433393866336432366435336537
-35333935636537376363663166316630613331643231653038356362323039643731363436356362
-33306131303432343432323566653561303036616631383737366338393761333737653635633463
-61633235313831353337323333343062343865343235313538303034346233376466316437343834
-38643338653166613262326230646364343362303731316431316432663530623436346665336137
-63666230323035653734353431616364363733313033376532323633386630356665633732656662
-35633366376237616536386631386433333561623832386236393062663033643439396535373866
-64313663643734376632363661653433376464653933636333626530613964613234666530663063
-36643335396561336161656562303333323866663466323437303731376561643666336439666563
-6637
+63353966366236363639666631633336386562316663666137376163353862626462363236643930
+6534306465623637303832393765346434303462613666650a343661323330643663653631383038
+36666165356130616437343133616638636463376239663539643033643662386537303365626133
+3632633133626464630a623332356234353361353239393235643135313035653664303361306532
+31303763633838633738646566336430643565323664303565356164623261343762383361646434
+32626465643237623737666565393338613265333131353134333035653433333935633666656662
+62626338333462623735336563366164383131323464623662393134383836333834373832623735
+32386638643334336234663063656534323933343431363335366433333235633064613664326539
+35623465356534363162363833643266666664363638646138393236626532386465323939306139
+39346538643664616338363165616638613533326339303337306232373364613234626163653165
+62623731326232636530333462646438666630393365663837356461656263316365663935316431
+62316266313931663538333837643139326530373139303665616234376330613137656631356363
+65653434313763656265373939613736343064616530373530656534396633653737613662356333
+61383564666231393531363166393139623663346362643763666538346437353833636663326465
+65336534333162666436323665376163663765346433333562323862363566323535303364336666
+38373830316566343938626661646463346532326130613733386536336266306336303661633062
+65623261383963366266643162376132383137653137393166363766396638376461653062633531
+34653336633464626632306566333937393735383265333939396231366662346164323138323365
+61386439393836656264613331326561666434386138383035373165623864643838663635306134
+38313738343364656665376133356164333865343335613030663138326130313637653766313337
+61646365373661646333313363303538326230356466303863306233323263306564633464663061
+65346266343834303331616466373934346236393036643437383738613536373864356536653361
+34373638313034616566633638373866316436643266623265373137383036613963353838396662
+65313762316366333335666363653964623536326336383337626635343233636538363136316164
+33303536386433353065383938383138653131316335653739363833333230646635313138613834
+35383362643038373265313461666231333161656333653739663066643134306330653739636663
+64636338313664643136666631316464626234353032633265343038663733616563383233613238
+30653963353531666235393932366462363832363163616531646261663035666261323539666364
+64616532656530343638643034633534656436643162323032346530646535326463303463306261
+31363637383666353461633963356339616262613233616238386662643839303138396633646263
+30623563643463613963363461663434353436356661333435353539376662616637623161323162
+61353161623839383866616437626239666435313039313336623735623862326162323831663639
+33343032383161666131663462656162303165323935343264623161313137646230653537623730
+38313337653933643631323464356634313137613536386561663735336235376432626363353435
+33373063356165373430643264643937313735303039626463323632653762303066333034313731
+65393730336362316331393266336162366133643162663732373331366261376361306635313162
+33613962633164663834623636313932383861386164356161623434653130633362633737616466
+62613066333334346639643339303661336439663238643336646234303062633432376335623831
+30386531633032633964333832386233623561636538343838366437663837343332333235386362
+63393733366562626164646232346431623266663434346438306635616464333332633435386632
+33396166343033363337383563623735313337393935633633353065316335316664313831346236
+30373930366131656437326137373562326432383162306466646533396561626234346133373133
+37316264613939333439343934653137623632653231313166393630613763646163633063646533
+39343830666533636133643365376238313164643963363932316332333965653431373463656166
+34313333636532356564333664613838393662346239636333323634383732393030613532656339
+36396461363563656134373735346230626264366133386534653533383536396663316263666337
+65333061623738666239373861666663383939306365323964346237363561346231643864616636
+38383365336662306166626632326565326662623730656662366464386634393131613934633831
+35396339363237653532306636323639343537306165353464393434363764343932333361356236
+35376135346630653762613833303139363830663335336262353465616564626230363463366533
+37306535623566623065393133613761386430333334616432646330343239366433616432356636
+32613632376530353432373937666164613234616236643639633335363365656165326334336262
+37373138626531653764343237393762376239636132656232363636666261343238333033353937
+63363261613339393436623534653634646566376337386433656563656466353138633965636234
+34613563343937386431313563383431666335393161383766353666373431386138663864393837
+33333831343563613832343338343833353331343538326666353334343032663730623133666530
+65316335633736376333656264343664376435393131616233303634396330336162373539643164
+65323537336439306539366538666139616338613063323830396133373765353433373566616632
+38623330306538386630663065373933653431366362333934613662626533333135383737646432
+37313363636166306261336437656564396265366132333762643363303065633831623166653264
+39316136386533656638303663386262366438663433626536336235323238656235393533633862
+31376338376330373737376332376462346136666338336664626536663034366136373536613437
+63333035366361353765353962373266333065643330323961333638616535326132663232343737
+38663931656634643965326333393565343132373764633164383232393230633933383964613234
+33613539616638333261393630316161323434383738363164633137666464383031353737386238
+66333835616364636339303234663263663062356135373066646235613865643962663038613432
+32626634363738633961373432386437623663373065323133376665306261363431333537336663
+36386132333130633536616131656563386236326533393066393436363734343961303939643130
+63393236396266633566366232353064633366323237626263373664623134326238386530653965
+35366665333032613133366263643335303163386330636665346437633438343438393138396431
+63353664376636323066623339306163363435653831353934663533376634633666623738623936
+32346162313962393838656638656330356331306639313835356333613439303461393763383762
+64313633373364363166383166313238623062613430313038356263353463363366326530343136
+30613861633431613063373163343734653139306339323664376266353033343533393361636663
+37653439656563663130393266373333623937336563326361663165626631336636306339373733
+38633630353563353731306662316466313261323337366561343238323338313561383161313331
+31393337656364386236646434396262366339616435333062383338383037396230613436383530
+35626534613236336334323666326666616236353432633435633762636339653130333464383261
+36373233363133616365336462393661623765666465626333613531343962363136336466316663
+34643033653836316138663161373030626536623661346439323336303038323136306131333831
+31373863303330383263333066333265343262316636306237356565393263616162656237643066
+32613061393365646463313764636363643636363661316264663961333939386431613035343537
+61366361363138363533646434653234623134313631396239633832636635663737366138666331
+64663739643038633032663531393537626331363763626637306362666637333461366434613930
+36373366306166363734313836653738386132653031393963343461323465613633636332366131
+36343237313361356531383264666436383861663665396230366261653764333438323930623331
+64383763656430653235616664663761343233353633643533643733633633633837346233656138
+62383735303662386265393331383862666635356433326163363132343530376664323931316534
+37666535363066396633396366323666306262613733356466373336636165616161623239303031
+39333232646138386538313934643734623334346538623233313032313464643935313563323364
+33643461633566653336633732323164343939313365656163313964356436666264336630636166
+62363535366438396232643662303837336239613162333364303938383134363438386637353664
+61633766363262626661313162393033393930613233353464366264323661323838316234336438
+33663661373931393839386635303538373438386431653238623664323838643966386162323361
+64666436323139663839633232346539336634663363633363313338633135653865303434613731
+34393262323933626638373238326437646339326330366161346538633737393766643138376434
+34623932356364376135383363343137393365656635653438656163333835643265323866653136
+61356266656465656238666566373537663939636635326233376164663061303065343239373432
+37366165623339316238383664643061313433373162356633373165306533373863313935646239
+32663439396634366538353230373265376435396336346534363335393137643530363563653766
+36613061343139373861393836396433623663303964633037393734313963616666393839323765
+61653761386233373432306131363636396562316130616564356433643832373463653764343838
+39373264356466373838616130623763653666383335666165616233653634653562323737653535
+62633532663035396236353061373663326663303235653137306133616464396639356462323030
+35643739646531376439383638656138633737633038613335343462336138663963343163656339
+63333339643462366538616465303331336130616532313063376465383138393232623634313062
+62356130633031616232373335326630393631306432396138333239653066343363393336653437
+32336236316666376236343865383364373030353835666439663963346563323631346464646366
+31363166396133313830356530353865356266373437376632383231383164393637306664616637
+66663664633463616432623739393836343865393732626239656638323034393736346632333339
+36646233376233616464306532343765613834366434343434353231613030643539363263633266
+34623332643863663130666231616663316264623632373364373465306133346166643734343363
+36333534383330313466623237336161383664643636353139363636636365343863396161363364
+38623366346236393466353838333762333263623738646462616666633937333666386239396334
+32326635656662383232333031353738626432313539656164653038353531623063353862653038
+65383034396134623431653061646235383264656633333030306562303630316333323237653065
+66656431376538386339656236326434313166383661353230346562343363343039376666616539
+3861313565366261363864313136653263373037313438353730