<!DOCTYPE html>
<html>
  <head>

    <meta http-equiv="content-type" content="text/html; charset=UTF-8">
  </head>
  <body>
    <p>We have 10+ kea dhcp servers monitored by stork.   for some
      unknown yet reason 7 of them are out of communication with stork
      .    this issue started last night.  there were no communication
      issues for the last month.</p>
    <p>I've checked software version and configs.  The systems in comm
      with stork have the same software versions  and base
      configuration.  All systems are giving out dhcp addresses.  per
      systemclt all is well. </p>
    <p> I tried restoring a backup on one of the dhcp servers to no
      solution yet.</p>
    <p>A few hours before the issue started I did a hardware upgrade to
      one of our nodes in proxmox cluster.   So there could be something
      with our network etc.  I looked but will look again..<br>
    </p>
    <p>I did notice the following in /var/log/daemon.log on stork.  
      these repeat often - the log fills 2MB per hour.<br>
    </p>
    <p>looking at the logs,  does anyone notice something to be fixed in
      our configuration?</p>
    <p><br>
    </p>
    <p>Update -  I checked earlier in logs this started on :  so this
      may be unrelated.  However they are coming a lot faster  ' <span
        style="font-family:monospace"><span
          style="color:#000000;background-color:#ffffff;">Jul 21
          15:41:33 stork stork-server[284003]: time="2025-07-21
          15:41:33" level="error" msg="</span><span
          style="color:#ffffff;background-color:#000000;">Problem
          populating configuration review repo>'     </span><br>
      </span></p>
    <p><br>
    </p>
    <p><font face="monospace">Jul 23 19:58:34 stork stork-server[132]:
        time="2025-07-23 19:58:34" level="warning" msg="Problem getting
        state from Kea CA: cannot find Kea app" file="          
        appkea.go:303  "<br>
      </font></p>
    <p><font face="monospace">Jul 23 19:58:34 stork stork-server[132]:
        time="2025-07-23 19:58:34" level="warning" msg="Problem getting
        state from Kea daemons: cannot find Kea app" file="          
        appkea.go:309  "<br>
      </font></p>
    <p><font face="monospace"><br>
      </font></p>
    <p><font face="monospace">Jul 23 19:58:34 stork stork-server[132]:
        time="2025-07-23 19:58:34" level="error" msg="Problem populating
        configuration review reports <br>
        to the database for daemon 70103: ERROR #23502 null value in
        column \"config_hash\" of relation \"config_review\" violates
        not-null constraint\nproblem upserting the configuration review
        entry for daemon
70103\nisc.org/stork/server/database/model.AddConfigReview\n\t/builds/isc-projects/stork/backend/server/database/model/configreview.go:42\nisc.org/stork/server/configreview.(*dispatcherImpl).populateReports\n\t/builds/isc-projects/stork/backend/server/configreview/dispatcher.go:664\nisc.org/stork/server/configreview.(*dispatcherImpl).<br>
awaitReports\n\t/builds/isc-projects/stork/backend/server/configreview/dispatcher.go:359\nruntime.goexit\n\t/builds/isc-projects/stork/tools/golang/go/src/runtime/asm_amd64.s:1700"
        file="       dispatcher.go:361  "</font><br>
    </p>
  </body>
</html>