<!DOCTYPE html>
<html>
  <head>
    <meta http-equiv="Content-Type" content="text/html; charset=UTF-8">
  </head>
  <body>
    <p>also I can ping from stork to the dhcp servers.  and ssh in to
      them.<br>
    </p>
    <div class="moz-cite-prefix">On 7/23/25 20:15, fbcadmin wrote:<br>
    </div>
    <blockquote type="cite"
      cite="mid:20250724001516.040E7200A5@Mail.fantinibakery.com">
      <meta http-equiv="content-type" content="text/html; charset=UTF-8">
      <p>We have 10+ kea dhcp servers monitored by stork.   for some
        unknown yet reason 7 of them are out of communication with stork
        .    this issue started last night.  there were no communication
        issues for the last month.</p>
      <p>I've checked software version and configs.  The systems in comm
        with stork have the same software versions  and base
        configuration.  All systems are giving out dhcp addresses.  per
        systemclt all is well. </p>
      <p> I tried restoring a backup on one of the dhcp servers to no
        solution yet.</p>
      <p>A few hours before the issue started I did a hardware upgrade
        to one of our nodes in proxmox cluster.   So there could be
        something with our network etc.  I looked but will look again..<br>
      </p>
      <p>I did notice the following in /var/log/daemon.log on stork.  
        these repeat often - the log fills 2MB per hour.<br>
      </p>
      <p>looking at the logs,  does anyone notice something to be fixed
        in our configuration?</p>
      <p><br>
      </p>
      <p>Update -  I checked earlier in logs this started on :  so this
        may be unrelated.  However they are coming a lot faster  ' <span
          style="font-family:monospace"><span
            style="color:#000000;background-color:#ffffff;">Jul 21
            15:41:33 stork stork-server[284003]: time="2025-07-21
            15:41:33" level="error" msg="</span><span
            style="color:#ffffff;background-color:#000000;">Problem
            populating configuration review repo>'     </span><br>
        </span></p>
      <p><br>
      </p>
      <p><font face="monospace">Jul 23 19:58:34 stork stork-server[132]:
          time="2025-07-23 19:58:34" level="warning" msg="Problem
          getting state from Kea CA: cannot find Kea app"
          file="           appkea.go:303  "<br>
        </font></p>
      <p><font face="monospace">Jul 23 19:58:34 stork stork-server[132]:
          time="2025-07-23 19:58:34" level="warning" msg="Problem
          getting state from Kea daemons: cannot find Kea app"
          file="           appkea.go:309  "<br>
        </font></p>
      <p><font face="monospace"><br>
        </font></p>
      <p><font face="monospace">Jul 23 19:58:34 stork stork-server[132]:
          time="2025-07-23 19:58:34" level="error" msg="Problem
          populating configuration review reports <br>
          to the database for daemon 70103: ERROR #23502 null value in
          column \"config_hash\" of relation \"config_review\" violates
          not-null constraint\nproblem upserting the configuration
          review entry for daemon
70103\nisc.org/stork/server/database/model.AddConfigReview\n\t/builds/isc-projects/stork/backend/server/database/model/configreview.go:42\nisc.org/stork/server/configreview.(*dispatcherImpl).populateReports\n\t/builds/isc-projects/stork/backend/server/configreview/dispatcher.go:664\nisc.org/stork/server/configreview.(*dispatcherImpl).<br>
awaitReports\n\t/builds/isc-projects/stork/backend/server/configreview/dispatcher.go:359\nruntime.goexit\n\t/builds/isc-projects/stork/tools/golang/go/src/runtime/asm_amd64.s:1700"
          file="       dispatcher.go:361  "</font><br>
      </p>
      <br>
      <fieldset class="moz-mime-attachment-header"></fieldset>
    </blockquote>
  </body>
</html>