<div dir="ltr"><div dir="ltr"><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Feb 10, 2022 at 8:20 AM Aleix Pol <<a href="mailto:aleixpol@kde.org">aleixpol@kde.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">[Snip]<br>
<br>
We still haven't discussed here is how to prevent this problem from<br>
happening again.<br>
<br>
If we don't have information about what is happening, we cannot fix problems.<br></blockquote><div><br></div><div>Part of the issue here is that the problem only came to Sysadmin attention very recently, when the system ran out of disk space as a result of growing log files.</div><div>It was at that point we realised we had a serious problem.</div><div><br></div><div>Prior to that the system load hadn't climbed to dangerous levels (> number of CPU cores) and Apache was keeping up with the traffic, so none of our other monitoring was tripped.</div><div> </div><div>If you have any thoughts on what sort of information you are thinking of that would be helpful.</div><div><br></div><div>It would definitely be helpful though to know when new software is going to be released that will be interacting with the servers as we will then be able to monitor for abnormalities.</div><div>(This would have allowed us to advise on the User-Agent stuff prior to September, as well as point out potential issues with caching </div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<br>
Is there anything that could be done in this front? The issue here<br>
could have been addressed months ago, we just never knew it was<br>
happening. </blockquote><div><br></div><div>One possibility that did occur to me today would be for us to integrate some kind of killswitch that our applications would check on first initialisation of functionality that talks to KDE.org servers.</div><div>This would allow us to disable the functionality in question on user systems.</div><div><br></div><div>The check would only be done on first initialization to keep load low, while still ensuring all users eventually are affected by the killswitch (as they will eventually need to logout/reboot for some reason or another).</div><div><br></div><div>The killswitch would probably work best if it had some kind of version check in it so we could specify which versions are disabled.</div><div>That would allow for subsequent updates - once delivered by distributions - to restore the functionality (while leaving it disabled for those who haven't updated).</div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<br>
Aleix<br></blockquote><div><br></div><div>Thanks,</div><div>Ben </div></div></div>