<div dir="ltr"><div class="gmail_default" style="font-family:arial,helvetica,sans-serif">Hi,</div><div class="gmail_default" style="font-family:arial,helvetica,sans-serif"><br></div><div dir="ltr">We have historically been monitoring RDO's infrastructure through Sensu and it has served us well to pre-emptively detect issues and maximize our uptime.</div><div dir="ltr"><br></div><div dir="ltr"><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">At some point, ​Software Factory [1] grew an implementation of Grafana, InfluxDB and Telegraf in order to monitor the health of the servers, not unlike how upstream's openstack-infra leverages cacti.<br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">This implementation was meant to eventually host graphs such as the ones for Zuul and Nodepool upstream.</div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default"><br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">While there are still details to be ironed out for the Zuul and Nodepool data collection, there was nothing preventing us from just deploying telegraf everywhere just for the general server metrics.<br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">It's one standalone package and one configuration file, that's it.</div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default"><br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">Originally, we had been thinking about feeding the Sensu metric data to Influxdb [2]... but why even bother if it's there for free in Software Factory ?</div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">So here we are.</div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default"><br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">The metrics are now available here: <a href="https://review.rdoproject.org/grafana">https://review.rdoproject.org/grafana</a></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">We will use this as a foundation to improve visibility into RDO's infrastructure, make it more "open" and accessible in the future.<br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default"><br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">We're not getting rid of Sensu although we may narrow it's scope to keep some of the more complex service and miscellaneous monitoring that we need to be doing.</div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">We'll see what time has in store for us.<br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default"><br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">Let me know if you have any questions !<br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default"></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default"><br></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">[1]: <a href="https://softwarefactory-project.io">https://softwarefactory-project.io</a></div><div style="font-family:arial,helvetica,sans-serif" class="gmail_default">[2]: <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1514089">https://bugzilla.redhat.com/show_bug.cgi?id=1514089</a><br></div></div><div dir="ltr"><br style="font-size:12.8px"><span style="font-size:12.8px">David Moreau Simard</span><br style="font-size:12.8px"><span style="font-size:12.8px">Senior Software Engineer | OpenStack RDO</span><br style="font-size:12.8px"><br style="font-size:12.8px"><span style="font-size:12.8px">dmsimard = [irc, github, twitter]</span><br></div>
</div>