<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2//EN">
<HTML>
<HEAD>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=iso-8859-1">
<META NAME="Generator" CONTENT="MS Exchange Server version 6.5.7655.1">
<TITLE>Re: [rancid] Email notification with RANCID</TITLE>
</HEAD>
<BODY>
<!-- Converted from text/plain format -->

<P><FONT SIZE=2>The syslog events are indexed in Splunk with a specific sourcetype, in our<BR>
case 'Rancid'. We run RANCID via cron once a day. Therefore, our Splunk<BR>
reports are on a daily schedule. Here is a list of the reports that we run.<BR>
<BR>
Consistent errors, where the same device has an error for the last two<BR>
weeks. Run daily, for the last 2 weeks. Query: sourcetype=&quot;Rancid&quot;<BR>
&quot;rancid-run&quot; error | stats count by device | where count &gt; 13<BR>
<BR>
Excessive errors, where we have a large number of errors in a single run.<BR>
Run daily, for the last 24 hours. Query: sourcetype=&quot;Rancid&quot; rancid Errors &gt;<BR>
7<BR>
<BR>
Did not finish, where we do not see the end of the run for our three RANCID<BR>
groups. Run daily, for the last 24 hours. Query: sourcetype=&quot;Rancid&quot;<BR>
rancid-run ending: | stats count by date_mday | where count != 3<BR>
<BR>
The reports are only emailed to our network team if the event count is<BR>
greater than zero. In other words, we only get notified if there is a<BR>
problem.<BR>
<BR>
If you want to discuss this further, lets take it off-list.<BR>
<BR>
Skye.<BR>
<BR>
<BR>
<BR>
On 1/20/12 12:52 AM, &quot;Krzysztof Zygmunt&quot; &lt;krzysztof.zygmunt@gmail.com&gt;<BR>
wrote:<BR>
<BR>
&gt; Hi,<BR>
&gt;<BR>
&gt; It looks very interesting, can you tell me what do you do with those<BR>
&gt; syslog messages<BR>
&gt; on splunk side ? How do you generate any reports from such information ?<BR>
&gt;<BR>
&gt; cheers<BR>
&gt; kris<BR>
&gt;<BR>
&gt; 2012/1/18 Hagen, Skye &lt;skyeh@uidaho.edu&gt;:<BR>
&gt;&gt; We took a completely different tact on notification. We backup over 1600<BR>
&gt;&gt; devices nightly, and only want notification if there is a problem, and in<BR>
&gt;&gt; some cases, only when there is a major problem.<BR>
&gt;&gt;<BR>
&gt;&gt; We use syslog with Splunk for a majority of our reporting. What I did was to<BR>
&gt;&gt; wrap 'rancid-run' in a shell script that will take the logs, massage them,<BR>
&gt;&gt; and send the results to syslog.<BR>
&gt;&gt;<BR>
&gt;&gt; We have created a number of Splunk reports, such as a report that tells us<BR>
&gt;&gt; if there are excessive errors, or if a backup has had successive failures.<BR>
&gt;&gt;<BR>
&gt;&gt; If anyone is interested, I have attached the script.<BR>
&gt;&gt;<BR>
&gt;&gt; Skye.<BR>
&gt;&gt;<BR>
&gt;&gt;<BR>
&gt;&gt;<BR>
&gt;&gt;<BR>
&gt;&gt;<BR>
&gt;&gt; On 1/16/12 5:58 PM, &quot;Michael Lee&quot; &lt;michael.lee@mincom.com&gt; wrote:<BR>
&gt;&gt;<BR>
&gt;&gt;&gt; Hi,<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; Really appreciate your reply. Yeah, however I am trying to list out all<BR>
&gt;&gt;&gt; the<BR>
&gt;&gt;&gt; devices and backup status in a list. By the way, do you know anyway to<BR>
&gt;&gt;&gt; send<BR>
&gt;&gt;&gt; the configuration diff using html format in an EMAIL similar to what we<BR>
&gt;&gt;&gt; see on<BR>
&gt;&gt;&gt; VIEWVC?<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; BR,<BR>
&gt;&gt;&gt; Michael<BR>
&gt;&gt;&gt; -----Original Message-----<BR>
&gt;&gt;&gt; From: shouldbe q931 [<A HREF="mailto:shouldbeq931@gmail.com">mailto:shouldbeq931@gmail.com</A>]<BR>
&gt;&gt;&gt; Sent: Tuesday, January 17, 2012 2:55 AM<BR>
&gt;&gt;&gt; To: Michael Lee<BR>
&gt;&gt;&gt; Cc: rancid-discuss@shrubbery.net<BR>
&gt;&gt;&gt; Subject: Re: [rancid] Email notification with RANCID<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; On Mon, Jan 16, 2012 at 5:33 AM, Michael Lee &lt;michael.lee@mincom.com&gt;<BR>
&gt;&gt;&gt; wrote:<BR>
&gt;&gt;&gt;&gt; Hi all,<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt; I am new to RANCID, hopefully you guys can help. I have been trying to<BR>
&gt;&gt;&gt;&gt; find<BR>
&gt;&gt;&gt;&gt; some way to make RANCID notify daily through mail which devices is backup<BR>
&gt;&gt;&gt;&gt; successful and which backup is not successful.<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt; Is there currently a way to do this. I notice the capability at the<BR>
&gt;&gt;&gt;&gt; moment<BR>
&gt;&gt;&gt;&gt; only send notification on the changes of the configuration.<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt; Many thanks in advance,<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt; Br,<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt; Michael<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;&gt;<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; rancid will send a notification email if it has not been able to<BR>
&gt;&gt;&gt; contact a device for 24hours, the below is from control_rancid<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; ----------------------------------------------------------------------------<BR>
&gt;&gt;&gt; --<BR>
&gt;&gt;&gt; -----------------<BR>
&gt;&gt;&gt; # If any machines have not been reached within the last $OLDTIME<BR>
&gt;&gt;&gt; # hours, mail out a list of them.<BR>
&gt;&gt;&gt; cd $DIR/configs<BR>
&gt;&gt;&gt; rm -f $DIR/routers.failed<BR>
&gt;&gt;&gt; if [ &quot;X$OLDTIME&quot; = &quot;X&quot; ] ; then<BR>
&gt;&gt;&gt;      OLDTIME=24<BR>
&gt;&gt;&gt; fi<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; ----------------------------------------------------------------------------<BR>
&gt;&gt;&gt; --<BR>
&gt;&gt;&gt; -----------------<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; This transmission is for the intended addressee only and is confidential<BR>
&gt;&gt;&gt; information. If you have received this transmission in error, please<BR>
&gt;&gt;&gt; notify<BR>
&gt;&gt;&gt; the sender and delete the transmission. The contents of this e-mail are<BR>
&gt;&gt;&gt; the<BR>
&gt;&gt;&gt; opinion of the writer only and are not endorsed by the Mincom Group of<BR>
&gt;&gt;&gt; companies unless expressly stated otherwise.<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt;<BR>
&gt;&gt;&gt; _______________________________________________<BR>
&gt;&gt;&gt; Rancid-discuss mailing list<BR>
&gt;&gt;&gt; Rancid-discuss@shrubbery.net<BR>
&gt;&gt;&gt; <A HREF="http://www.shrubbery.net/mailman/listinfo.cgi/rancid-discuss">http://www.shrubbery.net/mailman/listinfo.cgi/rancid-discuss</A><BR>
&gt;&gt;<BR>
&gt;&gt;<BR>
&gt;&gt; _______________________________________________<BR>
&gt;&gt; Rancid-discuss mailing list<BR>
&gt;&gt; Rancid-discuss@shrubbery.net<BR>
&gt;&gt; <A HREF="http://www.shrubbery.net/mailman/listinfo.cgi/rancid-discuss">http://www.shrubbery.net/mailman/listinfo.cgi/rancid-discuss</A><BR>
<BR>
</FONT>
</P>

</BODY>
</HTML>