<div dir="ltr"><div><p style="margin:0px;font-size:13px;font-family:Verdana">Things are getting worse for me here.  I rebooted my library server this morning hoping that might cure the ‘not found’ issue.  But it didn’t and I ended up with more weirdness.</p><p style="margin:0px;font-size:13px;font-family:Verdana;color:rgb(255,37,0);min-height:16px"><br></p><p style="margin:0px;font-size:13px;font-family:Menlo">Now when I try to log into my test course from any of my access servers I get this message:</p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p><p style="margin:0px;font-size:11px;font-family:Courier"><span style="font-size:13px;font-family:Menlo"> </span><span style="font-size:13px;font-family:Verdana">Map not loaded: The file </span>/home/httpd/html/userfiles/binghamton/71215825fc2344762binghamtonl1/default.sequence<span style="font-size:13px;font-family:Verdana"> does not exist.</span></p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p><p style="margin:0px;font-size:13px;font-family:Menlo">and I get sent back to the roles screen.  I look on binghamtonl1 and this file does not exist.  </p><p style="margin:0px;font-size:13px;font-family:Verdana;color:rgb(255,37,0);min-height:16px"><br></p><p style="margin:0px;font-size:13px;font-family:Verdana">Looking in lonnet on the library server I see this during and after the reboot:</p><p style="margin:0px;font-size:13px;font-family:Verdana;color:rgb(255,37,0);min-height:16px"><br></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:43 2015 (15857): caching of id -> dns%3a%2fadm%2fdns%2fhosts  failed</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:44 2015 (15857): Name <a href="http://loncapa.brs.cgresd.net">loncapa.brs.cgresd.net</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:50 2015 (15857): Name <a href="http://tuvok.physast.uga.edu">tuvok.physast.uga.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:50 2015 (15857): Name <a href="http://BCHS-CAPA.jeffco.k12.co.us">BCHS-CAPA.jeffco.k12.co.us</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:51 2015 (15857): Name <a href="http://loncapa.nfcc.edu">loncapa.nfcc.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:52 2015 (15857): caching of id -> iphost%3aiphost  failed</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:56 2015 (8569): Failed to flush log buffer for binghamton_71215825fc2344762binghamtonl1</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:56 2015 (8572): Failed to flush log buffer for binghamton_71215825fc2344762binghamtonl1</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:56 2015 (2602): Failed to flush log buffer for binghamton_71215825fc2344762binghamtonl1</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:56 2015 (3204): Failed to flush log buffer for binghamton_71215825fc2344762binghamtonl1</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:56 2015 (8570): Failed to flush log buffer for binghamton_71215825fc2344762binghamtonl1</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:56 2015 (8551): Failed to flush log buffer for binghamton_71215825fc2344762binghamtonl1</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:40:56 2015 (3202): Failed to flush log buffer for binghamton_71215825fc2344762binghamtonl1</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:41:06 2015 (8569): Shutting down</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:41:06 2015 (3202): Failed to flush log buffer for binghamton_4231791afc6bb5593binghamtona6</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:41:06 2015 (2602): Shutting down</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:41:06 2015 (8572): Shutting down</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:41:06 2015 (3204): Shutting down</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:42:06 2015 (8570): Shutting down</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:43:04 2015 (1362): <font color="yellow">INFO: Read configuration</font></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:43:04 2015 (1362):  Detected 64bit platform (1)</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:43:04 2015 (1362): unable to contact DNS defaulting to on disk file dns_hosts.tab</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:43:04 2015 (1362): Name <a href="http://vita.ostfalia.de">vita.ostfalia.de</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:43:04 2015 (1362): Name <a href="http://loncapa2.vcu.edu">loncapa2.vcu.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:43:04 2015 (1362): Name <a href="http://loncapa.et-inf.fho-emden.de">loncapa.et-inf.fho-emden.de</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:43:04 2015 (1362): Name <a href="http://loncapa.calpoly.edu">loncapa.calpoly.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p><p style="margin:0px;font-size:13px;font-family:Menlo">this goes on for all the servers.</p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p><p style="margin:0px;font-size:13px;font-family:Menlo">Thinking that something in the OS didn’t finish starting before lon-capa, I restarted lon-capa via loncontrol.</p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p><p style="margin:0px;font-size:13px;font-family:Menlo">That cleared up ‘unable to contact DNS defaulting to on disk file dns_hosts.tab’ message and </p><p style="margin:0px;font-size:13px;font-family:Menlo">now I see this in lonnet which seems to always be there:</p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:48:36 2015 (2812): <font color="yellow">INFO: Read configuration</font></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:48:36 2015 (2812):  Detected 64bit platform (1)</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:04 2015 (2825): <font color="yellow">INFO: Read configuration</font></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:04 2015 (2825):  Detected 64bit platform (1)</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:05 2015 (2825): caching of id -> dns%3a%2fadm%2fdns%2fhosts  failed</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:05 2015 (2825): Name <a href="http://loncapa.brs.cgresd.net">loncapa.brs.cgresd.net</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:05 2015 (2825): Name <a href="http://tuvok.physast.uga.edu">tuvok.physast.uga.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:05 2015 (2825): Name <a href="http://BCHS-CAPA.jeffco.k12.co.us">BCHS-CAPA.jeffco.k12.co.us</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:06 2015 (2825): Name <a href="http://loncapa.nfcc.edu">loncapa.nfcc.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:06 2015 (2825): caching of id -> iphost%3aiphost  failed</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:07 2015 (2980): <font color="yellow">INFO: Read configuration</font></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:07 2015 (2980):  Detected 64bit platform (1)</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:07 2015 (2980): <span style='color:yellow;'>INFO: Read file types</span></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:07 2015 (2980): caching of id -> dns%3a%2fadm%2fdns%2fhosts  failed</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:08 2015 (2980): caching of id -> dns%3a%2fadm%2fdns%2fdomain  failed</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:08 2015 (2980): Name <a href="http://loncapa.brs.cgresd.net">loncapa.brs.cgresd.net</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:08 2015 (2980): Name <a href="http://tuvok.physast.uga.edu">tuvok.physast.uga.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:08 2015 (2980): Name <a href="http://BCHS-CAPA.jeffco.k12.co.us">BCHS-CAPA.jeffco.k12.co.us</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:08 2015 (2980): Name <a href="http://loncapa.nfcc.edu">loncapa.nfcc.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:08 2015 (2980): caching of id -> iphost%3aiphost  failed</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:11 2015 (2995): <font color="yellow">INFO: Read configuration</font></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:11 2015 (2995):  Detected 64bit platform (1)</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:13 2015 (3012): <font color="yellow">INFO: Read configuration</font></p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:13 2015 (3012):  Detected 64bit platform (1)</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:14 2015 (3013): Name <a href="http://loncapa.brs.cgresd.net">loncapa.brs.cgresd.net</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:14 2015 (3013): Name <a href="http://tuvok.physast.uga.edu">tuvok.physast.uga.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:14 2015 (3013): Name <a href="http://BCHS-CAPA.jeffco.k12.co.us">BCHS-CAPA.jeffco.k12.co.us</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo">Sat Sep 19 08:49:14 2015 (3013): Name <a href="http://loncapa.nfcc.edu">loncapa.nfcc.edu</a> no IP found</p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p><p style="margin:0px;font-size:13px;font-family:Verdana"><span style="font-family:Menlo">I still have the ‘</span>Map not loaded: The file <span style="font-size:11px;font-family:Courier">/home/httpd/html/userfiles/binghamton/71215825fc2344762binghamtonl1/default.sequence</span> does not exist’ message and cannot get into my test course.</p><p style="margin:0px;font-size:13px;font-family:Verdana;min-height:16px"><br></p><p style="margin:0px;font-size:13px;font-family:Verdana">Any ideas?   </p><p style="margin:0px;font-size:13px;font-family:Verdana;min-height:16px"><br></p><p style="margin:0px;font-size:13px;font-family:Verdana">Thanks,</p><p style="margin:0px;font-size:13px;font-family:Verdana">Bob Gonzales</p><p style="margin:0px;font-size:11px;font-family:Courier">














































































</p><p style="margin:0px;font-size:13px;font-family:Menlo;min-height:15px"><br></p></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Sep 18, 2015 at 12:43 PM, Bob Gonzales <span dir="ltr"><<a href="mailto:rgonzal@binghamton.edu" target="_blank">rgonzal@binghamton.edu</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>Stuart,<br><br></div>In my library servier httpd error_log I see:<br><br>[Thu Sep 17 10:49:37.441421 2015] [:error] [pid 2605] access to /home/httpd/html/raw/binghamton/gonzales/Testing Area/foobar.problem failed for 128.226.130.9, reason: binghamtona2 not subscribed<br><br>The subscription file shows the access server is subscribed.  <br><br>  binghamtona2:<a href="http://128.226.130.9:1442502030" target="_blank"><font color="red"><b>MailScanner warning: numerical links are often malicious:</b></font> 128.226.130.9:1442502030</a><br><br><br>Using the info in the referenced post <a href="http://mail.lon-capa.org/pipermail/lon-capa-admin/2013-November/002773.html" target="_blank">http://mail.lon-capa.org/pipermail/lon-capa-admin/2013-November/002773.html</a>, I'm thinking a name/ip problem.<br><br>So, regarding entries in /etc/hosts, there are only the default ones for 127.0.0.1 and ::1 on all the machines.<br><br>Looking at dns_hosts.tab  I see this on all the servers (access and library):<br><br>binghamtonl1:binghamton:library:loncapal1.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br>binghamtona2:binghamton:access:loncapa2.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br>binghamtona3:binghamton:access:loncapa3.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br>binghamtona4:binghamton:access:loncapa.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br>binghamtona5:binghamton:access:loncapa5.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br>binghamtona6:binghamton:access:loncapa6.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br>binghamtona7:binghamton:access:loncapa7.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br><br>Looking at hosts I see this on the library server:<br><br>^<a href="http://s10.lite.msu.edu" target="_blank">s10.lite.msu.edu</a><br>^<a href="http://dalton.chem.sfu.ca" target="_blank">dalton.chem.sfu.ca</a><br>^<a href="http://library1.lon-capa.uiuc.edu" target="_blank">library1.lon-capa.uiuc.edu</a><br>binghamtonl1:binghamton:library:loncapal1.chem.binghamton.edu:http:<a href="http://binghamton.edu" target="_blank">binghamton.edu</a><br><br>and this on one of the access servers:<br>^<a href="http://s10.lite.msu.edu" target="_blank">s10.lite.msu.edu</a><br>^<a href="http://dalton.chem.sfu.ca" target="_blank">dalton.chem.sfu.ca</a><br>^<a href="http://library1.lon-capa.uiuc.edu" target="_blank">library1.lon-capa.uiuc.edu</a><br>binghamtona2:binghamton:access:loncapa2.chem.binghamton.edu:http:<a href="http://chem.binghamton.edu" target="_blank">chem.binghamton.edu</a><br><br>I see <a href="http://binghamton.edu" target="_blank">binghamton.edu</a> in the dns_hosts.tab and and hosts.tab on the library server but I see <a href="http://chem.binghamton.edu" target="_blank">chem.binghamton.edu</a> in the access servers hosts.tab.  My dns domain is <a href="http://chem.binghamton.edu" target="_blank">chem.binghamton.edu</a> and I do remember using that during the installation on each machine this summer.  Could this be it?   <br><br>Thanks,<br>Bob Gonzales<div><div class="h5"><br><br><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Sep 17, 2015 at 5:23 PM, Stuart Raeburn <span dir="ltr"><<a href="mailto:raeburn@msu.edu" target="_blank">raeburn@msu.edu</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Hi Bob,<br>
<br>
Looking at lonc.log on the MSU LON-CAPA library server s10 I see that the run of /home/httpd/perl/loncron used to update connections and retrieve updated cluster membership information failed to connect to binghamtona2 at 5:11 am today.<br>
<br>
On the MSU library server ...<br>
<br>
Thu Sep 17 05:11:14 2015 (2148) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep 17 05:11:14 2015: Parent keeping the flock] <font color='red'>CRITICAL: Forking server for <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a></font><br>
Thu Sep 17 05:11:18 2015 (13722) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep 17 05:11:14 2015: Connected to <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] <font color='red'>CRITICAL: Failed to make a connection with lond.</font><br>
Thu Sep 17 05:11:18 2015 (13722) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep 17 05:11:14 2015: Connected to <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] <font color='blue'>WARNING: Failing transaction sethost</font><br>
<br>
As a result the lonc status reported on s10 for <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> was:<br>
<br>
www      13722  2148  0 05:11 ?        00:00:00 lonc: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries remaining: 5 () Thu Sep 17 13:29:08 2015<br>
<br>
However, when I attempted to connect to binghamtona2 a few hours ago the connection was successfully created:<br>
<br>
www      13722  2148  0 05:11 ?        00:00:00 lonc: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 1 Retries remaining: 5 (insecure) Thu Sep 17 13:34:39 2015<br>
<br>
and I was able to transfer my user session there.<br>
<br>
From the lonc.log information on your library server ...<span><br>
<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
   Thu Sep 17 11:05:19 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:53:24 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='green'>SUCCESS: Connection 1 to<br>
<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> now ready for action</font><br>
   Thu Sep 17 11:10:20 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 11:10:20 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 1 Retries<br>
remaining: 5 (insecure)] <font color='blue'>WARNING: Shutting down a<br>
socket</font><br>
</blockquote>
<br></span>
This indicates successful creation of a connection, and then shutdown 5 minutes later, as a result of pruning of idle connections (this is all as expected).  The IdleTimeout hard-coded in /home/httpd/perl/loncnew is 5 minutes.<span><br>
<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
   Thu Sep 17 10:53:24 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:42:10 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='yellow'>INFO: Resetting Connection<br>
Retries.</font><br>
</blockquote>
<br></span>
This occurs when &Apache::lonnet::reconlonc() sends "reset_retries".  &reconlonc($clientname) is called in lond when lond is connected by a known client (excluding connections from itself).<span><br>
<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
      Cleanup phase: Notifications<br>
<br>
     Notifying host binghamtona7:not_found<br>
     Notifying host binghamtona2:not_found<br>
</blockquote>
<br></span>
The logged "not_found" messages originate from lond::update_resource_handler() on the library server, and will be sent if the old copy of the file which has just been republished is no longer present on the access server.<br>
<br>
That can happen if the Linux OS on the access server was updated without preserving the contents of /home/httpd/html/res/.  This is not an issue, including the case where the access server had a subscription to the file before the access server was updated/rebuilt.  When the file is requested in a user session hosted on the access server it should be replicated to the access server from the library server, as usual.<br>
<br>
However this:<span><br>
<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
   Thu Sep 17 11:00:30 2015 (3908): <font color="blue">WARNING: LWP get:<br>
403 Forbidden: /home/httpd/html/res/binghamton/gonzales/Testing<br>
Area/foobar.problem</font><br>
<br>
</blockquote>
<br></span>
indicates that the replication failed.  You might check in the corresponding Apache error_log file for the request for:<br>
<br>
GET /raw/binghamton/gonzales/TestingArea/foobar.problem<br>
<br>
from 128.226.130.9.<br>
<br>
See:<br>
<br>
<a href="http://mail.lon-capa.org/pipermail/lon-capa-admin/2013-November/002773.html" rel="noreferrer" target="_blank">http://mail.lon-capa.org/pipermail/lon-capa-admin/2013-November/002773.html</a><br>
<br>
for a discussion of things to check.  In that particular instance the "Forbidden" error was caused by an incorrect IP address in /etc/hosts<br>
<br>
Stuart Raeburn<br>
LON-CAPA Academic Consortium<div><div><br>
<br>
Quoting Bob Gonzales <<a href="mailto:rgonzal@binghamton.edu" target="_blank">rgonzal@binghamton.edu</a>>:<br>
<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
Hi,<br>
<br>
I'm running 2.11.1 and centos 7.1 on all my servers.<br>
<br>
When I publish a resource and then try to access it on any of my access<br>
servers I get the message 'unable to find' and then the name of the problem<br>
just published.<br>
<br>
The subscription file for the problem shows the access server has<br>
subscribed.<br>
<br>
When I republished a file the log file for the problem I got the following<br>
information from the log file for the problem:<br>
<br>
      Cleanup phase: Notifications<br>
<br>
     Notifying host binghamtona7:not_found<br>
     Notifying host binghamtona2:not_found<br>
     Notifying course binghamton_71215825fc2344762binghamtonl1:ok<br>
<br>
I see a lot of these messages for binghamtona2 (loncapa2) in the library<br>
server lonnet.log<br>
<br>
Thu Sep 17 10:53:24 2015 (8257): Trying to reconnect lonc for binghamtona2 (<br>
<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>)<br>
<br>
And these in the library servers lonc.log<br>
<br>
    Thu Sep 17 10:42:10 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:42:10 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='yellow'>INFO: Resetting Connection<br>
Retries.</font><br>
   Thu Sep 17 10:53:24 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:42:10 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='yellow'>INFO: Resetting Connection<br>
Retries.</font><br>
   Thu Sep 17 10:53:24 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:53:24 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='yellow'>INFO: Resetting Connection<br>
Retries.</font><br>
   Thu Sep 17 10:53:24 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:53:24 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>  Connection count: 0 Retries<br>
remaining: 5 ()] <font color='yellow'>INFO: Resetting Connection<br>
Retries.</font><br>
   Thu Sep 17 11:05:19 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:53:24 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='green'>SUCCESS: Created connection 1 to host<br>
<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a></font><br>
   Thu Sep 17 11:05:19 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:53:24 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='yellow'>INFO: Connected to lond version:<br>
489</font><br>
   Thu Sep 17 11:05:19 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 10:53:24 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 0 Retries<br>
remaining: 5 ()] <font color='green'>SUCCESS: Connection 1 to<br>
<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> now ready for action</font><br>
   Thu Sep 17 11:10:20 2015 (3279) [<a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a>] [Thu Sep<br>
17 11:10:20 2015: <a href="http://loncapa2.chem.binghamton.edu" rel="noreferrer" target="_blank">loncapa2.chem.binghamton.edu</a> Connection count: 1 Retries<br>
remaining: 5 (insecure)] <font color='blue'>WARNING: Shutting down a<br>
socket</font><br>
<br>
I also see this in the access servers lonnet.log:<br>
<br>
   Thu Sep 17 11:00:30 2015 (3908): <font color="blue">WARNING: LWP get:<br>
403 Forbidden: /home/httpd/html/res/binghamton/gonzales/Testing<br>
Area/foobar.problem</font><br>
<br>
I don't really know what all of this means.  Any help would be appreciated.<br>
<br>
Thanks,<br>
Bob Gonzales<br>
Binghamton University<br>
Chemistry Dept<br>
</blockquote>
<br></div></div>
_______________________________________________<br>
LON-CAPA-admin mailing list<br>
<a href="mailto:LON-CAPA-admin@mail.lon-capa.org" target="_blank">LON-CAPA-admin@mail.lon-capa.org</a><br>
<a href="http://mail.lon-capa.org/mailman/listinfo/lon-capa-admin" rel="noreferrer" target="_blank">http://mail.lon-capa.org/mailman/listinfo/lon-capa-admin</a><br>
</blockquote></div><br></div></div></div></div>
</blockquote></div><br></div>