<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<style type="text/css" style="display:none;"> P {margin-top:0;margin-bottom:0;} </style>
</head>
<body dir="ltr">
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
/home is full.</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div>
<div style="font-family: Calibri, Arial, Helvetica, sans-serif; font-size: 12pt; color: rgb(0, 0, 0);">
<br>
</div>
<div id="Signature">
<div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
<span style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255); display:inline!important">James Clawson</span><br style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255)">
<span style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255); display:inline!important">Laboratory Manger</span><br style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255)">
<span style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255); display:inline!important">University of South Carolina</span><br style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255)">
<span style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255); display:inline!important">Department of Physics and Astronomy</span><br style="color:rgb(32,31,30); font-size:15px; text-align:start; background-color:rgb(255,255,255)">
<a href="mailto:clawsonj@mailbox.sc.edu" target="_blank" rel="noopener noreferrer" style="margin:0px; font-size:15px; text-align:start; background-color:rgb(255,255,255)">clawsonj@mailbox.sc.edu</a><br>
</div>
</div>
</div>
</div>
<div>
<div id="appendonsend"></div>
<div style="font-family:Calibri,Arial,Helvetica,sans-serif; font-size:12pt; color:rgb(0,0,0)">
<br>
</div>
<hr tabindex="-1" style="display:inline-block; width:98%">
<div id="divRplyFwdMsg" dir="ltr"><font face="Calibri, sans-serif" color="#000000" style="font-size:11pt"><b>From:</b> LON-CAPA-admin <lon-capa-admin-bounces@mail.lon-capa.org> on behalf of Raeburn, Stuart via LON-CAPA-admin <lon-capa-admin@mail.lon-capa.org><br>
<b>Sent:</b> Monday, September 6, 2021 2:08 PM<br>
<b>To:</b> lon-capa-admin@mail.lon-capa.org <lon-capa-admin@mail.lon-capa.org><br>
<b>Subject:</b> Re: [LON-CAPA-admin] Lots of errors...</font>
<div> </div>
</div>
<div class="BodyFragment"><font size="2"><span style="font-size:11pt">
<div class="PlainText">James,<br>
<br>
><br>
> We are getting a lot of error reports similar to what is attached.<br>
><br>
<br>
You might check to see whether the disk partition for /home is full (i.e, 100% used) on your LON-CAPA library server.  What does the command:<br>
<br>
df -h<br>
<br>
report?<br>
<br>
Stuart Raeburn<br>
LON-CAPA Academic Consortium<br>
________________________________________<br>
From: Raeburn, Stuart <raeburn@msu.edu><br>
Sent: Sunday, September 5, 2021 10:32 PM<br>
To: lon-capa-admin@mail.lon-capa.org<br>
Subject: Re: Lots of errors...<br>
<br>
James,<br>
<br>
I am able to transfer my user session on another LON-CAPA node in the network to the sc access server, and the sc access server is able to retrieve information about my courses etc.<br>
<br>
However, I am not able to then transfer my user session from the sc access server to the sc library server.  I am able to display the LON-CAPA course catalog for the sc domain on both the sc access server and sc library server.<br>
<br>
Based on this I would conclude that the sc access server is able to connect to other nodes in the LON-CAPA network (including the sc library server), but it seems that the sc library server is not able to make a "LON-CAPA" connection back to my home server.<br>
<br>
I don't know whether your campus firewall rules limit outbound connections for your LON-CAPA library server to IP addresses outside the sc network, so I don't know whether what I see currently is normal for your library server.<br>
<br>
>From the command line, these commands (run on each server -- library and access)<br>
<br>
ps -ef |grep lond |grep sc<br>
ps -ef |grep lonc |grep sc<br>
<br>
should show whether there are connections between lonc (on the library node) and lond on the access node), and vice versa.<br>
<br>
For the first one you should see something like<br>
lond: Listening to <sc hostID><br>
<br>
For the second you should see something like:<br>
Connection count: 1 Retries remaining: 5<br>
<br>
In the error report from the errorhandler web form submitted by a student, the error is:<br>
... write error at /home/httpd/lib/perl//Apache/lonuserstate.pm line 541<br>
<br>
which I expect would be called when a course session was being loaded (after role selection).<br>
<br>
There are log files in /home/httpd/perl/logs.<br>
<br>
><br>
> Students normally log into the access server and have been reporting an issue<br>
> that homework submissions are not being taken or rejected.<br>
><br>
<br>
Storage of a submission is considered operation "critical", so if a connection cannot be made from the access server to the library server, any "delayed" transactions will be queued, and completed when connectivity is restored.  You will find information about
 delayed transactions (destined for the library server) in /home/httpd/perl/logs/lonnet.perm.log on the access server.<br>
<br>
If you have additional information to share, while troubleshooting, feel free to contact me off-list.<br>
<br>
Stuart Raeburn<br>
LON-CAPA Academic Consortium<br>
________________________________________<br>
From: LON-CAPA-admin <lon-capa-admin-bounces@mail.lon-capa.org> on behalf of Clawson, James via LON-CAPA-admin <lon-capa-admin@mail.lon-capa.org><br>
Sent: Sunday, September 5, 2021 8:48 PM<br>
To: lon-capa-admin@mail.lon-capa.org<br>
Subject: [LON-CAPA-admin] Lots of errors...<br>
<br>
Hello,<br>
<br>
We are getting a lot of error reports similar to what is attached.<br>
<br>
On another (or possibly related) note:<br>
<br>
We are having login issues with our library server but not always the access one (I've been able to get in most of the time).  Students normally log into the access server and have been reporting an issue that homework submissions are not being taken or rejected. 
 The screen returns to the same state as before answering (no increase in submission attempts).   I have verified this behavior.   One thought I had was that it could be that the access server is not communicating with the library server (I don't have the knowledge
 yet to know how to check if this is true or not), and something is wrong on the library server.<br>
<br>
As far as I can tell, this is behavior that started a few days ago (Thursday).<br>
<br>
Any help on where to start diagnosis is appreciated.<br>
<br>
James Clawson<br>
Laboratory Manger<br>
University of South Carolina<br>
Department of Physics and Astronomy<br>
clawsonj@mailbox.sc.edu<mailto:clawsonj@mailbox.sc.edu><br>
_______________________________________________<br>
LON-CAPA-admin mailing list<br>
LON-CAPA-admin@mail.lon-capa.org<br>
<a href="https://protect2.fireeye.com/v1/url?k=482cf89a-17b7c19f-482cb65b-86564cfb0d85-05a5963fe217332c&q=1&e=520bac02-9ae8-47fa-8eed-452b8fdd9144&u=http%3A%2F%2Fmail.lon-capa.org%2Fmailman%2Flistinfo%2Flon-capa-admin"><font color="red"><b>MailScanner has detected definite fraud in the website at "protect2.fireeye.com". Do <i>not</i> trust this website:</b></font> https://protect2.fireeye.com/v1/url?k=482cf89a-17b7c19f-482cb65b-86564cfb0d85-05a5963fe217332c&q=1&e=520bac02-9ae8-47fa-8eed-452b8fdd9144&u=http%3A%2F%2Fmail.lon-capa.org%2Fmailman%2Flistinfo%2Flon-capa-admin</a><br>
</div>
</span></font></div>
</div>
</body>
</html>