AIDA GELINA BRIKEN nToF CRIB ISOLDE CIRCE nTOFCapture DESPEC DTAS EDI_PSA 179Ta CARME StellarModelling DCF K40
  DESPEC, Page 14 of 36  ELOG logo
Entry  Wed Mar 18 18:02:37 2020, PJCS, New Firmware loaded in all FEE64s 
Loaded new frimware into all 12 FEE64s in the system. IWR_Dec19_4.bin 

Booted ok after power-cycle.  

RESET/SETUP/GO all fine.
Entry  Wed Mar 31 12:46:10 2021, PJCS, HowTo : Calibrate the LMK3200 clock devices Calibrating_the_LMK3200_clock_devices_on_the_AIDA_FEE64.pdf
Here is a document showing how and where to calibrate the LMK3200 devices that lock to the system clock and generate the clocks for the ADCs and the
FPGA internal logic.
Entry  Wed Mar 31 15:40:42 2021, PJCS, Check Options files function added 
There is a new operation available in the System Functions menu in the System Wide Checks page. ( The page needs to be reset once when the FEEs are powered
before this function will appear )

Check the Options files are all the same size
Entry  Wed Mar 31 15:46:09 2021, PJCS, HowTo : Synchronize the ASIC clocks. 
To Synchronize the FEE64 ASIC clocks to rise at the same timestamp time use the System function Synchronise the ASIC clocks in the System
Wide Checks browser page.

The Server will read the current timestamp value and calculate, based on the number of FEEs and the access delay, a timestamp value sometime
Entry  Wed Apr 14 12:14:47 2021, PJCS, Corrections and changes 
14/4/21 @12:00 UK time

Corrected the failure of FADC re-calibration All modules. The problem was a missing > in the .tml file

Edited the sys.tcl file in /MIDAS/TclHttpd/Html/RunControl to comment out where the status of the waveform enable was able to stop the creation
Entry  Wed Apr 14 15:14:55 2021, PJCS, Note Well 
Please note that for the forseeable future the system function in the menu on the System Wide Checks browser page labelled as 

"Collect the Timestamp RAM values"  and "Start the Readout Timestamp error tracing" 

Are for the use of engineers only unless otherwise instructed. 
Entry  Fri May 7 19:47:54 2021, PJCS, HowTo mitigate excessive temperature in an FEE64  
After tests in the Daresbury T9 system.

Disabling the waveform ADCs in an FEE64 which is running with the FPGA over temperature will drop the FPGA temperature by 10 degrees.

To disable the ADCs open the Local Control browser window and set the ADC Control register , @2, to 0xFF
Entry  Wed Feb 16 10:32:52 2022, PJCS, AIDA software changes and some suggestions 
The Pi console monitor program now outputs a full date/time to file for each line of report.

The System Wide Checks has been upgraded to include a check of the PLL lock monitor counters. A baseline is taken when the software starts, or
at the users command, then subsequent operation of the command compares the current counter value with the baseline. There are two PLLs on the pcb, LMK3200,
Entry  Wed Jun 22 10:09:12 2022, PJCS, INFO: FEE64 supply Voltages 
Study of the FEE64 power supply distribution has yielded the following :-

The most sensitive regulator, as regards the device voltage input, is the TPS51100 that supplies the DDR memory reference voltages. This
requires +4.75 to +5.25 volts. This is supplied from the Power input connector +5v input.
Entry  Wed Sep 14 19:07:07 2022, PJCS, INFO : Three Merger Statistics explained 
There are three Merger statistics that can be used to better understand how the data flow through the Merger system is proceeding.

Two are from the Link task and one is from the Merger.They are all "No data buffers avaliable" with #1, #2, #3 at the end.

#1: This is incremented when the Link task has a data item to put in the queue for the Merge process but there is no room.
Entry  Fri Apr 16 00:47:36 2021, OH-ML, AIDA DAQ Reset 
1:18 (CET) No rate in AIDA 07.

Oscar did a AIDA DAQ reset and a quick wide check.

(Power cycle
Entry  Thu Sep 6 15:11:17 2018, OH, TD, Tuesday 4 September - Thursday 6 September 19x
Attachment 1 - FEE64 temperatures illustrating (we assume) a faulty PSU temperature sensor for aida07

Attachment 2 - FEE64 temperatures following replacement of aida07
Entry  Thu Sep 6 15:25:19 2018, OH, TD, AIDA@DESPEC Setup Photos 
 
Entry  Thu Sep 6 15:42:53 2018, OH, TD, FEE64 system console logs logs.tar

Kernel panics during boot cab be observed in files ttyUSB1 and ttyUSB5
Entry  Wed Sep 19 12:40:41 2018, OH, TD, Single DSSD Installation and Tests 21x
On the 18th of September we installed DSSD 3208-14

Was found to have problems including exponential leakage behavior
Entry  Sat Apr 10 12:15:54 2021, OH, TD, Saturday 10 April 16x
12:37 DAQ found crashed. Had crashed at some time following 7:50am following previous statistics update
      Unable to recover the FEEs so forced to power cycle
      Following power cycle statistics much improved from yesterday.
Entry  Tue May 4 13:53:22 2021, OH, TD, Tuesday 4 May 7x

NH has re-checked alignment of AIDA adaptor PCBs cf. Elog:290
Entry  Fri May 21 07:03:50 2021, OH, TD, Friday 21 May 08:00-16:00 9x
08:00 OH and TD take over
      Current settings p+n sides at 0xc
      DSSD1 n+n sides 0x20 on ASICs 1-3 and 0x64 on ASIC 4
Entry  Wed Jun 2 14:53:05 2021, OH, TD, Merger/Tapeserver issues after reboot of aida-3 6x
On 01/06/21 aida-3 was rebooted as the graphical user interface had frozen.
We were also unable to connected to MIDAS via ssh port forwarding.
Entry  Fri May 13 07:36:18 2022, OH, TD, Friday 13 May 35x
08:36 DAQ Still running smoothly
      Currently on run R1_328
      At current data rates we have just over 4 days of space left on the current disk
ELOG V3.1.4-unknown