AIDA GELINA BRIKEN nToF CRIB ISOLDE CIRCE nTOFCapture DESPEC DTAS EDI_PSA 179Ta CARME StellarModelling DCF K40
  DESPEC, Page 25 of 34  ELOG logo
Entry  Fri Apr 9 16:40:36 2021, NH, nnrpi1 Update 
nnrpi1 is now back in S4 with a new SD card and new raspberry pi.
The freezing originally continued (it was the USB system failing) but was fixed with a change to /boot/cmdline.txt coherent_pool=4M
It seems the kernel update to fix one bug introduced another... 
Entry  Wed Mar 31 15:46:09 2021, PJCS, HowTo : Synchronize the ASIC clocks. 
To Synchronize the FEE64 ASIC clocks to rise at the same timestamp time use the System function Synchronise the ASIC clocks in the System
Wide Checks browser page.

The Server will read the current timestamp value and calculate, based on the number of FEEs and the access delay, a timestamp value sometime
Entry  Wed Mar 31 15:40:42 2021, PJCS, Check Options files function added 
There is a new operation available in the System Functions menu in the System Wide Checks page. ( The page needs to be reset once when the FEEs are powered
before this function will appear )

Check the Options files are all the same size
Entry  Wed Mar 31 12:46:10 2021, PJCS, HowTo : Calibrate the LMK3200 clock devices Calibrating_the_LMK3200_clock_devices_on_the_AIDA_FEE64.pdf
Here is a document showing how and where to calibrate the LMK3200 devices that lock to the system clock and generate the clocks for the ADCs and the
FPGA internal logic.
Entry  Tue Mar 30 13:21:50 2021, NH, nnrpi1 (tty logs) 
We had issues with all TTYs reading out on nnrpi1, I have moved them from an apparently faulty USB hub to a new one.
Trying to reboot the pi to detect the new USB ports and it didn't recover from boot
Trying to repair SD card but I get a lot of errors on my laptop, indications are the SD card is completely dead
Entry  Thu Mar 25 18:04:51 2021, TD, MSL type BB18(DS) 24cm x 8cm cabling & bias configuration MSL_type_BB18(DS)_24cm_x_8cm_configuration.pdf
 
Entry  Wed Mar 24 10:31:03 2021, TD, AIDA to do (or to understand) list 

In no particular order
Entry  Fri Mar 19 17:16:45 2021, TD, Friday 19 March 8x

Screenshots of successive displays of Options for FEE64s aida01, 02, 03 and 04.
Entry  Thu Mar 18 11:53:10 2021, TD, Thursday 18 March 7x

12.40 The snout w/bPlast plus 3xDSSSDs was removed yesterday
Entry  Wed Mar 17 10:31:09 2021, TD, Wednesday 17 March 11x
11.28 DAQ continues OK - no storage

      ASIC settings 2019Dec19-16.19.51
Entry  Tue Mar 16 09:26:47 2021, TD, Tuesday 16 March 6x
10.25 DAQ continues OK - no storage

      ASIC settings 2019Dec19-16.19.51
Entry  Mon Mar 15 11:47:51 2021, TD, Monday 15 March 8x
12.48 DAQ continues OK - no storage

      ASIC settings 2019Dec19-16.19.51
Entry  Sun Mar 14 17:35:05 2021, TD, OH, Sunday 14 March - Pulser Walkthrough 52.png51.png40.pngScreenshot_2021-03-14_Spectrum_Browser_aidas-gsi(3).png
18.01 Pulser walkthrough at end of run S452 file S452/R57_0 ... R57_28

      ASIC settings 2019Dec19-16.19.51
Entry  Sun Mar 14 07:04:30 2021, OH, Sunday 14th March 2021 20x
08:07 Realised the correlation scalers hadn't been enabled again. Have enabled them now. R56_151

Looking through the merger messages from the nightshift we see bad timestamps in FEE 11. This FEE does not have any scalers going into it.
    Reply  Sun Mar 14 08:16:00 2021, OH PJCS, Sunday 14th March 2021 
> 08:07 Realised the correlation scalers hadn't been enabled again. Have enabled them now. R56_151

> Looking through the merger messages from the nightshift we see bad timestamps in FEE 11. This FEE does not have any scalers going into it.
Entry  Sat Mar 13 23:08:08 2021, CA, 14th March 00:00-08:00 22x
00:08 DAQ continues ok - writing to file R46_221

      ASIC settings 2019Dec19-16.19.51
Entry  Sat Mar 13 17:00:49 2021, TD, Saturday 13 March 18.00-00.00 UTC+1 9x
18.00 DAQ continues OK - file R46_64

      ASIC settings 2019Dec19-16.19.51
Entry  Sat Mar 13 07:08:52 2021, CA, TD, LS, March 13th 08:00 - 17:00 20x
ASIC settings 2019Dec19-16.19.51
      DSSSD#1 slow comparator 0xa
      DSSSD#2 slow comparator 0xa
Entry  Fri Mar 12 23:56:00 2021, OH, Saturday March 13th 00:00-08:00 11x
24:00 Joined in with TD to debug the dropout of AIDA05 - See https://elog.ph.ed.ac.uk/DESPEC/193
      After both powercycles and telnet reboots we were still seeing 0 in the statistics but did note that the counter was > 0
      The last check we did was a restart of the merger server. This solved the issue.
Entry  Fri Mar 12 20:12:10 2021, TD, Friday 12 March Screenshot_2021-03-12_Temperature_and_status_scan_aidas-gsi(1).pngScreenshot_2021-03-12_Statistics_aidas-gsi(1).png31.pngScreenshot_2021-03-12_Statistics_aidas-gsi(2).pngScreenshot_2021-03-12_Statistics_aidas-gsi(3).png
21.12 DAQ continues OK - file R33_617

      ASIC settings 2019Dec19-16.19.51
Entry  Fri Mar 12 10:09:19 2021, LS, CA, Friday 12th March 11.00- 17x
11.00(Germany) System wide checks okay except:

      FEE64 module aida09 global clocks failed, 6
ELOG V3.1.4-unknown