AIDA GELINA BRIKEN nToF CRIB ISOLDE CIRCE nTOFCapture DESPEC DTAS EDI_PSA 179Ta CARME StellarModelling DCF K40 MONNET
  DESPEC, Page 16 of 37  ELOG logo
Entry  Wed Apr 3 12:42:57 2024, NH, Report aida02 WR errors Screenshot_from_2024-04-03_13-43-48.pngScreenshot_from_2024-04-03_13-43-38.pngScreenshot_from_2024-04-03_13-43-58.pngScreenshot_from_2024-04-03_13-44-14.pngScreenshot_from_2024-04-03_13-44-36.png
The WR error counter for aida02 seems to consantly rise

Tried reseating cable on both ends, no change

However clock status passed, aida02 has a correct WR timestamp and no FIFO/PLL errors seen
Entry  Thu Dec 19 10:11:59 2019, TD, Report - medium - FEE64 panics during boot 300.png

Some of the FEE64s aida01 .. aida12 panic during boot 
Entry  Thu Dec 19 14:07:38 2019, TD, Report - low - aida08 ADC spectrum size 32k cf. 64k channels expcted using layout 6x
Note that aida08 spectrum 1.8.L size is (shown as) 32k channels cf. 64k channels expected using layout - attachment 1 - 5
Layout configuration - attachment 6
Why?
Entry  Fri Feb 21 12:16:06 2020, TD, NH, Report - high - unusual FEE64 crash during startup ttyUSB4
 
Entry  Wed Apr 3 12:09:47 2024, NH, Report - aida06 frequently fails to boot first time (PHY error) ttyUSB15
When booting up AIDA aida06 usually crashes the first time, it fails to get IP from DHCP
After 180 seconds it reboots and seems to connect fine

Log file attached, key part (to me) is this:
Entry  Wed Jan 8 10:46:50 2025, TD, Report - aida06 -boot fail due to network issue 
8:01:25/11:42:48|0x000000d00000-0x000000fe0000 : "user_kernel"
08:01:25/11:42:48|0x000000fe0000-0x000001000000 : "env_variables"
08:01:25/11:42:48|xilinx-xps-spi 81400400.hd-xps-spi: at 0x81400400 mapped to 0xD1028400, irq=20
Entry  Wed Apr 10 14:53:50 2019, NH, Report - FEE stops sending data 6x
it seems a FEE somtimes enters a confusing state and stops sending data
the current merger requires all FEEs to be active and so this stops the entire system from proceeding.

On MIDAS the page reports the module is "undefined"
    Reply  Fri Apr 12 15:15:33 2019, NH, Report - FEE Kernel Panics (Update on 48) aida01_log.txt
Update on issue #48 - the "confusing state" is that the FEE has restarted and hence is undefined again.

An attached TTY log from the pi shows that the module is kernel panicking.
I have seen a couple of FEEs panic with the same error now.
    Reply  Fri Nov 1 14:17:15 2019, Nic, Patrick, Reply: WR Timestamps 
> > All 12 FEEs have valid WR Timestamps
> > Had to powercycle aida09 once as before raw readout was displaying upper 12 bits of WR timestamp as 0. Unsure of other method.
> > 
    Reply  Thu Nov 7 10:22:26 2019, Nic, Patrick, Reply: WR Timestamps 
> > > All 12 FEEs have valid WR Timestamps
> > > Had to powercycle aida09 once as before raw readout was displaying upper 12 bits of WR timestamp as 0. Unsure of other method.
> > > 
Entry  Wed Aug 14 12:40:11 2024, JB, Repaired DSSSD delivery 14.09.2024 11x
Three BB18-1000 triples AIDAs collected on 14.09.2024

Find attached visual of the wafer and bond wire + factory bias tests accompanying the DSSSDs. elog:669/1
elog:669/2 elog:669/3
Entry  Mon Mar 16 01:07:29 2020, TA, AM, ES, Regular entry 13x

02:14 all system wide checks okay 
      FEE temperatures okay 
      leakage currents okay and recorded to spreadsheet 
      good event stats
okay 
      merger running at 3M items/sec
      tape service running at 26MB/sec

 

All attached to this entry with screenshots to 1-7
Entry  Mon Mar 16 05:08:12 2020, TA, AM, ES, Regular entry 6x

02:14 all system wide checks okay 
      FEE temperatures okay 
      leakage currents okay and recorded to spreadsheet 
      good event stats
okay 
      merger running at around 3M items/sec
      tape service running at 26MB/sec

 

All attached to this entry with screenshots to 1-7
Entry  Thu May 12 21:43:49 2022, BA, MA, Rates Stati2022-05-12_22-47-26.pngTemp2022-05-12_22-48-41.pngLeakageCurrent2022-05-12_22-45-44.png
 

Statistic check (screenshot attached).

Temperatures OK (screenshot attached).
Entry  Sat Dec 8 15:22:52 2018, TD, Raspberry Pi startup 
nnrpi1 - FEE64 system consoles

nnrpi2 - USB-controlled ac mains relay, CAEN N1419ET
Entry  Fri Jan 25 12:26:17 2019, NH, Raspberry Pi Startup & Information 
Two raspberry pis:

nnrpi1 - FEE64 system consoles
nnrpi2 - AC Mains Relay & CAEN HV
Entry  Thu Oct 31 09:36:37 2019, TD, RIKEN LayOut directory LayOut.tar.gz
 
Entry  Fri Nov 7 12:30:30 2025, JB, GB, MP, Pulser walkthrough for source tests.  Screenshot_from_2025-11-07_13-56-34.pngScreenshot_from_2025-11-07_13-45-30.pngScreenshot_from_2025-11-07_13-43-50.pngScreenshot_2025-11-07_192947.pngScreenshot_2025-11-07_193005.png
13:30 We are going to do the pulser walkthrough for the the source tests.

We are wrapping the snout in some copper first to further establish a better connection with the ground.
Entry  Thu Apr 4 14:07:45 2019, NH, Pulser Configuration 
Pulser settings during April run:

Rate 2Hz
Delay 250 NS
Entry  Mon Oct 18 13:01:04 2021, OH, Proxy config proxy.pngproxy2.png
Proxy for firefox and anydesk
ELOG V3.1.3-7933898