高能物理实验研究基本粒子及其相互作用,需要获取和分析大量的实验数据以发现新粒子或测量已知粒子的特性.随着高能物理实验规模的不断扩大以及加速器能量和亮度的不断提升,海量数据的获取、处理及分析将更具挑战性.在高能物理实验中,径迹系统探测器的通道数和数据量尤为巨大,为了读出和在线处理径迹系统探测器产生的海量数据,本文结合Hadoop大数据框架,引入主流开源的大数据处理组件,研究实现了一种流式数据获取框架——BigDataDAQ,并应用于时间投影室探测器模型实验中.实验室性能测试结果表明:这一数据获取框架具有良好的数据吞吐和数据处理能力,且易于部署和管理,为未来高能物理径迹系统结合大数据框架研制处理海量数据的流式数据获取系统进行了有益的尝试,并提供了一种可行的解决方案.
高能物理实验 径迹系统探测器 数据获取系统 Hadoop大数据框架 流式数据处理