Subjects: Astronomy >> Astrophysical processes submitted time 2023-01-18 Cooperative journals: 《天文研究与技术》
Abstract: With the rapid development of astronomical observation technology, astronomical data processing software has become increasingly complex, and it is challenging to deploy the software environment. Container technology was used for packaging the pulsar data processing environment to images by applying hierarchical encapsulation. According to the data processing requirements, a private library of images has been established, and the users can select the images according to the data processing mode. The hardware environment, the traditional virtual machine environment, and the container environment performed coherent dedispersion for pulsar baseband data. The resource utilization and data processing efficiency of different platforms are compared. Experimental results show that the performance of the container is similar to the physical machine. In multi-threaded parallel processing, the resource allocation of the container is more reasonable and can improve the efficiency of service resource utilization. Implemented container-based data processing architecture deployment on Xinjiang Astronomical Observatory pulsar data processing server, designed and developed the container management graphical user interfaces. Through optimizing functions such as multi-user login, authentication, and data volume mount to improve the efficiency of astronomical data processing using container technology.
Subjects: Astronomy >> Astrophysical processes submitted time 2022-04-14 Cooperative journals: 《天文研究与技术》
Abstract:针对射电天文观测过程中的射频干扰(RFI)问题,详细分析了国内外台站RFI抑制策略。根据各天文台站实际观测过程中遇到的RFI问题,分别从主动预防阶段、预相关阶段、后相关阶段、机器学习和深度学习等方面研究了RFI的预防策略和抑制方法。详细分析了主动预防阶段可采取的方法,预相关阶段的自适应滤波,和空间滤波方法;后相关阶段的VarThreshold,SumThreshold和奇异值分解等方法。探讨了基于机器学习的主成分分析、支持向量机、全卷积神经网络、卷积神经网络、U-Net等相关技术和方法在RFI信号处理方面的应用。
Subjects: Astronomy >> Astrophysical processes submitted time 2021-09-29 Cooperative journals: 《天文研究与技术》
Abstract:瞬时射频干扰(RFI)信号是最难以识别并消除的一类干扰。针对射电天文观测过程中遇到瞬时RFI问题,本文提出了一种基于RFI信号峰值的特征提取方法,利用该方法生成了RFI信号的特征模板,并基于动态时间规整(DTW)算法和打分策略设计了特征识别算法,实现了RFI信号识别以及分类功能。利用ARRL官网提供的RFI数据完成了特征模板的交叉验证对比,测试结果显示RFI特征模板与同类别RFI相似度高,表明该算法能够对RFI进行识别和分类,该算法为瞬时RFI的特征提取以及识别提供了一种新思路。
Subjects: Astronomy >> Astrophysical processes submitted time 2021-03-30 Cooperative journals: 《天文研究与技术》
Abstract:针对超宽带及多波束接收系统海量天文信号实时高效传输与处理问题,对基于FPGA+GPU的主流终端设备软件系统进行了测试分析,超宽带接收设备要求终端系统软件能够在更宽带宽,更高时间、频率分辨率条件下,实现实时数据流传输与处理。结合大口径射电观测设备未来发展方向提出了利用高速并行环形缓冲区实现数据流缓存、基于GPU集群实现数据流实时处理、基于BeeGFS实现分布式并行数据存储,模块化构建射电天文信号传输管道软件的设计思路。
Subjects: Astronomy >> Astrophysical processes submitted time 2020-12-21 Cooperative journals: 《天文研究与技术》
Abstract: 射电脉冲信号在传输过程中受到星际介质的影响会导致轮廓展宽和变形,在研究过程中需要对信号进行消色散处理。本文设计并实现了基于零拷贝的脉冲星数据GPU相干消色散算法,采用设备内存映射以消除主机到设备的拷贝开销,利用CUDA的cuFFT库进行多BATCH傅里叶变换以提高DFT效率,同时采用多线程实现了传递函数的加速计算。实验结果表明,与传统CPU及GPU算法相比,本文提出的算法在大数据量时表现良好。
Subjects: Astronomy >> Astrophysical processes submitted time 2020-05-15 Cooperative journals: 《天文研究与技术》
Abstract:针对脉冲星信号实时消色散处理需求,实现了基于GPU的非相干消色散算法。采用高性能并行计算方法对非相干消色散算法的多线程处理进行了深入研究,提出了算法的并行化加速方案,解决了消色散算法计算量大无法实时处理问题。分析算法的密集型计算部分,高效利用GPU的层次存储结构,提高了GPU资源利用率,进而减少了计算时间,显著提升了非相干消色散算法的计算性能。
Subjects: Astronomy >> Astrophysical processes submitted time 2019-12-04 Cooperative journals: 《天文研究与技术》
Abstract: 面向天文信号实时处理需求,搭建了基于ROACH2的射电天文数字终端实验平台。利用MATLAB、Xilinx等开发环境进行仿真,取得了原始实验数据;利用CASPER硬件平台实现了信号控制和预处理,并通过高速以太网将数据包传输至计算服务器进行后处理。搭建的实验平台实现了仿真、编译、运行的完整流程,为天文信号实时处理研究提供了良好的实验环境。
Subjects: Astronomy >> Astrophysical processes submitted time 2019-07-30 Cooperative journals: 《天文研究与技术》
Abstract:经过十余年的不断建设和发展,中国虚拟天文台(China-VO)已成为支撑天文学观测、研究、教学的重要技术和资源平台。随着多信使天文学和时域天文学时代的到来,虚拟天文台也需要升级自身的核心能力,以给天文工作者提供更精准的服务和技术支撑。为此,中国虚拟天文台团队结合天文学的发展方向和信息技术发展趋势梳理了一份核心技术需求清单,并以问卷的形式针对领域内专家和用户开展了调研。通过对调研结果的统计和分析,中国虚拟天文台明确了未来一段时期的主要努力方向和目标,计划采用平台化的开发模式,并开放第三方开发接口,以吸引更多感兴趣的开发者基于虚拟天文台资源做出实用的工具,更好地实现资源与技术向服务的快速转换。
Subjects: Astronomy >> Astronomical Instruments and Techniques submitted time 2018-06-21 Cooperative journals: 《天文研究与技术》
Abstract: After years of observation, Xinjiang Astronomical Observatory(XAO) Nanshan 26 meters radio telescope (referred to as NSRT) had accumulated massive scientific data. A remote backup system was established for the online data storage of NSRT, this redundant storage system contains two storage clusters, one cluster was in XAO headquarters and another one located in Nanshan station, the real-time synchronization of NSRT data can be realized between two storage clusters. Based on the object storage technology, centralized Luster storage system was created for storage clusters, and the I/O performance test of luster systems was finished. Redundant storage system solved the online archive and data safety issue for NSRT data.
Subjects: Astronomy >> Astrophysical processes submitted time 2018-05-15 Cooperative journals: 《天文研究与技术》
Abstract:新疆天文台Taurus高性能计算系统由1个登陆节点、16个计算节点、2个I/O节点、100TB高速存储组成。其CPU理论双精浮点计算能力6.7584Tflops,通过Linpack测试实际峰值为6.289Tflops,可提供计算能力为理论值的93.06%;GPU理论计算能力18.72 Tflops,实际测试计算峰值为14.882Tflops,计算效率为理论能力的79.5%。系统计算与存储节点均采用56Gb Infiniband交换互连,通过IOZone测试存储系统,单节点写可达460MB/s,多节点写可达800MB/s。系统已在多相滤波及消干扰GPU算法加速、蒙特卡罗模拟等领域得到了应用。
Subjects: Astronomy >> Astrophysical processes submitted time 2017-09-26 Cooperative journals: 《天文研究与技术》
Abstract:采用图形处理器和最新的通用并行计算架构设计了射电天文多相滤波器组,并对其性能指标进行了测试和分析。利用图形处理器强大的浮点数计算和高效并行执行能力实现了多相滤波器、快速傅里叶变换算法加速,改善了多相滤波器组算法的执行效率。实验结果表明,设计的多相滤波器组具有一定的灵活性和可扩展性,能够实现射电信号的高速滤波及信道化,可有效提高射电望远镜数字终端算法的并行数据处理能力和计算效率。
Subjects: Astronomy >> Astrophysical processes submitted time 2017-09-26 Cooperative journals: 《天文研究与技术》
Abstract:海量观测数据及次生数据的高效存储与检索,天文大数据的快速及时处理,加速天文学研究的科学产出等问题,已成为天文观测和天文研究迫切需要解决的难题。以信息技术为支撑的天文大数据的高效分析和处理,帮助天文学家重新审视和了解宇宙。虚拟天文台的出现为全球范围内研究资源的无缝透明连接提供了协议、标准,以协议为基拙规范了天文数据的发布与检索方式。以国内外现有的观测设备为基拙,综述目前主流天文机构的数据发布与检索相关情况。
Subjects: Astronomy >> Astrophysical processes submitted time 2017-09-26 Cooperative journals: 《天文研究与技术》
Abstract:经过多年观测,新疆天文台积累了大量珍贵的观测数据。如何高效管理快速增长的海量观测数据,如何实现全波段观测数据的融合及未来更大口径望远镜产生的海量数据归档与发布是目前新疆天文台急需解决的问题。新疆天文台数据中心面向天文学科研需求提供天文科学数据服务和基拙设施,由新疆天文台计算机技术室负责运行与维护。数据中心以最新的虚拟天文台相关标准为基拙建设,基本服务包括:为天文观测项目提供数据保存、管理和发布服务;为有价值的天文科学数据及二次处理后的数据提供长期保存和访问服务;为用户提供科学数据归档与发布服务及相关技术支持。数据资源主要有:新疆天文台25 m射电望远镜的脉冲星观测数据;活动星系核观测数据以及分子谱线观测数据。提供的数据服务有:PPMXL星表锥形检索;海量星表数据在线交又认证;统一内容描述符信息查询等服务。主要介绍新疆天文台数据中心建设及其提供的服务,如何使用已发布的服务在线检索数据及利用标准虚拟天文台工具实现数据操作。
Subjects: Astronomy >> Astrophysical processes submitted time 2017-09-26 Cooperative journals: 《天文研究与技术》
Abstract:新疆天文台数据中心的海量数据星表在线交又证认服务可实现远程URL、本地上传带有UCD信息的VOTabI。格式文件两种星表数据输入方式,可实现对数据中心已发布的天文数据进行交又证认。证认得到的结果可以通过SAMP协议发送到标准虚拟天文台工具中进行数据可视化等相关处理,并支持HTML, CSV, FITS Table, JSON等多种数据输出方式。通过并行计算技术与伪球面天区划分技术大大提高了海量星表数据的交又证认速度。