基于容器调度技术的气象产品加工系统应用研究

1

作者 秦运龙 霍庆 +3 位作者 何林 何文春 高峰 陈士旺 《微型电脑应用》 2024年第7期23-26,31,共5页

随着研究型业务的快速发展,业务和科研人员急需一种在不降低计算效率、充分利用计算资源情况下支持可独立运行、高可用、高并发、个性化研发环境、快速部署移植的新技术支撑气象业务和科研发展。针对该需求对容器技术在产品加工系统(DPL... 随着研究型业务的快速发展,业务和科研人员急需一种在不降低计算效率、充分利用计算资源情况下支持可独立运行、高可用、高并发、个性化研发环境、快速部署移植的新技术支撑气象业务和科研发展。针对该需求对容器技术在产品加工系统(DPL)中的应用进行分析研究,研究表明Docker容器从系统逻辑层面可实现研发环境的个性化、作业执行的独立性和算法的高效快速移植,并在业务执行完后释放资源,保障资源的充分共享利用,同时采用基于容器的分布式架构Kubernetes技术实现容器的高并发和负载均衡调度,满足气象产品固定时间高并发执行的需求,且执行效率相对物理机集群并无降低,该技术可应用于国家级和省级气象产品加工系统(DPL)中常规气象产品业务和科研算法的调度运行。 展开更多

关键词 容器 DOCKER 气象大数据云平台 镜像仓库 DPL Kubernetes 负载均衡

在线阅读 下载PDF 职称材料

根据GOP异常进行视频序列剪辑篡改的盲检测 被引量：10

2

作者 秦运龙 孙广玲 +1 位作者 王朔中 张新鹏 《电子学报》 EI CAS CSCD 北大核心 2010年第7期1597-1602,共6页

本文根据对数字视频的剪辑篡改引起MPEG-2编码中GOP异常的现象提出一种盲检测方法.视频序列以一定的GOP结构进行压缩,其运动误差序列在Fourier变换域中存在特定的尖峰,解码后再以不同的GOP结构进行二次压缩,尖峰的分布会发生变化.经不同... 本文根据对数字视频的剪辑篡改引起MPEG-2编码中GOP异常的现象提出一种盲检测方法.视频序列以一定的GOP结构进行压缩,其运动误差序列在Fourier变换域中存在特定的尖峰,解码后再以不同的GOP结构进行二次压缩,尖峰的分布会发生变化.经不同GOP结构进行多次压缩后,历次处理的痕迹被保留在视频信号中.因此,在视频内容无剧烈变化的情况下,根据尖峰的不一致性可准确定位被替换拼接的视频内容片段.该方法也可根据尖峰所在位置判断视频是否经过二次压缩,并推算第一次压缩的GOP结构,为检测可疑视频内容提供有用信息.实验表明这种基于GOP异常的检测方法能有效检测对视频序列的剪辑篡改. 展开更多

关键词 视频剪辑 视频拼接 运动误差 GOP效应 二次压缩

在线阅读 下载PDF 职称材料

省级外网气象大数据服务平台研究与实现 被引量：29

3

作者 秦运龙 王迎迎 +1 位作者 张冰松 汪璠 《气象科技》 2020年第6期823-828,854,共7页

随着社会经济发展,气象大数据已成为国家大数据基础性战略资源的重要组成部分。然而各省市集约化气象大数据环境均建设于气象业务内网,面向社会的气象数据服务则存在集约化程度低、时效性差、数据量少、安全隐患多等问题,因此,建立外网... 随着社会经济发展,气象大数据已成为国家大数据基础性战略资源的重要组成部分。然而各省市集约化气象大数据环境均建设于气象业务内网,面向社会的气象数据服务则存在集约化程度低、时效性差、数据量少、安全隐患多等问题,因此,建立外网环境的统一、高效、安全的气象大数据中心是气象业务社会化服务发展的迫切需求。本文建立了外网气象大数据服务平台,采用GoldenGate和sersync+rsync技术实现内网与DMZ区(Demilitarized Zone,两个防火墙之间区域)实时稳定的触发式秒级数据同步;跨平台、多语言开发,标准化调用的统一访问接口设计,可实现高并发、稳定的数据响应请求;分时分类的用户数据访问控制,可实现数据权限的安全控制。该平台通过防火墙双网段控制,向互联网环境用户提供高效、安全、权威的气象大数据服务。 展开更多

关键词 GOLDENGATE 气象大数据 DMZ 统一访问接口 Oracle RAC

在线阅读 下载PDF 职称材料

基于分布式框架的气象预报服务系统 被引量：6

4

作者 秦运龙 张冰松 +1 位作者 祝赢 王迎迎 《计算机技术与发展》 2019年第5期178-181,共4页

随着气象现代化的不断发展,气象服务产品不断丰富,气象观测数据呈现爆炸式增长,各种气象服务系统集约化程度较低,系统并发访问、处理及检索显示效率较低。因此,建立集约、高效的预报服务系统成为业务发展的迫切需求。文中提出了气象预... 随着气象现代化的不断发展,气象服务产品不断丰富,气象观测数据呈现爆炸式增长,各种气象服务系统集约化程度较低,系统并发访问、处理及检索显示效率较低。因此,建立集约、高效的预报服务系统成为业务发展的迫切需求。文中提出了气象预报服务系统,该系统采用Nginx+Apache应用方案,Storm分布式数据处理技术,Cassandra和HBase分布式数据存储技术,RabbitMQ消息队列统一数据分发技术,分别针对网页负载均衡、动静分离响应,大数据分布式并发预处理,数据分类分布式存储,跨平台、高效、可靠的数据分发等服务进行优化设计,实现了针对长江流域、省、市、县用户的高并发、高处理能力、高可靠性的预报服务系统。该系统的建成极大地提高了气象预报、服务的工作效率,为今后的气象业务发展提供了较好的基础平台。 展开更多

关键词 负载均衡 分布式处理 分布式存储 消息队列

在线阅读 下载PDF 职称材料

地面智能观测显示与监控综合处理系统 被引量：5

5

作者 秦运龙 杨代才 +1 位作者 龚贤创 马启明 《气象科技》 2014年第3期402-408,共7页

随着观测业务的逐渐智能化,大量新设备和新业务不断增加,从而造成观测数据显示和设备状态监控越来越复杂、凌乱,维护成本不断提高。提出并实现了地面智能观测站实时显示与监控系统,该系统采用Dundas、Grid、3ds MAX建模、系统拓扑结构... 随着观测业务的逐渐智能化,大量新设备和新业务不断增加,从而造成观测数据显示和设备状态监控越来越复杂、凌乱,维护成本不断提高。提出并实现了地面智能观测站实时显示与监控系统,该系统采用Dundas、Grid、3ds MAX建模、系统拓扑结构图等多种直观、形象、智能的方式将所有观测数据显示和设备状态监控功能集约在一个平台上,便于工作人员管理和维护。在观测站的试运行中,极大的提高了整个观测站的业务效率,降低了观测人员的工作量。 展开更多

关键词 地面观测 智能观测 设备监控

在线阅读 下载PDF 职称材料

基于运动估计与补偿的雷达拼图预测分析 被引量：1

6

作者 秦运龙 张冰松 +1 位作者 杨代才 王迎迎 《计算机与数字工程》 2020年第3期678-681,共4页

近年来气候变化引起的各种强对流气象灾害日渐频繁,雷达拼图作为强对流天气预警预报最重要的依据之一,其数据的及时性和完整性在重大天气过程预报中显得尤为重要。论文提出了一种基于运动估计与补偿的方法,通过计算前两张或多张图像在... 近年来气候变化引起的各种强对流气象灾害日渐频繁,雷达拼图作为强对流天气预警预报最重要的依据之一,其数据的及时性和完整性在重大天气过程预报中显得尤为重要。论文提出了一种基于运动估计与补偿的方法,通过计算前两张或多张图像在纹理上的运动矢量和色度变化,分析被预测雷达拼图的演变情况,从而预测下一张或多张雷达拼图的纹理内容。该方法补缺了因传输缺失和延迟的雷达拼图,并生成未来雷达拼图产品的预估计产品,为预报员提供一个预判参考。实验证明论文方法生成的雷达拼图预估计产品与实况产品在时序上的变化相似,具有一定的可参考性,对保障雷达拼图的及时性和完整性具有一定的辅助作用,为预报服务提供稳定的数据源。 展开更多

关键词 运动估计 运动补偿 DCT 雷达拼图

在线阅读 下载PDF 职称材料

华中区域高性能计算机监控管理平台设计与实现 被引量：2

7

作者 秦运龙 许玮 张冰松 《电子制作》 2016年第07X期37-38,共2页

随着气象数值模式预报精度越来精细化,其对高性能计算资源依赖程度也越来越高,因此研发一套高性能计算机系统监控管理平台,不仅是当前业务值班人员的迫切需求,更是保障气象预报业务模式安全稳定运行的重要手段。本文提出并实现了华中区... 随着气象数值模式预报精度越来精细化,其对高性能计算资源依赖程度也越来越高,因此研发一套高性能计算机系统监控管理平台,不仅是当前业务值班人员的迫切需求,更是保障气象预报业务模式安全稳定运行的重要手段。本文提出并实现了华中区域高性能计算机监控管理平台,该平台系统采用AIX、Linux的shell设计,基于Routrek.granados模块进行操作指令传递,通过直观、形象、智能的方式对所有高性能计算机系统及作业进行监控和管理。在高性能业务值班中极大的提高了值班的工作效率,降低了值班员的工作量。 展开更多

关键词 HPC 监控管理 跨平台管理 AIX Linux

在线阅读 下载PDF 职称材料

机房环境监控系统设计与实现 被引量：3

8

作者 秦运龙 杨维发 许玮 《数字技术与应用》 2016年第8期170-172,共3页

信息化技术的快速发展,信息化机房的建设与安全变得尤为重要,如何提高对信息化机房的安全保障成为现代业务中需要重视和解决的问题。本文提出并实现了机房环境监控系统,该系统数据采集基于ZigBee无线传输技术,通过串口通信解析数据,并... 信息化技术的快速发展,信息化机房的建设与安全变得尤为重要,如何提高对信息化机房的安全保障成为现代业务中需要重视和解决的问题。本文提出并实现了机房环境监控系统,该系统数据采集基于ZigBee无线传输技术,通过串口通信解析数据,并且通过对Dundas控件进行二次编程开发实现形象直、观、准确的机房监控系统,该系统极大的提高了对机房的安全保障。 展开更多

关键词 机房监控 串口通信 无线传输 ZIGBEE

在线阅读 下载PDF 职称材料

省级气象广域网网络优化的设计与应用 被引量：12

9

作者 许玮 王迎迎 +2 位作者 秦运龙 杨维发 李鑫 《气象科技》 北大核心 2016年第3期358-362,共5页

目前湖北省气象地面宽带网省—地—县3级结构中,省局与各市(州)局间采用单条专线连接,手动VPN(Virtual Private Network)拨号线路备份的传输方式,这种传输方式不足以保证数据传输的可靠性。现设计新增一条专线,实现省到地的双线路备份... 目前湖北省气象地面宽带网省—地—县3级结构中,省局与各市(州)局间采用单条专线连接,手动VPN(Virtual Private Network)拨号线路备份的传输方式,这种传输方式不足以保证数据传输的可靠性。现设计新增一条专线,实现省到地的双线路备份。同时,增加一台省端网络互联交换机,升级地市端的网络互联路由器硬件,将数据划分为业务数据和视频会商两类,定义不同的传输方式。业务数据采用OSPF(Open Shortest Path First)动态路由方式进行传输,视频会商通过配置静态路由BFD(Bidirectional Forwarding Detection)联动的路由方式进行传输,并通过QoS(Quality of Service)保证其4 Mb/s的带宽,从而实现省到地数据业务更合理可靠地传输。 展开更多

关键词 数据传输 路由优化 BFD OSPF QOS

在线阅读 下载PDF 职称材料

长江流域雨情监测分析系统及其关键技术 被引量：6

10

作者 杨代才 秦运龙 +1 位作者 杨维发 张冰松 《气象科技》 2014年第5期811-817,共7页

介绍长江流域雨情监测分析系统的总体设计与关键技术实现。系统利用新一代气象通信系统及现代信息存储技术,实现了长江流域12个省(市)气象部门的703个国家级自动气象站、12000余个区域级自动站等资料的实时收集、监控、质量控制、存储... 介绍长江流域雨情监测分析系统的总体设计与关键技术实现。系统利用新一代气象通信系统及现代信息存储技术,实现了长江流域12个省(市)气象部门的703个国家级自动气象站、12000余个区域级自动站等资料的实时收集、监控、质量控制、存储及共享,满足了流域雨情资料实时监测、分析业务的高时效性、高质量性的应用需求;利用长江流域气象历史和实时资料,实现了长江流域及其子流域日、月、季、年等固定时间尺度及任意时段的雨情监测,并利用物理统计方法,提炼出长江流域不同年代不同季节的降水空间分布;采用基于Flex的WebGIS框架设计,实现了人机交互实时分析,满足了在多用户并发条件下高密度自动站数据的快速响应。该系统的建成为三峡梯调中心提供了一个集气象信息收集、整理、加工分析、基于WebGIS展示分析产品等功能为一体的业务应用系统,为长江三峡水利枢纽综合调度和上游水资源开发利用提供气象服务技术支撑。 展开更多

关键词 FLEX WEBGIS 雨情监测 质量控制 色斑图

在线阅读 下载PDF 职称材料

异构资源池的统一监控研究及应用 被引量：2

11

作者 杨代才 秦运龙 《数字技术与应用》 2018年第7期60-61,共2页

针对湖北省气象云平台资源池分散、异构、无法统一管理的现状,设计了湖北省异构资源池的统一监控系统,实现统一监控,解决了多个分散异构资源池无法统一监控和运维的难题,以更好的规划资源提升资源利用率。

关键词 虚拟化 异构 分布式 资源池

在线阅读 下载PDF 职称材料

湖北省气象局高性能计算机监控系统的设计 被引量：1

12

作者 许玮 王迎迎 +1 位作者 秦运龙 张冰松 《电子制作》 2016年第07X期35-36,共2页

随着气象数值模式预报和气象业务预报对高性能计算资源依赖程度的越来越高,急需开发一套高性能计算机系统监控平台,给业务值班人员提供一个直观简介的监控工具。本文提出并实现了湖北省气象局高性能计算机监控平台,该平台通过shell脚本... 随着气象数值模式预报和气象业务预报对高性能计算资源依赖程度的越来越高,急需开发一套高性能计算机系统监控平台,给业务值班人员提供一个直观简介的监控工具。本文提出并实现了湖北省气象局高性能计算机监控平台,该平台通过shell脚本收集AIX、Linux两套高性能计算机系统的状态信息,采用ftp方式推送到windows系统并入库,然后通过监控页面读取数据库数据并显示在监控界面上。此平台在高性能业务值班中极大的提高了值班的工作效率,降低了值班员的工作量。 展开更多

关键词 监控 AIX LINUX

在线阅读 下载PDF 职称材料

成都区调中心专业气象系统

13

作者 杨代才 秦运龙 +1 位作者 王宏记 龚贤创 《计算机系统应用》 2012年第11期106-110,136,共6页

介绍了成都区调中心专业气象系统的总体设计与实现技术,提出一个总体逻辑结构完整、信息流程合理、各子系统功能清晰、充分体现气象与水文相结合的总体设计方案.该系统自动化程度高,可为开发和建设同类水电行业专业气象服务业务系统提... 介绍了成都区调中心专业气象系统的总体设计与实现技术,提出一个总体逻辑结构完整、信息流程合理、各子系统功能清晰、充分体现气象与水文相结合的总体设计方案.该系统自动化程度高,可为开发和建设同类水电行业专业气象服务业务系统提供实际经验和技术借鉴.选用Oracle数据库,采用c#、jsp、C++等开发语言,实现了成都区调中心专业气象系统的开发建设. 展开更多

关键词 气象信息数据库 信息发布 应用工具集 气象预报

在线阅读 下载PDF 职称材料

便携式自动气象站故障检测仪的设计与研发 被引量：11

14

作者 杨维发 张冰松 +2 位作者 秦运龙 万定祥 杨维军 《气象科技》 北大核心 2017年第6期1106-1111,共6页

自动气象站是一种实时性要求较高的地面气象探测系统,当自动气象站发生故障时,应快速定位故障部位,及时排除故障,但由于缺乏专用的检测仪器,往往需花费较长的时间去排查故障。本文设计的便携式自动气象站故障检测仪能在现场快速、方便... 自动气象站是一种实时性要求较高的地面气象探测系统,当自动气象站发生故障时,应快速定位故障部位,及时排除故障,但由于缺乏专用的检测仪器,往往需花费较长的时间去排查故障。本文设计的便携式自动气象站故障检测仪能在现场快速、方便地检测温度、湿度、雨量、风向、风速、气压、能见度、蒸发等传感器以及光纤、线缆的各类故障;用户可在仪器液晶屏上直接查看自动气象站当前观测数据和运行状态。该检测仪能快速定位自动气象站观测系统的故障点,一定程度上缩短故障恢复时间,提高台站技术人员的维修维护能力,具有较高的推广应用价值。 展开更多

关键词 自动气象站 传感器 检测仪 故障判断

在线阅读 下载PDF 职称材料

Micaps资料监控系统的设计与实现

15

作者 许玮 王迎迎 +1 位作者 秦运龙 杨维发 《网络安全技术与应用》 2014年第7期37-37,40,共2页

本文首先简要介绍了整个micaps资料处理系统的建设背景及系统架构,提出目前运行中存在的问题。提出解决方案,然后详细介绍了解决方案中资料监控子功能的设计思路及技术方案,最后展示了本系统的监控界面。

关键词 监控 数据采集 报警

原文传递

受电区域气象监测预报系统设计与实现

16

作者 秦运龙 李波 +1 位作者 张冰松 王迎迎 《计算机技术与发展》 2025年第4期209-213,共5页

长江电力所属受电区域灾害性天气频繁,气象条件复杂,对受电区域用电负荷产生较大影响。因此,建立集约、高效、可靠的受电区域气象系统,提前把握受电区域气象变化情况成为长江电力业务发展的迫切需求。该文提出了受电区域气象监测预报系... 长江电力所属受电区域灾害性天气频繁,气象条件复杂,对受电区域用电负荷产生较大影响。因此,建立集约、高效、可靠的受电区域气象系统,提前把握受电区域气象变化情况成为长江电力业务发展的迫切需求。该文提出了受电区域气象监测预报系统,该系统在功能上采用微服务架构实现天气实况、气候监测、产品制作、评价检验等应用服务;在大数据计算上,充分利用气象大数据云平台(“天擎”)强大的数算一体能力,以RabbitMQ消息服务为媒介,实现跨网络的“云+端”业务应用模式;在DMZ区定时算法调度上采用解耦合的分布式调度方案实现产品的稳定、高效制作;在数据服务上利用气象大数据云平台数据同步功能,完成内外网气象大数据云平台结构化和非结构化数据快速同步,实现DMZ区实时数据接口服务。该系统的建成有助于长江电力行业用户预知受电区域天气气候条件,把握电力市场需求变化,对梯级电站在制定联合调度方案、电能销售策略等工作中提供重要的气象信息数据支撑。 展开更多

关键词 气象大数据云平台 产品加工流水线 受电区 隔离区 RabbitMQ

在线阅读 下载PDF 职称材料

基于CIMISS的气象服务产品共享流程设计与实现

17

作者 张冰松 秦运龙 王迎迎 《中文科技期刊数据库(全文版)自然科学》 2020年第6期00118-00119,122,共3页

气象服务产品是开展气象服务过程中产生和应用的相关产品,经过多年积累,我省各级气象部门制作的各类气象业务服务产品种类已经达到一定规模,在应用中发挥了巨大作用。但是,由于种类繁多、格式多样、访问途径各异,使得对气象业务服务产... 气象服务产品是开展气象服务过程中产生和应用的相关产品,经过多年积累,我省各级气象部门制作的各类气象业务服务产品种类已经达到一定规模,在应用中发挥了巨大作用。但是,由于种类繁多、格式多样、访问途径各异,使得对气象业务服务产品资料管理的难度与日俱增,各类资料的推广、开发和应用受到较大限制。为了进一步适应信息化要求,必须对我省气象服务产品进行统一的访问管理。本文针对气象服务产品特点,以CIMISS系统为基础,设计了统一的气象服务产品传输解析共享服务流程,实现了气象服务产品的集约化共享服务。 展开更多

关键词 CIMISS MUSIC 气象服务产品 ORACLE

在线阅读 下载PDF 职称材料