数据中台数据中台
申请试用
袋鼠云数栈X浙江省水利厅水文局
数栈打造的浙江省江河湖库水雨情监测在线分析服务平台,归集全省水文业务信息资源,有效提高了浙江省水文信息资源的应用水平和共享程度,提升了水文行业的技术和管理水平
业务痛点
随着信息技术的发展以及数字化改革的不断推进,新时期国家治水思路发生明显转变。与全国水文信息化发展先进省份相比,浙江省水文信息化水平尚存在一定差距,难适应新形势、新情况的要求,主要表现在以下方面:
1.基础监测系统老化,信息资源有待整合
已建水文测站加共享气象站点和外省水文测站,总数近万个,对水情、雨情、墒情、地下水、气象预报等数据采集、传输、处理实行自动化,但还存在实测流量、泥沙、蒸发等测验数据由测站人工逐级报送,遥测数据和人工测验上报数据未能有效整合。
2.数据融合度不高,数据治理有待加强
自动化遥测终端数据未建立多层次、多指标约束清洗模型,无法满足历史水文数据成果与实时水文防汛高时效、高质量、高标准要求。
3.业务协同优化不足,服务共享有待提升
已有水文业务系统大多数业务应用停留在信息查询使用阶段,涉及水文核心业务流程、专业模型等功能的开发深度不够。
4.数据深度挖掘欠缺,辅助决策有待提高
历史水文数据分析挖掘能力尚有欠缺,对防灾减灾、水文水资源分析等业务决策支撑能力不够强,难以满足“大水文”和水利改革发展新思路对水文业务应用管理提出的更高要求。
解决方案
基于以上需求和痛点,同时结合浙江省水文数据资源现状,袋鼠云数栈充分利用数据自动实时交换、大数据分析等先进数据处理技术,汇集遥测数据、人工测报以及自然资源、气象等信息,聚焦“水文数据质量和水文业务分析成果”,以“数据质量控制、业务分析协同、实时在线监管、成果服务共享”为总体要求,以构建“一图、一数、一平台”为重点,对全省水文数据质量控制、水文业务分析、遥测及通信监管进行全覆盖。
1.水文在线化:袋鼠云数栈为浙江省水利厅水文局打造了江河湖库水雨情监测在线分析服务平台。平台依托全省水雨情监测网,对全省七大流域、五大平原、大中型和重点小型水库等江河湖库的近万个水雨情监测点进行数据汇集,通过对全省水雨情数据在线分析处理,为水旱灾害防御、水环境改善、城市防洪以及交通城建等涉水工程设计、运行管理、调度等提供在线分析服务,保障国民经济建设和人民生命财产安全。
2.防汛实时化:针对数据融合度不高,数据治理有待加强等问题,袋鼠云数栈采用实时计算引擎、离线计算开发套件产品,建立了一套实时在线数据清洗机制,包括流失数据清洗及定时数据同步清洗,对接收到的数据按一站一规则进行设定,设计建设规则数据库及水文特征数据库,进行实时分析和过滤,将异常数据保存在异常数据库中,将合规数据纳入数据仓库中,通过数据在线清洗不断优化,对正常数据与异常数据进行有效分割,形成新的数据治理成果,保证水雨情数据质量和数据使用的时效,为防汛形势精准分析提供依据。
3.告警自动化:在线数据清洗,实现以“自动接收-数据过滤-可疑数据管理-数据修改”为数据闭环处理,即通过一个面向分布式数据流处理和批量数据处理的开源计算平台Flink,采用读取数据库binlog日志方式来获取数据库的操作动作,从而获取数据流中的数据,实现实时水雨情数据的归集,自动同步至该平台;同时,根据数据的正确性、合理性以及完整性判断规则进行相应数据的过滤;将过滤出的可疑数据根据测站的管理权限,数据分配到对应的水文部门,由测站管理人对数据进行修改,同时将这些操作步骤中所有的日志记录,供追溯。满足防汛期间对实时水雨情数据准确性和完整性的需要,提升数据处理的效率和质量。
客户收益
近年来,突发性重大水旱灾害明显增多,严重威胁人民生命财产安全,对经济社会发展和生态系统产生重大影响。提升变化环境下的水文监测能力,守住水旱灾害防御底线,始终是水文部门一项重要的基本工作。水文数据在及时预警、提前预报、防灾减灾等方面起着关键作用。
浙江省河流密布、地形地貌复杂、暴雨洪水突发性强,是受自然灾害影响较为严重的省份,水文数据在及时预警、提前预报、防灾减灾等方面起着关键作用。为提升浙江省的水文精准预报水平,提高水文水资源基础支撑能力,浙江省水利厅水文局与袋鼠云数栈展开深度合作,通过大数据技术赋能,对水文数据的实时采集、过滤、加工、质量监控、规则配置、预警告警等处理,优化水位实时监测、防洪防汛、灾害预警等流程。
袋鼠云数栈打造的浙江省江河湖库水雨情监测在线分析服务平台,归集全省水文业务信息资源,有效提高了浙江省水利厅水文局水文信息资源的应用水平和共享程度,显著提升了水文行业的技术和管理水平。同时,通过水文在线数据的清洗,对全省站点数据进行智能化判断和过滤,将可疑数据以及缺测数据过滤出,对过滤出的可疑数据根据测站的管理权限,分配到对应的水文部门;由相关部门进行数据的处理工作,有效保障数据质量,支撑防汛形势准确分析研判。方案建设中,深层次的数据治理,形成数据融合、整合、运维管理等多层次、全方位、立体化的分析服务体系,提供对当前水雨情数据的快速准确分析判断,为水利防汛抗旱提供准确的数据支撑,更是填补了基层用户对遥测终端设备数据传输,数据质量无法准确定位的空白,发挥了重要作用,且具有深远意义。
客户简介
行业:政务
简介:浙江省水文管理中心为浙江省水利厅所属公益一类事业单位,机构规格为副厅级。浙江省水文管理中心贯彻落实党中央和省委关于水利工作的方针政策和决策部署,在履行职责过程中坚持和加强党的全面领导。 当前,浙江省水文局正按照省水利厅的治水新思路,以维护健康河流提供水文服务为主题,为我省水文科学的现代化、自动化、信息化建设做出贡献。
使用产品
客户数据洞察
数据资产
实时开发
EasyAPI
此刻起,和袋鼠云一起让数据产生更大价值
此刻起,和袋鼠云一起让数据产生更大价值