行业信息库建设方案 第1篇
在实际业务中,尤其是 涉及机密和敏感数据时,仅限授权用户访问就至关重要。同时访问是否合理等信息也 需要系统记录下来,让管理员可以回溯,进一步保证数据安全。平台通过认证 (Authentication)、授权(Authorization)、审计(Audit)三个方面来保证数据安全。
(1)认证
认证是用户进入系统的第一道屏障。建议采用了 Kerberos 做用户级别的认证。Kerberos 的设计主要针对 client-server 模型,基于加密方法建立用户(和系统)识别自己的方法,对个人通信以安全的手段进行身份认证,用户和服务器都能验证对方的身份。
(2)授权
平台提供基于角色和个人的访问控制。对 HDFS、Hive 等实现了统一的,细粒度的数据访问控制。从数据角度,可以查看当前何种角色/何人有何种权限。从角色/个人角度,可以查看对哪些数据有何种权限。
(3)审计
平台为项目安全提供较直观的整体评估和事件跟踪,包括实时监测对系统敏感信 息的访问和操作行为,根据规则设定报警并及时阻断违规操作,收集并记录行为,可 检索所有记录,提供统计信息五个方面。 监控处理的信息包括用户动作,管理员动作两大类。用户动作,所有用户的登录 信息,对数据、对资源、对服务的访问和操作等;管理员动作,管理员对项目、成员等做出的配置等。
将数据平台的作用和价值最大化,靠的是软件和制度规范,比如在创建数据表时,没有规范的情况下,可能会带来数据血缘的杂乱等情况。数据平台管理的规范是一个体系化,以下为举例一些规范。
行业信息库建设方案 第2篇
烟草企业的人资资源管理的关键与核心内容,主要有:人力资源规划、干部人事管理、薪酬福利管理、绩效管理、培训开发管理、劳动关系、考勤休假管理。烟草企业人力资源管理信息化建设总体框架如图1所示。烟草企业人力资源管理信息化建设从用户层次上划分,有5层:
战略管理层
该层主要面对的是集团高层领导。通过从烟草企业人力资源管理信息化系统中,快速的抽取主题信息(例如,企业的人员分布、人才结构、职务职称、薪酬水平等),使企业高层领导能够在短时间内掌握和把控企业的人力资源现状、分布、结构等全局信息,进而为其管理决策服务。该层数据的特点为:面向主题的、集成的、稳定的、时变的。在数据展示上,要宏观、生动形象、图文并茂。在技术支持上要充分运用数据仓库、商业智能、数据驾驶舱、仪表盘等技术。
集团人力资源管理层该层主要面向省、市、县人力资源管理部门,是其业务的骨干支撑,主要包含有干部选拔、人才招聘、劳动合同、教育培训、薪酬分配、干部考核、人才测评、业绩考评、员工晋升、考勤休假管理档案报表管理等。该层主要作用是将繁琐的人力资源业务通过信息化系统加以管理,实现高效的上传下达,提高工作效率。
员工自主服务与操作层该层主要是面向普通员工,主要包含有工资福利查询、绩效与工作计划填写、职称申报、个人信息维护、遴选报名、评议打分、请假管理等内容。
基础控制层该层为基础支撑层,主要包含组织机构配置与调整、用户管理、权限管理、指标配置(如,测评)、控制策略调整、方案选择(如,绩效考评方案)等等。
系统集成层目前,随着信息化建设的不断推进,烟草企业已建立了OA办公系统、烟叶生产与收购系统、物流配送系统、卷烟营销系统,财务系统等等。人力资源管理中的一个核心业务,就是依据员工的工作业绩以及能力水平进行薪酬分配以及选人、用人。因此,人力资源管理信息系统与这些业务系统在一定程度上有数据的联系与交互。例如,人力资源管理中的绩效考评中的员工业绩可以来源于财务管理系统、烟叶生产与收购系统、物流配送系统、卷烟营销系统等业务系统;绩效考评中数据(结果应用)也需反馈到财务系统。
2信息化建设存在的问题及对策
烟草企业人力资源管理信息化建设,从项目开展情况来看,主要存在以下几点困难与问题:
信息化系统功能展现与烟草企业人力资源业务管理需求之间的矛盾
从上述分析中,可以看出烟草企业作为大型的国有企业,其人力资源管理与其他的大型国有企业有较大的差异性。其管理对象涵盖省、市(地区)、县、站(乡)几级不同层次,员工队伍也层次不齐,工种繁多,历史遗留问题也较多。将其他行业的人力资源管理系统照搬到烟草企业,显然是不能满足其业务需求的。因此,信息化系统建设的成功与否在很大程度上取决于对烟草企业人力资源业务管理需求的把握。信息化系统为了能够有效的满足烟草企业人力资源业务管理需求,需对其管理机制进行梳理,充分听取和了解人事管理部门的管理需求和业务流程,并能根据其具体需要进行个性化定制开发。
信息化系统整体性与不同模块独立性之间的矛盾
人力资源管理信息系统的建设,其较为理想的目标是的“统一平台、统一数据库、统一网络”,且能够“上下贯通、左右协同、资源共享”。“统一平台、统一数据库、统一网络”指的是该系统建立在一个统一的大框架平台上,“上下贯通、左右协同、资源共享”指的是该系统能够实现省、市(地区)、县、站(乡)垂直管理体制下的纵向管控能力,各个子模块(系统)之间能够横向协同并实现数据的共享。为了更好实现信息化系统整体性,应尽可能的做到由一家软件企业在约定的时间内进行总体的设计和信息平台的建设。但是,由于各个子模块(如,绩效考核、职称申报、招聘选拔等)本身也视为一个独立的子系统。一家软件单位不可能对所有的人力资源模块都是了解的非常透彻,因此希望通过一套系统解决人力资源所有的信息化问题在实践中也较为困难。解决这一矛盾的常规做法为“以一个系统平台为基础,其他子系统平台为补充”,从而做到优势互补,这种信息化建设模式须通过数据接口做好多个系统之间的数据集成与整合。其数据与系统整合如图2所示。在该图中,系统模块可以直接访问中心数据仓库中的数据,子系统则需要通过XML接口的方式访问和调用数据仓库中的数据,从而做到数据的集成、整合与交互。
3结束语
行业信息库建设方案 第3篇
1以电子政务建设为核心的水利行政路线
目前,我国政府正在向服务型政府进行转变,水利工作也正发生着巨大的转变。水利信息化就是要充分利用现代信息技术,深入开发和广泛利用信息资源,促进信息交流和资源共享,实现各类水利信息及其处理的数字化、网络化、集成化、智能化,全面提升水利为国民经济和社会发展服务的能力和水平。水利行政管理的核心是电子政务,电子政务建设是行政管理创新的重要推动力量,根本目标是实现由传统政府(工业时代的政府)向现代政府(信息时代的政府)的管理服务职能的转变[1]。电子政务系统建设的内容主要分为以下3大部分:
1)以协同办公、行政审批、档案管理为代表的贯穿所有水利行政业务的综合性系统。任何政府行为都离不开文件的上传下达,而协同办公系统的核心工作就是实现公文流转与交换,因此协同办公系统必将作为所有水利应用系统的基础,所有应用系统所用到的文件都必将来自协同办公系统。水利行政许可的办理可以说是水利业务中最为基础的工作。网上行政审批是行政许可的具体体现,行政审批涉及到水利业务的各个方面,所设计的各类水利数据更是可以作为各类水利业务应用系统的基础,各个业务应用系统获得基础动态数据最主要的途径是通过对水利行政审批事项的办理来实现的。档案管理系统是所有业务应用系统中所涉及到的各类文件、资料等的最终归属。所以说协同办公、网上行政审批、档案管理是贯穿所有水利行政业务的综合性系统。只有做好这3个系统才能够真正实现水利行政管理数据的资源共享和数据交换。
2)以人事劳动、财务、规划计划等为代表的单一性业务应用系统。
3)以监督督察、绩效评估为代表的需要融入到各个业务应用系统之中的水利执行系统。主要通过综合水利监督与绩效信息系统来监督各水利业务的完成和信息化系统的运行情况,是决策目标、执行责任、考核监督等体系的具体实现。能进一步改进工作作风和方法,强化责任和效率意识,提高工作效能,确保政令畅通。这类系统在建设过程中不能作为单一的系统来建设,而应该在建设每个应用系统时,都在各自的系统中嵌入一部分监督检查、绩效评估的业务。水行政绩效监督信息系统就是要把这些散落在各个业务应用系统中的监督检查、绩效考核等模块综合起来进行分析和评估,形成1套完整的涉及水利所有方面的监督考核体系。水利信息化应用系统之间的关系如图1所示,可以看出,电子政务在水利信息化建设中起到贯穿全局的作用。
水利电子政务的建设从多方面积极推动和保证了行政管理创新模式的建立,对于促进政府管理向着公平、公正、廉洁、高效的方向发展,有着深远的意义[2]。同时,电子政务不是孤立的系统,对于水利信息化来说任何业务系统都离不开电子政务。所以其他信息系统都要与电子政务发生联系,因此以电子政务为核心的水利行政管理主线是水利信息化建设的基础主线之一。
2以水利工程管理为核心的水利业务路线
水利信息化建设的核心目的是通过水利信息化建设实现对水利业务的准确、高效、快捷的管理,使水利工作能最大限度地体现社会价值。水行政主管部门管理的核心是通过对各种水利工程的管理来实现对各类水利业务的管理,任何业务都伴随着1类或几类水利工程的管理。如防汛抗旱业务的管理,就包含了对各类水库、河道、大坝等方面的管理,通过保证这些工程的安全来实现对汛期各类危险事故的管理;同时在出现事故时,也可通过对各类工程的合理利用来实现对各类水旱灾害的控制。水利工程的管理一般可分为静态和动态拓展管理2大部分。
静态管理
1)基础资料的管理。水利工程主要包括水库、河道、灌区、农田水利基本建设,小流域治理、农村饮水、节水灌溉等一系列工程项目,而每个工程项目又包含大量的工程数据。如何把全省所有重点工程项目的基础数据采集起来形成全面工程数据库,对水利信息化来说是至关重要的,同样对整个水利工作来说也是至关重要的。不过由于基础工程的种类繁杂,数量巨大,工程数据非常庞大,牵扯到的工程项目有几万甚至几十万个项目,需要做大量的原始资料收集和整理工作。水利工程项目管理系统涉及多个水利业务,更涉及到多个业务部门,如发展规划处、财务处、建设处、工管局、农水处、水资源处、水保处、纪检组等,几乎牵扯到水利主管部门的各个处室,同时也涉及到全省所有的水行政主管部门及大中型水利工程,属于综合性非常强的业务应用系统。基础数据的采集工作横向涉及到各业务部门,纵向涉及到省、市、县级水利部门和基层的各种其他水利组织,其过程必然需要以行政动员的方式发动全体尤其是基层工作人员,才能够取得,成果不但产生海量数据和信息,同时也能对水利行业有全面细致的了解和控制。对这些海量数据进行存储、分析和加工产生的信息资源对整个水利行业信息化的发展具有重要的战略意义,是解决信息孤岛、资源共享的重要手段。
2)新建工程项目的审核审批管理。主要完成对新建项目和项目工程的数据及信息的收集与管理,并与原有数据和信息保持统一,进行有机结合,统一管理。这是保证数据可持续性和准确性的基础。
3)大型工程项目的建设管理。大型工程项目一般工期较长,季节性强,技术复杂,设计变更较多,需要协调的关系多,规模和投资比较大,且涉及征地、移民、环境保护、水土保持等诸多环节。因此,大型水利工程项目的建设管理有难度大,问题多等特点。如何通过推行科学化、现代化的管理,提高管理水平,控制投资和质量,缩短工期,达到既定的质量和安全目标,成为水利开发投资企业和主管方面关注的重要问题。
动态拓展管理
动态拓展管理是利用“数据仓库与挖掘”技术对水利工程进行进一步管理,使水利信息化能够更好地发挥调度的作用,达到以水利信息化带动水利现代化的效果。水利应急指挥系统实际上是水利工程动态拓展的一种表现方式。现代化应急指挥系统是各个部门通力协作,不同系统之间互相调度的结晶。例如在指挥应对1座即将溃坝的水库时需要做的工作包括以下2点:
1)调度关键数据。如水库的现时水位、当时的降雨量、2h后的预计降雨量、水库当时的库容、水库的设计水位和库容等。
2)对比关键数据。通过几项关键数据的对比,来预判水库溃坝的预计时间,当前水库所处的危险等级,根据危险等级来确定水库的泄洪量,以及泄洪后水的流向,并根据水的流向来确定水库下游需要转移的群众数量,群众转移后的安置点[3]。临时加固水库大坝所需的物料方位、数量及把应急物料运过来的行走路线等。同时,还应该知道处理这个事故所有需要的部门及各部门人员的联系方式等,只有尽快得到并掌握这些数据,才能实现准确无误的应急指挥,任何1个环节出现问题,都可能导致时间的延误,产生不可估量的损失。
通过水利工程的动态拓展管理可实现在“一张地图”上就能轻松了解所有信息,并根据现有信息及时快速地制定出详细可行的调度方案,以最短的时间做出最正确的决定。而这些数据都来源于以前建立的水利工程和实时采集的水文水资源等数据库,所以说工程基础数据的采集是所有水利工作的基础,只有有了这些基础数据,并对这些基础数据进行分析,才能发挥水利信息化在水利现代化建设中的作用,才能使水利信息化在水利工作中发挥其巨大的作用。水利工程的动态拓展管理之水库抢险图如图2所示。水利工程中的数据和信息是其他水利业务应用系统的基础数据资料和建设的基础,可以说水利工程项目管理系统建设不好,其他所有业务应用系统都不可能建设好,更不可能发挥其作用。通过水利工程项目管理信息化的建设,不但可以使山东省各类水利工程集中管理,同时也可以体现厅机关各部门之间多部门协作的能力。综合以上因素,水利工程管理是水利业务主线的核心,也是水利工作的核心,信息化的实现程度和效能对业务的流程再造和机构改革都必将产生革命性的影响。因此,以水利工程管理为核心的水利业务主线作为水利信息化建设的第2条核心主线。
行业信息库建设方案 第4篇
关键词: 安全监测 水情 信息化 融合
中图分类号: 文献标识码:A
随着中小型水库除险加固的大面积铺开,水库大坝安全监测信息化程度提高,越来越多的中小型水库在除险加固中,都提出了进行安全监测以至于水情工情系统信息的要求。
背景
华阳河水库除险加固工程位于枣阳市兴隆镇王家陡坡村,距市区约30公里。水库承雨面积139km2,总库容亿m3,设计灌溉面积万亩。水库枢纽工程由大坝、溢洪道、输水管等组成,是一座以防洪灌溉为主,兼有养殖、发电等综合效益的大型水库。
大坝安全检测系统建成后能随时掌握大坝的安全情况,实时采集、传输、接受各测点的监测信息,能处理按指定格式储存的数据文件;具有数据采集、计算、分析等功能;建立数据库管理数据,并根据数据绘制过程线图、断面浸润线图、数据年报表、月报表等,提高了水库运行管理水平。
为能及时掌握水库流域内的水雨情信息,提供准确、可靠的水情预报,为水库防洪和水资源综合利用的合理调度提供可靠保障服务,系统建设目标是:
能实时采集、传输、接收遥测站的雨水情信息,现场存储;具有数据监测、纠错等处理功能,建立实时、历史雨水情数据库,为水库报汛、调度提供雨水情信息;能进行入库洪水和水库洪峰水位综合预报;系统能够实现可靠的无人值守,运行稳定,具有较强的防雷、抗干扰能力;能与本地区水情计算机局域网共享雨水情信息。
1、需求分析
业务流程
目前,随着现代化治水思想的确立,良好的宏观环境,明确的工作项目和技术条件的成熟,使水利事业处于前所未有的发展好时机。在数字水利工程实践活动中,众多专业技术开发商积极探索并发展形成各具特色的技术解决方案,其努力已得到社会各界的广泛认同。
功能需求
水库信息化建设由水雨情自动测报系统和大坝安全监测系统两部分组成。而大坝安全监测系统包括变形监测,渗流、渗压自动监测系统两部分。水雨情自动监测系统包括水位和雨量自动监测。系统功能需求如下:
(1)系统应具备巡测和选测功能。应能根据需求采用中央控制方式和自动控制方式进行数据采集;
(2)系统应有显示功能。应能显示建筑物及监测系统的总体布置,各监测子系统组成、过程曲线、报警状态显示窗口等;
(3)系统应有操作系统功能。应能在监测管理站的计算机或监测管理中心站的计算机上实现监视操作、输入/输出、显示打印、报告实时侧直状态、调用历史数据、评估系统配置、进行系统测试和系统维护等;
(4)系统设备应具备掉电保护功能。在外部电源突然中断时保证数据和参数不丢失;
(5)系统应具备数据通信功能。包括数据采集装置与计算机之间的双向数据通信,以及监测管理站和监测管理中心站内部及其系统外部的网络计算机之间的双向通信;
(6)具有网络安全防护功能。确保网络的安全运行具有多级用户管理功能,设置有多级用户权限,多级安全密码,对系统进行有效的安全管理;
(7)系统具有自检功能。以便能为及时维修提供方便;
(8)系统应配备工程安全监测管理系统软件。该软件有在线监测、离线分析、数据库管理、安全管理等功能,应包含数据的人工自动采集、测值的离线形态分析、图形报表制作等日常工程安全管理的基本内容;
性能需求
根据水库实际情况,选择合适量程的传感器。采集装置能满足规范要求,因水库多处于雷区,防雷系统应满足现有规范要求,接地电阻一般应不大于4欧姆。系统应能长期稳定可靠运行;数据采集要求准确可靠,关键部位应有人工监测的接口,以保证即使自动化系统发生故障,也不会丢失监测数据;应用软件应运行稳定,确保不发生致命错误;系统必须具有较强的自诊断能力及防雷和抗电磁干扰能力。
系统运行方式:支持24小时不间断运行,并可根据需要调整。
系统平均无故障运行时间大于6300小时。
系统抗瞬态浪涌能力应达到:系统抗雷电应500W~1500W;瞬态电位差小于1000V。
选测(单点)系统采样时间:无控制、常态测量小于1min;有控制、常态测量小于10min;无控制、快速测量小于
安全需求
大坝安全监测系统的设备大部分都是在室外,而且都是贵重的电子设备,要做好设备的保护工作,在野外的设备应针对人为破坏采取相应措施。所以设备要做好防雷工作,并安排专人进行管理和维护。
为系统设置接地网,要求接地电阻不大于4欧姆,同时在安装测控装置的部位设置连接接地网的接地点。
大坝监测系统采用集中供电,在系统的供电入口采用组合电源防雷器、隔离变压器、USP等隔离稳压防雷装置,以减少从电源线上引入的雷电感应;在电源引入测控装置处设置电源防雷器,在传感器接入测控装置时采用继电器电路,在不测量时切断干扰入口,以减少雷电感应对信号的干扰。
2、 系统总体设计
设计思路
水库安全监测系统设计总体思路是根据《水库大坝安全管理条例》、《土石坝安全检测技术规范》的要求,从大坝安全实际需要出发,取得必要的监测项目,从经济、实用、先进的角度,建成以信息采集为基础、信息网络平台为支撑、以工程的安全运行为主体的大坝安全监测自动化系统;建设水雨情自动测报系统,实现水雨情信息自动采集,为信息管理与决策支持创造条件,为大坝安全和防洪调度决策提供数据支持。
系统组成
系统结构采用分层分布式结构。根据监测对象和操作权限,系统由监控中心站、大坝安全自动监测站和水雨情监测站组成。
根据系统结构,中心站采用星型以太网结构,服务器和工作站通过中心交换机连接,形成计算机网络共享平台。中心站与大坝安全监测站和水位、雨情监测站采用有线通讯方式。大坝安全监测站布置在大坝脚下,水库雷电频繁,为提搞系统防雷能力,大坝安全检测站(MCU)与中心站之间采用具有较强的抗干扰能力光纤通讯方式;水雨情监测站与中心站之间采用信号电缆通讯方式;中心站通过租用公网采用VPN方式与水利信息网连接,实现远程通信。
系统划分
根据系统结构,系统划分为大坝安全监测系统和水雨情自动测报系统。大坝安全检测系统和水雨情自动测报系统共享中心站计算机网络平台,并通过中心站计算机网络将监测的工情信息上传到水利信息网。
讨论与总结
通过统一的网络架构,根据不同应用的及时性要求特点,采用总体统一架构,水情与安全监测划分不同Vlan的形式,设计了信息骨干设备融合,软件层次异构,虚拟网络功能叠加的网络结构,在信息量不大,外界影响因素较少的环境下,实现了多应用共用骨干设备,节省了投资,加快了施工建设速度。取得了良好效果。融合设计不失为一种较小规模水库管理系统的灵活方式,可以应用于信息点多,信息量小,及时性要求相对较弱的水库信息系统。
参考文献:
CAMPOLO Marina ,ANDREUSSI Paolo , SOLDATI Alfredo. Water quality control in the river Arno [J ] . Water Research , 2002 , (36) :2673— 2680.
DANIEL L T,HANK N M. Spatial and temporal hydrodynamic and water quality modeling analysis of a large reservoir on the South Carolina (USA) coastal plain[J ] . Ecological Modeling , 1999 ,114 :137— 173.
_. GSM污染源自动连续监控系统的设计及实现[J ] . 计算机应用研究 ,2003 ,20(2) :158— 160.
禹雪中. 水环境功能区管理信息系统研究与开发[J ] . 环境科学研究 ,2000 , (6) :49— 51 ,59.
SOPHIE Fabre ,XAVIER Briottet ,ALAIN Appriou. Impact of contextual information integration on pixel fusion[J ] . IEEE Trans Geosci Remote Sensing ,2001 ,40(9) :1997— 2010.
POHL C , VAN GENDEREN J L. Multisensor image fusion in remote sensing : concepts ,methods and applications [J ] . Int J Remote Sensing ,1998 ,19(5) :823— 854.
GAO J . Integration of GPS with remote sensing and GIS: reality and prospect [J ] . Photogrammetric Engineering &Remote Sensing ,2002 ,68 (5) :447— 453.
行业信息库建设方案 第5篇
【关键词】数据平台;集成;ETL技术
我校从2000年开始信息化建设,早期缺乏统一的规划和信息标准,各部门根据自己的业务需要,建立了各自的管理信息系统和数据库系统。各应用系统建设时期不同,采用的技术架构不同,运行管理维护各自独立,当对信息的处理涉及多个系统之间的协调时,处理诸如跨操作系统平台、跨数据库、跨开发平台等多方面的工作,容易形成混乱,给开发、管理、维护工作带来大量的工作量和难度。为解决这些问题,需要建立一个统一的数据平台,对各类应用和数据进行整合,消除“信息孤岛”,形成统一的数据服务,提高管理效率,降低管理成本。
1.总体设计
数据平台的建设并不是一件简单的事情,有一些集成需求是面向数据的,还有一些集成项目是基于事件驱动的体系架构或者面向服务的体系架构,把整个高校基于各种不同平台、用不同方案建立的异构应用和数据整合是一个复杂的任务,甚至是涉及到学校的体制、各部门责任和利益的复杂的系统工程。数据平台的总体设计采用三层数据模式,分别为表示层、应用服务层和数据层。表示层对全校学生和教职工提供应用平台的访问服务,以B/S方式体现;应用服务层涵盖学校所有现有的应用软件系统,包括综合信息系统、办公自动化系统、校园一卡通、教务管理系统、科研管理系统、人事管理系统、财务管理系统、学工管理系统、网络教学系统、图书管理系统、档案管理系统等,这些子系统有机的组成一个整体,提供基于统一身份认证的信息集成,提供信息化系统服务,并且提供应用软件与数据库接口,有效地对学校进行全方位的管理;数据层是共享数据平台,提供数据交换和共享功能,数据要高度集中,并且安全可靠,为数字化校园的建设提供可共享的数据支持。
2.技术实现
选择技术体系结构时要考虑整个系统的跨平台性、安全性、可靠性、稳定性及可管理性,并且应该有好的可扩展能力。我们的原始数据来自多个不同的数据源,有数据库中的模式固定化数据,也有来自异构源的异构数据,将这些分散异构的数据集成到一个统一标准的数据库中并且统一所有的应用很难实现,所以我们采用数据交换技术,将现有数据资源以原有格式存储于分布式数据服务器上,实现分散异构的数据资源共享管理和流通,在共享数据平台上搭载现有业务应用和开发新的业务应用系统。
3.数据集成
数据集成技术涉及元数据模型管理、数据抽取转换加载技术和数据联邦技术等。对于异构数据的集成,常见的有集成模式和复制模式。集成模式对应的是联邦数据库模式,提供统一的访问视图,实现逻辑上的数据集成来满足应用数据的集成需求;复制模式对应的是数据仓库建设,由ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程)完成数据从数据源向目标数据仓库转化的过程,目前大多采用这种模式,把数据从物理上不同的数据源中抽取,进行数据转换和加载,得到统一完备的数据仓库,原来分散的应用仍可以独立运作。ETL规则设计和实施在整个数据集成项目中占有60%-80%的工作量,在数据处理上几个重要流程:
元数据管理
元数据就是描述数据的数据,即对数据库、表、列、列属性(类型、格式、约束等)以及主键/外部键关联等等的描述,在地理空间信息资源共享过程中起着关键作用。在数据仓库系统中,元数据机制定义了数据源的位置及数据源的属性,确定源数据到目标数据的对应规则,确定相关的业务逻辑、记录根据业务事件发生而随之进行的数据抽取工作时间安排,记录检测系统数据一致性的要求和执行情况,衡量数据质量,合理的元数据会有效的描述信息的关联性。所有的ETL过程必须参照元数据,才能快速实现。
数据抽取
数据抽取是从数据源中抽取数据的过程,包括模式数据和实例数据抽取。在实施整个ETL过程的时候,首先要对抽取进行分析,确定什么数据需要被抽取,确定数据源信息、有效性、数据格式等,用相关算法得到实例数据的抽取策略,进行数据抽取。
数据转换和加工
定义数据源和目标库的映射关系,根据定义好的转换模型,对抽取出的数据进行转换和加工。数据的转换和加工可以在ETL引擎中进行,也可以在数据抽取过程中利用关系数据库的特性同时进行。相比在ETL引擎中,直接在SQL语句中进行转换加工更加简单清晰,性能更高。
数据加载
将转换和加工后的数据装载到目标数据库中,这是ETL过程的最后步骤。数据加载的方法有多种,对于数据量较小的数据可以通过SQL插入、更新等基本语句完成,对于海量数据可以采用批量装载的方式。
目的数据存储
提供数据与原数据的存储场所,一般为数据仓库。为了考虑整个系统的功能实现,须配备强大的辅助管理工具,以进行作业调度、日志管理、系统监控、数据维护等辅助系统的操作,同时要为应用软件提供接口,实现更好的交互性和可扩展性。
行业信息库建设方案 第6篇
针对近年来不少服装企业普遍面临的成本增加、利润减少、缺乏增长力等问题,百胜软件公司也开始尝试在信息系统应用中引入供应链管理理念,并于2008年7月正式了“RFID FOR BSERP'’的快速供应链解决方案。
记者:现阶段,服装行业对信息系统的应用包括哪些方面?
黄飞:服装企业的信息化绝不是单纯的软件应用问题,还涉及到企业管理架构的调整、业务流程的重组等方面。先进的信息化管理系统提供的是一个整体企业运作模块,它蕴涵先进的经营理念、科学的管理流程和敏捷的IT技术,将引导企业进入标准化的管理运作模式。
服装行业对于信息系统的应用主要分为三种类型:一是供应链管理系统平台,支持整个供应链上下游管理;二是分销/零售系统平台,支持进销存管理;三是服装企业ERP系统平台,全面管理企业的计划、生产、物料、库存和财务等方面的业务。
对服装企业来说,不同的经营范围和定位决定了其对信息化的需求不同,信息化建设的重心也不同。比如,对于品牌商而言,信息化的需求重点在于市场分析,对产品策划的支持,以及从供应商到渠道商的整个供应链上下游的管理,因此信息化建设应用以供应链管理系统为核心;对于分销商或零售商而言,信息化的重点在于销售分析和商品库存控制,其信息化建设应用以分销/零售系统为核心;对于生产商而言,信息化建设的重点在于采购物控和生产计划管理,其信息化建设应用以企业资源计划(ERP)系统为核心。
记者:具体到不同类型的服装企业对信息系统的应用需求有哪些差异?
黄飞:不同定位的服装企业对信息化的需求差异很大,并且这种定位分类很复杂,界限模糊。单就正装而言,男装和女装的特点就有明显的区别,同时,正装和休闲装也有交叉,如商务休闲等。所以,企业对信息化表现出的需求是千差万别的,在此只能进行较笼统的分析。
从市场扩展方面来看,运动休闲类企业的利润来源集中在二线、三线城市,门店的数量一般较多,要求信息化系统具备强大的数据存储、远程管理和分析能力。
从营销方面来看,运动休闲类服装的款式变化速度很快,要求对市场信息做出更快、更准确的反应。其中,产品周期更短的时尚女装类产品表现的尤为明显。
从数据分析方面来看,由于产品周期不同。男装正装类企业对往年数据分析较少,而运动休闲类或者时尚女装企业需要对流行趋势进行更准确的把握,这决定了他们对数据存储、分析等有明显的需求。
记者:对服装企业而言,供应链管理信息系统的应用具有怎样的价值?
黄飞:信息系统从很多方面解决了服装企业供应链管理中从上游到下游的连接,具体表现在以下几个方面:
第一,终端信息的及时反馈;
第二,再订货周期缩短,改变过去通过电话、传真和归纳计算的方式;
第三,优化材料库存的控制,并降低库存成本和仓库管理成本;
第四,生产设计方案和产品生产得到统一管理。以往由于通过人工手段对不同的版本进行控制,如果版本发生改变,而采购人员不知道,就容易造成一些浪费;
第五,基于信息系统的强大的财务管理。以往财务核算成本是非常困难的事情,现在通过系统中生产任务的执行,就可以得到准确的生产成本,同时现金流也能得到很好的控制。
记者:服装企业怎样实现信息系统与供应链管理的完美匹配?需要关注哪些问题?
黄飞:要帮助服装企业建设供应链管理信息系统,并且实现信息系统与供应链管理的完美匹配,首先要了解其供应链设计。据调查,很多服装企业都是以设定下游为供应链起点的,“为顾客实现的是什么?顾客对服装企业的满意度怎样?”这是很多服装企业的最终原则,所以,很多企业首先从店铺管理开始。
另外。对上游供应链的建设,对于服装企业而言是最困难的。所谓上游的供应链建设,是指从采购、设计到生产整个环节的建设。众所周知,国内服装行业的进入门槛较低,因此有相当部分的服装企业管理水平有限,从业人员的管理能力和理念比较落后。事实上,其上游供应商也同样存在这样的问题。就整个服装行业的发展现状而言,管理能力应该说处于中低档水平。但是,服装企业面临的市场是千变万化的。这样的特点决定了服装企业在实施供应链管理信息化过程中必须要对采购、设计、生产、终端销售等整个链条进行重新审视,然储管理是一项核心工作。
记者:曼哈特为服装行业提供的系统解决方案包括哪些内容?
郭仁正:针对服装行业的供应链管理特点,曼哈特为这类客户提供的解决方案主要包括四个系统,客户可以根据自己的实际需要进行选择。
一是仓储管理系统(WMS)。它是仓库管理最基础的系统,涉及收货、铺货、存储等仓储活动,重点是实现对款式、颜色、尺码等信息的有效管理,以降低库存,加快流转速度。
二是扩展企业管理系统(EEM)。该系统是一个平台化的产品,提供实时透视度和贸易伙伴协作,以确保货物通过最佳渠道及时流向客户。通过供应链同步,扩展式企业管理系统为企业创造极大的经济效益,并且经常带来立竿见影的效果。无论企业是集中于订货过程,还是创建预期出货通知,或是借助于全球透视度及事件管理系统对库存进行跟踪和控制,扩展式企业管理系统均可实现关键功能整合,帮助企业实现既定目标。
扩展企业管理系统的应用价值具体体现在以下方面:
1通过统一解决方案,管理全球协作商务;
2降低库存总体搬运成本、运输成本和人工成本;
3实时提供全球货物流透视度;
4按时交货率提高10%-20%;
5订单履行率提高5%-15%;
6周期时间缩短2-4天;
7安全库存量降低5%-15%;
8提高配送中心、物流服务商的运作透视度。
三是需求预测系统。需求预测是服装企业做好供应链管理的一项重要工作,对于服装企业而言,一方面要保证足够的库存以防止断货,另一方面又要防止过多各货导致的库存积压。要做好需求预测工作,系统的支持很关键。借助系统实现准确的库存需求预测,可以帮助服装企业促进销售,最大限度降低流动资金需求,维护客户满意度。
四是库位优化系统。该系统主要是针对一
些季节性明显的产品,解决拣选效率的问题。因为多数服装的销售有较强的季节性,随着季节变换,库位优化系统会优先考虑当季产品的出入库,按照一定的销售规律,向WMS传递拣选时间、内容、数量等信息。
记者:请您结合实际参与过的项目,介绍曼哈特系统解决方案在服装行业的具体应用。
郭仁正:曼哈特在全球的第一个订单就是来自服装行业,目前在全球服装行业的WMS项目中,曼哈特占有50%-75%的市场份额,客户包括高级时装、商务休闲、户外、内衣、运动等众多不同类型的服装品牌。在中国市场,曼哈特2006年以来先后与达芙妮、某大型休闲服装零售商、森马建立了合作。其中,达芙妮在上海的仓库建设项目于2006年10月启动,2007年9月正式上线曼哈特的WMS系统。该仓库面积达到万平米,SKU数量达2万个。随后,达芙妮在重庆、北京、福建、郑州及沈阳也自主安装了此系统。2007年11月,某国内大型休闲服装零售商实施了曼哈特仓储管理系统及扩展企业管理系统解决方案,用以优化其供应链来达到资源优化配置的目标。该项目已于2008年11月正式上线。去年9月,曼哈特与森马的合作项目正式启动,该项目也位于上海,面积达到3万平米,该仓库安装了自动立体仓库、输送机、电子标签拣选系统等自动化仓储设备。预计上线时间为2009年下半年。与其他应用行业相比,为服装行业设计和
记者:实施供应链管理解决方案需要重点关注哪些环节或因素?
郭仁正:单就WMS而言,每一个行业的应用都有其独特之处,甚至同一行业的不同企业也都不尽相同。以服装行业为例,不同档次、不同类型的服装在季节性、销售量等方面都有所不同。根据曼哈特以往服务于服装行业的经验,我们认为有几方面内容值得重点关注。首先,服装产品的生命周期很短,季节性很强,因此WMS要支持不同季节库位管理的切换;其次,服装产品的颜色、尺寸、款式管理很特殊,为了加快拣选效率(把零拣变为箱拣),服装行业越来越多地开始采用混码箱操作(供应商来货时,同一款式颜色会有数种箱。每种箱按照不同的数量比例来包装不同的尺码,比如25件一箱:A型箱是2件XL、5件L、13件M、3件S;B型箱是3件XL、4件L、10件M、5件S),这对WMS是个挑战。而且,到季度末的时候,门店的补货可能要不了一整箱25件了,那剩余的混码箱可能就要进行拆箱、分别上架,然后按照正常的零拣来处理。这个需求的实现具有更高的难度;第三,对于一些需要进行挂装处理的服装企业,其供应链管理解决方案中还需解决与相关系统和设备的接口问题。
此外,为服装企业设计和实施供应链管理解决方案还需要结合其销售模式。目前中国服装企业的销售模式主要有自营店、加盟店、专柜、B2C四种,而每种销售模式下的拣货和配货方式存在很大差异。
记者:曼哈特如何看待仓储管理系统在中国服装行业的应用前景和趋势?
郭仁正:据了解,中国具备一定规模的服装企业对财务软件、CAD设计软件、ERP系统的应用已经比较普遍,随着他们对供应链管理需求的不断增加,其对仓储管理系统的应用前景值得看好。现在的问题在于,虽然服装企业对仓储管理系统有明显需求,有实力的企业也不在少数,但既有实力又有正确认知的企业则是凤毛麟角。就目前中国市场的仓储管理系统用户情况来看,多数还属于第一代用户,他们对仓储管理系统的应用仅限于基础的进销存管理,而很少涉及与仓储相关的所有活动管理。在应用产品方面,服装企业大多采取自主开发软件的方式。所以,需要我们进行大量的介绍和说服工作。我相信经过未来3-5年的探索,这些第一代用户会从中有所领悟,真正了解并选择适合自己的仓储管理系统。
行业信息库建设方案 第7篇
关键词:港口;物流园区;信息服务;EDI;RFID
The Design and Implementation of Port Logistics Park Information Technology Application
Qiao Zhi
(LianYunGang E-Port Information Development Co.,Ltd.,Lianyungang222042,China)
Abstract:Based on port logistics park,the operational characteristics of informationization means construction integration and network of comprehensive logistics information service system and decision support system,Internet based,in order to produce the business information as the core,set up the global logistics information service network,make logistics park can provide the whole logistics information service.
Keywords:Port;Logistics park;Information services;EDI;RFID
一、引言
港口物流园区的信息化建设可以准确、及时、安全地解决物流园区货物集疏运流程中的数据交换和一些人工识别、录入等阻碍效率提升的瓶颈问题,通过改变和优化物流信息的采集、处理、交换模式,提高信息流通的效率,从而推动物流、商流、信息流合而为一,真正实现“物畅其流”。通过对港口物流园区当前业务流程进行的分析,寻找业务流程的瓶颈,借助EDI电子数据交换技术平台和RFID无线射频识别技术,实现物流园区业务流程的优化整合(BPR),建立一套高效、可靠的作业模式;为物流园区业务流程结点部门开发相应的业务管理系统,以口岸EDI电子数据交换平台为基础,逐步实现物流园区运输业务流程的电子化,为物流园区的快速发展提供技术支撑,对于促进物流园区的健康发展,进一步提升城市地位,提高市场竞争能力,吸引更多的投资者,促进社会信息化建设的快速发展具有十分重要的战略意义。
二、信息化建设的目标、内容及功能
(一)总体目标
建成集成化、网络化的物流综合信息服务系统及决策支持系统;以互联网为基础,以生产业务信息为核心,建立起面向全球的物流信息服务网络,提供全程物流信息服务。
(二)建设内容
业务信息系统:业务管理信息系统与决策支持分析系统。
电子商务:信息门户网站与电子商务应用系统。
(三)总体功能特点
1.支持多层次、集团化、网络化的协同作业;
2.支持作为虚拟物流企业运作;
3.与ERP等客户信息系统无缝连接;
4.支持多级客户管理;
5.全面操作及数据权限管理;
6.审核流程及工作流管理。
三、综合信息系统概述
(一)仓库管理系统
仓储管理系统(Warehouse Management System,简称WMS)是用来管理仓库内部的人员、库存、工作时间、订单和设备的软硬件系统。这里所称的“仓库”,包括生产和供应领域中各种类型的储存仓库。
(二)配送管理子系统
系统的目标是做到物流、信息流、资金流运转顺畅,数据高度共享,以提高作业效率和决策科学性;及时采集经营活动中的各种信息并及时有效的处理,增强经营机制和及时决策能力,控制经营活动中的人、财、物和进、销、调、存,提高现代化管理水平,达到全面提高经济效益的目的。
(三)货代管理子系统
以货代业务为对象,解决业务人员在业务处理流程中涉及的管理与决策问题,整合了业务管理、商务管理、分析报表和报文传输四大模块,四个方面相互紧密配合又具有很好的独立性,系统间具有良好的数据接口。系统主要功能包括:询价、订舱管理、提单管理、应收应付、来款核销、账单管理、客户往来等。
(四)汽运管理子系统
以汽车运输管理为核心,包括线路管理、车辆管理、派车单管理和运价管理等模块。
(五)海运管理子系统
系统主要功能模块包括:船舶规范、船期维护、订舱委托、签单放箱、箱货碰对、海运清单、箱管监控、费用结算等。涵盖了船代公司的所有业务,包括船务管理、进出口单证管理、集装箱管理和各种费用结算、电子数据交换、网上信息服务等,具有较高的先进性、实用性和完整性为提高船代公司对客户的服务质量、节约运行成本、提高工作效率提供了可靠的保障。
(六)铁运管理子系统
系统主要功能包括:班列编组、装卸车计划及确认、货物运单管理、任务调度、道线管理、箱管核销、费用结算等。以班列运输业务为核心,实现集装箱运输的全程监控,包括内地装火车、运输期间监控、卸火车拆箱以及海运出口等。
(七)集装箱管理子系统
以集装箱箱公司业务为主线,实现集装箱完整的信息管理,包括:新箱维护、放箱管理、堆存信息、进出场确认、实施监控、验残、修箱报价管理、动态报文等。
(八)堆场管理子系统
系统包括以下子系统:箱区规划、货运委托、装箱指示、配箱管理、作业记录、保管、进出场登记、箱位图、提箱返箱、箱账单等。
(九)电子商务应用系统
以物流园区内部信息化建设为基础,以电子商务门户为核心,充分集成物流园区物流信息应用、业务信息系统,主要业务过程实现电子化,实现园区电子商务环境。
以WEB方式提供客户服务,包括网上委托、接单处理、网上查询、信息、业务跟踪、网上等功能,实现门户网站与电子商务应用的完美结合。
(十)决策支持系统
以物流园区各信息管理系统业务数据为核心,通过数据挖掘技术实现园区决策分析,包括商业智能、线路优化、库存优化、图形报表、系统仿真、预测分析、库位优化、配送优化等功能,为物流园区决策层提供高级管理手段。
四、建设方案
(一)实施原则
先进性:采用当前成熟且前沿的系统开发思想,引进先进的技术、方法和设备,使整个信息体系及网络平台成熟可靠,体现当今先进应用水平,并具较强的发展潜力。
开放性:整个体系的软件、硬件应具有开放性,符合相应的国际标准和协议。
扩充性:整个体系的软件、硬件易于升级和功能扩充。
可靠性:整个体系的软件、硬件在系统结构、方案设计、设备选择、技术服务等方面综合考虑,保障系统能够不间断运行。
安全性:整个网络体系具有高度的安全性和保密性。
可维护性:提供有效的系统管理和系统监控、调试、诊断技术手段,保证系统维护管理方便、有效。
行业信息库建设方案 第8篇
存储的数据包含业务数据和元数据。存储的数据分为四层,每一层采用的存储方式和数据不同,如下:
ODS层:原始数据层,存放原始数据,直接加载原始日志、数据,数据保持原貌不做处理,目前系统中已经存在。
DWD层:结构和粒度与原始表保持一致,对ODS层数据进行清洗(去除空值,脏数据,超过极限范围的数据),DWD数据采用hive的方式管理,将从ODS中的数据同步到hive。
DWS层:以DWD为基础,进行轻度汇总,如将用户的基本信息从各个业务系统中合并为一张宽表,此层的数据仍然存储在hive中。
ADS层:数据应用也即数据应用开发层,通过数据计算层的计算后,根据数据类型的不同可以存储到不同的存储器中,如文本型查询的数据可以存储的ES中,对计算结果的查询可以存储在SqlServer中。
数据仓库分层示意图
行业信息库建设方案 第9篇
目前由于数据分散在不同的存储环境或数据库中,对于新业务需求的开发需要人工先从不同的数据库中同步、集中、合并等处理,造成资源和人力的浪费。同时,目前的系统架构,无法为未来数据驱动业务创新的理念提供友好的支撑。需要建设新一代数据管理平台来解决数据利用率效率跟不上,以及不能支撑业务发展的问题。以此建设背景,建设新一代数据管理平台需要能够支持数据汇集、数据分析、数据应用、数据计算、数据管理、数据资源管理。
行业信息库建设方案 第10篇
一、我国水库管理现状
我国大部分水库建立的时间比较久,相对应的设施已经老化,管理手段落后,不能满足当前水利工程的要求,当遇到自然灾害时无法及时有效的应对,缺少信息化技术支撑。水库的管理工作不到位,常因水库的维修工作不及时、设施操作不当、大暴雨突发应对不及时使水库发生险情等,水库的功能和安全性逐渐丧失,严重时将出现溃坝等现象。国家有关部门对水库存在“重建轻管”现象,水库在维护等方面的投资和关注不够,水库的管理经费缺乏,在此情况的影响下,也减少了水库管理的工作岗位。不少水库在遭到自然灾害的摧毁后没能得到及时的修护,从而降低了水库的整体效益。水库的管理违背了生态环境的可持续发展的原则。在我国个别地区的水库包括小型水库的管理体系中,一直沿用较落后的管理方法。水库的管理机制落后,没有达到建设信息化的水平,不能及时的进行改进和创新。这类管理方法没有科学、完善的水库管理体系,管理人员的考核也没有具体的标准,造成水库的管理工作走下坡路。甚至部分管理者无法及时认清自己的工作,遇到问题不及时汇报,导致问题累积,埋下安全隐患,致使水利工程不能快速发展。
二、水库管理信息化建设的重要性
水库是调节径流的重要水利工程。水库管理的重点是做好堤坝的安全管理工作,防止溃坝造成不堪设想的后果。信息化可持续发展是新时代水利建设的主要发展方向,也是整个国民经济和社会信息化建设的重要组成部分。利用信息化建设,可以及时对水库上下游进行监控,通过网络及时观察反映水库大坝及相关地区的实时气象及工程情况的信息,把这些信息整合起来,构建信息访问平台。通过实时水文预报等,能够更加直观、全面的对水库进行多种方案的模拟、分析,并提供解决和管理方案。随着现代信息技术的发展,实时数据信息采集系统和处理“数字化水库”的时代已经拉开帷幕。水库效益是需要通过水库调度来实现的,在水库调度中,必须坚持发展服从于安全的原则。水库的发展及调度要权衡多方面的因素,维护生态平衡等需要。为了能够充分的发挥水库的综合效益,在水库调度中,需要利用信息化建设进行某些技术工作。
三、水库管理存在的问题
众所周知,我国水资源相对比较缺乏。人均水资源量在世界上的排名相对靠后。要想促进经济发展创建和谐社会,水库管理是否能够发挥自身最大的效益十分重要。在水库管理上出现的问题和解决方案如下:
(一)管理体制存在缺陷全国大中型水库管理机构在计划经济时代上的基本定义是为集体社会提供公益,加之进行生产经营。但是,随着经济体制的不断变换,水利上实施的体制已经跟不上时代的步伐,必将遭受淘汰的命运。为了水利工程能有更好的发展,必须进行信息化改革。在改革的过程中,要合理的划分水利行政主管部门和事业单位的主要职责,提高管理人员的工作意识,从根本上规范管理。
(二)忽视水污染问题在水库管理上的主要问题就是防洪,严格管理以便造成溃坝等严重现象。特别是每到汛期,水库的管理人员都会小心翼翼的做好防汛工作,从而忽视水污染的严重性,随着工农业的发展,工业废水和生活污水的排放日益增加,造成了水体富营养化,直接对供水和生态安全构成了威胁,没能在抓防汛工作的同时对水库进行污染物的清理工作。为了彻底清楚污染物应由供水部门带头,成立专门的清污机构,定期对水库范围内的淤泥进行科学的清理,以彻底消除底泥对水库水质的污染,这项工程庞大,耗资较高,但与重新修建水库所花的费用来说有明显优势。
四、水库管理信息化建设
在水库工程的信息化建设过程当中,大中型水库起步较早,从电台报汛、有线电话报汛逐渐向自动化遥测系统等现代通讯手段过渡。水库工程管理信息化建设中发展最为迅速的属三峡水库,三峡水电站建立后蓄水形成的人工湖泊达到一千零八十四平方公里。除三峡水库以外,其它大型水库工程信息化建设也在抓紧进行。实现水文现代化是提高水利工作效率的重要途径。虽然目前我国也在进行全国防汛指挥决策系统的建设,但是水文自动测报系统中央只管理中央报汛站,尽管统一规划,但是投入渠道却不一样。目前,全国有中央报讯站,各省有气象方面的雨量测站,有山洪灾害防治系统的测站,有地方的水文报汛测站,所以,难以同步进行建设,必须大力加强水文监测、优化站网密度,进行统一规划。必须明确经费来源渠道,统一按照要求,对国家和地方进行共同建设管理。这样,才能确保水文现代化的快速实现。还要注重科研和人才的培训,高度重视新技术、新设备的研发,特别是洪水预报系统的研发,即如何将计算机技术、洪水预报模型与GIS地理信息系统相结合,包括信息自动采集设备等等。虽然我们也很重视科技发展,但研究范围还是不够广泛,科技含量低。开展研究的课题也相对较少,不利于水文建设的长期发展,为适应新形势的水利发展必须在这一方面尽快改变。为了推进水库管理信息化系统运行,必须对水库工作进行规范管理,确保信息化系统的稳定运行。水库工程管理信息化是现代化水库管理的必然发展趋势和发展方向,加强管理才能确保水利工程稳定可靠的运行。因此,制定相关的运行管理规程及操作规程,要求系统工作人员严格按规章制度、操作执行,是信息化系统得以正常运行的关键。水利信息化项目落成后,运行管理费用紧缺是当前水库管理信息化存在极为普遍的现象,严重影响了信息化系统的正常运行。因此明确维修管理费用的来源渠道是水库管理信息化系统运行的重要保障前提。信息化工作的关键是加强培训技术人才。在水利行业,特别是水库等较为基层的水利单位,现代化技术水平较低、应用管理水平不高的现象普遍存在,懂水利又懂信息化的技术人才相当馈乏,已经成为信息化建设的重要制约因素。因此,应采取更丰富的学习形式加强技术人员的培训,提高水库工程管理人员的综合素养,使水库工程信息化系统发挥出最大效益。
五、结束语
行业信息库建设方案 第11篇
【关键词】 南沟门水库 通信系统 组网方式
南沟门水库枢纽工程位于陕西省延安市黄陵县境内,水库坝址位于葫芦河河口上游约3km处的寨头河村南沟门附近,距黄陵县城约25km,距洛川县城约17km,距延安市约120km,距西安市约180km。南沟门水库通信系统是南沟门水库枢纽工程管理调度系统的重要组成部分,系统主要建设马家河引水枢纽管理站、各个监控点、监视点与南沟门水库枢纽管理站之间的通信链路。通过建设枢纽工程区内的光纤通信链路,实现各个监测控制设备、视频监视设施、语音通信设备之间的数据通信链接。同时采用租用方式,建设延安市南沟门水库管理处与水库管理站调度中心之间的信息交换与资源共享,同时满足市话呼叫、长途直拨与国际互联网联接的需要。
一、建设目标
通信系统是为南沟门水利枢纽工程管理调度系统提供传输平台,建设的目标是根据通信技术发展趋势选用当前主流技术,建设适用于工程特性、满足各级管理机构工程安全运行调度及信息系统宽带传输业务需求的通信系统。通过建设实现视频信号、监控数据的传输。按照数据交换、视频传输、语音通信三网合一的建设思路,建设南沟门水利枢纽工程的通信系统,以满足南沟门水利枢纽工程的运行管理、数据交换、视频传输的需求,保证南沟门水利枢纽工程自动化系统的安全运行。
二、通信系统组网方式
1、通信方式的选择
(1)南沟门水库枢纽和马家河引水枢纽。南沟门水库枢纽管理站和马家河引水枢纽管理站相距约25公里,通过自建光缆进行通信。两个枢纽工程自身在不到2km2范围内建设管理调度系统专用通信网络,其它任何通信方式的传输带宽、稳定性、可靠性、抗干扰能力、系统建设投资等都无法与光纤通信相比拟。同时由于在水库枢纽需要建设以水雨情自动测报、工程安全监测、视频监视、闸门与电站监控等项目为主要内容的信息化网络系统平台,这些系统建设所提供的网络设备,为建立水库管理调度光纤宽带通信系统提供了设备条件,使通信系统的建设简单易行。(2)管理站与管理处之间的通信。南沟门水利枢纽管理站通过租用电信公网与延安市南沟门水库工程管理处进行通信。马家河引水枢纽管理站通过与南沟门水利枢纽管理站之间的自建光缆将数据首先传到南沟门水利枢纽管理站,然后再通过租用的电信公网由南沟门水利枢纽管理站传至延安市南沟门水利工程管理处。
2、通信系统组网
根据南沟门水利枢纽工程总体设计和水库管理调度系统工程总体建设内容,拟以行政与调度电话通信、计算机网络互联与资源共享、视频监视动态图像实时传输三位一体的建设思路,构建水利枢纽管理调度通信网络系统,同时建设与公众电话网、国际互联网衔接的通信链路,满足话务通信、数据交换、视频传输的需要,如图1所示。
(1)水利枢纽工程通信专网:按照通信数据、视频监视、语音话务三网合一的设计思路,通过自建光缆与租用电信公网,建设延安市南沟门水利枢纽管理处至南沟门水利枢纽管理站再至马家河引水枢纽管理站的通信骨干网络。(2)水利枢纽工程内部通信专网:根据水库管理调度系统工程所包含的水情测报、工程安全监测、视频监视、闸门与电站监控等项目所需要的通信网络和信息化网络基础平台建设,综合通信路由、通信带宽以及通信安全、可靠的需求,拟在水库管理调度中心与工程安全监测室、坝后电站、水情监测室、闸门监控室之间建设光纤通信专网。(3)内部语音电话通信网:内部语音电话系统采用电信软交换系统,软交换系统同时称为VoIP系统就是俗称的IP电话,利用Internet/Intranet(IP)网络传递话带业务(包括话音/传真/话带数据等),即在分组交换网上通过(TCP/IP)协议实现传统的电话应用。它是一种新型发展的非常快的新兴技术,在许多专网和运营商的系统中应用的很普遍了。设备包括网守、中继网关及语音网关等。网守主要负责所属区域内用户的地址解析和认证,防止非法用户的接入和非法网关的登记,并负责向所属网关提供路由信息,包括被叫网关的端口信息等。中继网关是PSTN网络(传统的电话网络)和Internet网络之间的汇接设备,完成语音信号和数据系统信号(IP包)的转换,实现PSTN网和数据网的融合。(4)内外信息交换通信网:枢纽管理站与延安市南沟门水库管理处采用租用光纤通信方式建立通信链路。所有语音网关通过计算机网络平台连接到南沟门水库工程管理处调度中心核心交换机,核心交换机通过语音网守连接至电信公司网络。
3、通信链路设计
(1)光纤组网。① 光纤。南沟门水库管理站与马家河引水枢纽管理站之间布设约20公里光缆。南沟门水库管理站光缆布设分别到达各个闸房、坝后电站中控室、视频监视点、工程安全监测室和水清测报监测室。马家河引水枢纽管理站光缆布设分别到达各个闸房、视频监视点、工程安全监测点。②交换机。根据南沟门水利枢纽工程调度管理信息化网络平台设计的综合考虑,拟在水库枢纽管理处、水库枢纽管理站和马家河引水枢纽管理站布设核心交换机,在工程安全监测室、闸房、坝后电站中控室配置接入交换机,进行组网。(2)内部电话网。根据水库管理调度的需要,拟在南沟门水库管理站配备满足50用户的语音电话,在马家河引水枢纽管理站配备20用户的语音电话,在安全监测室配备8用户的语音电话,在水情测报室配备10用户的语音电话,在闸房配备2用户的语音电话,在电站配备30用户的语音电话,在延安市南沟门水库管理处配备30用户的语音电话,形成完整的水库管理调度话务内部通信网。在水库管理调度中心设置语音网守,在管理内部用户4位小号呼叫的同时,通过与中国电信等通信运营商协商,通过2M光纤或16路中继线接入公共通信网,满足用户本地市话、国内国际长途呼叫的需要。电站与电力调度部门的联络,采用载波电话或专用电话,本项设计遵从电站设计的结论而不再考虑,但本项设计的电话系统可作为电调的备用链路。(3)国际互联网出口。南沟门水利枢纽工程管理调度系统从严格意义上讲,属于内部专用综合业务网,但是,为了扩大对外交流,提高管理水平,通过严格的隔离措施,实现与国际互联网的联接还是十分必要的,为此,拟在南沟门水库管理处和南沟门水利枢纽管理站采用VPN网关方案实现内外网的隔离,并解决好防病毒问题,满足整体工程管理的需要。
三、总结
在水库信息化系统中,无论是从测控点获取水情、工情数据和视频、音频信息,还是下达闸门控制指令,以及信息中心与信息分中心之间数据的传输,都要以通信链路为载体。因此,通信系统是信息传输的命脉,是水库信息化建设的基础设施。
参 考 文 献
行业信息库建设方案 第12篇
关键词: 水利 信息化 管理 技术 系统
中图分类号:TV 文献标识码:A 文章编号:
一、水利信息化存在的主要问题
我国水利信息资源开发取得了较大的成绩,但从总体状况看,现代化水平参差不平,主要表现在:1)信息的标准化和规范化工作相对滞后。随着水资源管理和水环境保护问题的日益突出,需要开发的水利信息资源越来越多,对信息的准确性和实时性要求越来越高,但信息的规范化和标准化工作相对滞后,加上系统的维护管理经费渠道始终未得到很好地解决,致使目前我国在水利信息资源的开发利用和信息服务方面,与国际的差距有逐渐拉大的趋势。2)对信息工作的认识不到位。水利系统的干部和职工对信息化工作的重要性有了一定的认识,但认识不足,缺乏紧迫感;没有形成统一的建设机制,水利信息化普及程度还远远不够,甚至部分单位还没有统一的规划和明确的发展目标。3)水利信息化发展水平不高。主要表现在:从事水利信息化产品设计与开发的相关机构对行业应用理解不够深,造成了水利信息化产品的易用性、实用性差,甚至无法推广或交付使用。信息化发展的保障条件不足。水利信息化工作面广、量大,信息化技术发展快,而现在国家某些投资政策和项目管理制度不太适应信息化建设要求,导致长期以来在水利信息化建设方面的投入严重不足。
二、数据库在水利信息化管理中的应用
水利工程基础数据库:主要信息如下:(1)河道概况:河道特征、河道断面及冲淤情况、桥梁等。(2)水沙概况:水沙特征值、较大洪水特征值、水位统计及洪水位比较、控制站设计水位流量关系等。(3)堤防工程:堤防长度、堤防标准、堤防作用、堤防横断面、加固情况、涵闸虹吸穿堤建筑物、险点隐患、护堤(坝)工程等。(4)河道整治工程:干流险工控导工程状况、支流险工控导工程状况、工程靠溜情况、险情抢险等。(5)分滞洪工程:特性指标、水位面积容积、堤防、分洪退水技术指标、滞洪区经济状况、淹没损失估算、运用情况等。(6)水库工程:枢纽工程、水库特征、主要技术指标、泄流能力、水位库容及淹没情况等。
水质基础数据库:完成数据库表结构的设计,在整编基础上,逐步形成包括基本监测、自动监测和移动监测等水质数据内容的水环境基础数据库,开发数据库接口程序和服务软件,为水资源优化配置、水资源监督管理、水资源规划和科学研究提供水环境基础信息服务。(3)水土保持数据库:规范数据格式,完成数据库表结构设计,逐步建立包括自然地理、社会经济、土壤侵蚀、水土保持监测、水土流失防治等信息的水土保持数据库。(4)地图数据库:采用地理信息系统基础软件平台,对数字地形图进行数据入库,建立地图数据库。要求地图数据库具有各种比例尺地形图之间图形无缝拼接、图幅漫游、分层、分要素显示、输出等GIS 基本功能。(5)地形地貌数字高程模型:利用地形图地貌要素或采用全数字摄影测量的方法,生成数字高程模型,直观表示地形地貌特征,并利用DEM 进行各种分析计算,如冲淤量计算、工程量计算、库容计算、断面生成以及洪水风险模拟、严密范围分析等。(6)地物、地貌数字正射影像:对重点区域、重点河段进行航空摄影成像,采用全数字摄影测量系统,编制数字正射影像图,清晰、直观表示各种地物、地貌要素。(7)遥感影像和测量资料数据库:收集卫星遥感影像,编制区域遥感影像地图并建立遥感影像数据库。根据不同时期的遥感影像,反映全区域治理开发成果,实现对本地区的动态监测。测量资料数据库包括各等级控制点、GPS点、水准点资料,表示出点名、点号、等级、坐标、高程及施测单位、施测日期等。
三、强化信息中心的执行职能
为顺利推进和实施水利信息化工作,除要求信息化主管部门参与相关决策,还要求实施部门具备相应的职能、能力。作为信息化工作具体执行及日常运行维护的保障部门,需要进一步落实和强化职能,加强能力建设,稳步推进信息化建设顺利开展。推进信息化建设工作,除了要在政策法规、规划计划、财务等方面加以引导和规范,从立项、实施、运行维护等信息化建设全环节加以控制外,各
级信息中心要加强自身能力建设,要为各级水利业务部门开展信息采集、数据传输、应用支撑、安全保障,以及其他水利信息化的相关建设工作提供必要的服务与支持。各级水行政主管部门要重视水利信息化专业队伍的建设,形成集中的水利信息化人力资源优势,充分发挥人才队伍的专业化、整体化、系统化的建设与运行管理作用,促进水利信息化建设健康有序发展。
四、GIS (地理信息系统)技术的应用
通过GIS 技术实现水质监控和数据分析
水利工程同时也是环境工程,但随着社会经济的发展,水资源不断受到污染,民众越来越关注水质状况,对水质的实时监控和分析已成为水利信息化管理的一个日常重要工作。只有掌握瞬时变化的水质信息,才能对环境质量进行动态评价
和有效监督,才有可能应对水污染突发事件。运用GIS 对水质信息进行管理,可以合理地选择能代表水质总体状况的站点,进行自动实时的监测。不同的水污染类型( 主要包括水体富营养化、泥沙污染、石油污染和废水污染及热污染和固体漂浮物污染等) 的反射率等存在差异,这些差异将在遥感影像中呈现出不同的特征,结合GIS 的空间数据和GPS 的定位数据进行遥感影像分析处理,可以快速地获取水污染的类型、地点及其污染范围,并以专题图的形式直观生动地表现在用户面前。同时,结合地理地质信息、人文信息、供水信息和其他相关环境因素,形成综合信息圈,为应对水污染的突发事件提供决策依据。
通过GIS 模拟和监控水资源调度
水资源调度涉及大量的空间特征信息,GIS是空间型的信息系统,能很好地处理各类空间特征信息,利用遥感技术进行地表水和地下水资源量的估算,监控和计算降雨量分布,并结合估算的水资源分布及供求量情况,将GIS 与水资源调度模型集成,直观演示调水过程,模拟不同的水调方案,实现调度管理的可视化,更好地发挥辅助决策的作用。水资源调度过程主要分为3 大部分,前期预
测和调水模型推演,调水过程监控,后期统计分析,这3 步骤中GIS 技术都将发挥主要作用。在调水之前通过GIS 地图的形式显示目前流域中的工程安全状况,有异常情况需要在地图上显著标识出来,能查询该地域监控设备的信息和维修记录。通过GIS 地图展示当前水资源分布,结合用水单位的需水情况,通过不同的调水模型进行模拟推演,最终确定最佳的调水方案。
结语:
行业信息库建设方案 第13篇
要提高数据使用效率,打破数据库之间的物理隔阂,需要先将数据汇聚到数据仓库中,数据同步分为实时和非实时,采用的技术也不同。目前先从ODS中同步到hive。数据同步策略的类型包括:全量表、增量表、新增及变化表、拉链表:
Ø 全量表:存储完整的数据。
Ø 增量表:存储新增加的数据。
Ø 新增及变化表:存储新增加的数据和变化的数据。
Ø 拉链表:对新增及变化表做定期合并。
实体表:比如用户,理财产品等,实体表数据量比较小,通常可以做每日全量,是每天存一份完整数据。即每日全量。
维度表:比如订单状态,审批状态,产品分类,维度表数据量比较小,通常可以做每日全量,是每天存一份完整数据。即每日全量。说明:
针对可能会有变化的状态数据可以存储每日全量。
没变化的客观世界的维度(比如性别,地区,民族)可以只存一份固定值。
事务型事实表:比如,交易流水,操作日志,出库入库记录等。
因为数据不会变化,而且数据量巨大,所以每天只同步新增数据即可,所以可以做成每日增量表,即每日创建一个分区存储。
周期型事实表:比如订单申请等
行业信息库建设方案 第14篇
数据计算由数据管理员来实现,解决的问题根据业务需要对数据融合得出的数据结果。计算层分为离线计算和实时计算。
(1)业务流程
数据管理人员可以在平台上可视化的对数据处理,先创建数据应用集合以及对应的数据表,然后在可视化界面上编写数据处理脚本,需要提交后台任务管理系统执行,执行完成后根据数据要求存储到不同的数据器中。
(2)离线计算
针对数据量大、逻辑复杂的计算交由后台任务系统,调用Hive计算。将计算的结果可以存储到SqlServer或者ES中,根据数据需求场景不同而定。
(3)实时查询
针对业务频繁查询的场景,并且数据量大的数据计算完成后可以存储到ES,针对统计分析类同时数据量较大可以使用Presto来查询。