数据处理服务方案

2024-08-17 版权声明 我要投稿

数据处理服务方案(通用9篇)

数据处理服务方案 篇1

浪擎官网:http:///

1.概述

陕西西安市中医医院是一所中医特色浓厚临床科室齐全、医学人才汇聚集医教研为一体的三级甲等医院、国家示范中医医院、陕西省中医学院西安附属医院、省市医保定点医院。

医院注重中医药特色的学科和专科建设,以名医、名科带动医院整体发展。脑病科、肛肠科为国家级重点中医专科建设单位;肝病科、消化科为省级重点专科;肾病科为省级重点中医专科建设单位;心内科、肾病科为市级中医特色优势专科。医院还设有内分泌科、呼吸科、老年病科、肿瘤科、小儿科、普外科、脊柱外科、骨伤科、皮肤科、妇科、耳鼻喉科、眼科、口腔科、针推按摩康复保健科等临床科室40余个。开展中医诊疗技术项目达110余种,具有中医特色的治疗技术40余项,开设和健全中医专病门诊36个,中医、中西医结合特色突出,疗效显著。

2.建设目标

1)业务系统服务器实时备份到备用服务器。

2)容灾系统对生产机(主服务器)不能有任何性能影响。必须保证该系统的正常运行。

3)为降低容灾成本,提高资源利用率主备服务器硬件规格或配置无需相同。

4)强调持久化服务能力,业务系统运行不允许中断。

5)强调数据的准确性,业务系统不允许丢失数据或出错。

6)需要可靠的容灾方案,保证数据的安全及提供快速的恢复能力。

3.选用部件

针对于上述需求说明,选用以下规格的部件:

•浪擎•镜像系统Oracle客户端代理

•浪擎•镜像系统Oracle服务器端

•浪擎•镜像系统WEB管理平台

4.应用说明

采用浪擎•镜像系统的镜像服务器、Oracle 10g镜像代理、镜像任务监控软件解决上述需求。浪擎•镜像系统的镜像代理支持自动检测文件或数据库的增量变化,无需以扫描文件系统或数据库方式来判断变化,并且支持高效的增量传输算法,从而支持重负荷条件下的秒级别实时镜像频率,对原来系统的性能影响极少。镜像系统由镜像代理(客户端)、镜像服务器(服务器端)以及管理端组成。

在HIS双机的两台Oracle10g数据库服务器上均安装Oracle10g镜像代理,在备用服务器上安装镜像服务器端。设置Oracle10g镜像代理的检测路径为主存储路径,镜像服务器设置路径为备用存储路径。实现了实时的复制。

5.方案特色

1)备用端可查询

由于备用数据库处于打开运行状态,不同于冷容灾模式下容灾站点的数据库系统在进行数据复制是不可用的情况,因此备用数据库可以通过为其它系统提供数据查询或共享服务。

2)高性价比

对主备系统硬件一致性无要求,目标端无需购置昂贵的存储设备或光纤通信设备等,极大的降低系统投入成本,充分保护现有设备投资。

3)方便灵活

由于采用逻辑数据复制原理,镜像系统可采用一对

一、多对一复制方式,应用方式非常灵活,并且大大减少投入成本。

4)高效率、低负载

数据复制引擎效率很高,同时保证了复制数据的精确性。在源数据库端,数据复制引擎严格地遵守读一致性模式。

5)基于Web的任务监控和配置管理

提供B/S图形化管理界面,复制任务状态和设置均可通过浏览器操作完成。

6)全方位的复制包含各种数据类型

系统支持数据库所有的数据类型、DML和DDL复制。在复制时,系统可选择性地在用户级、对象级、命令级排除(exclude)不需要复制的内容。

7)灾难恢复

系统可以容忍实例失败、系统失败和网络失败。

8)可选择性复制

数据处理服务方案 篇2

泰克2014年春季创新论坛上所透露出来的信息表明, 测试工程师的兴趣点不仅仅在标准介绍, 而是要了解技术演进的路线, 要求得到整体测试解决方案的支持与参考。

泰克科技 (中国) 有限公司亚太区技术营销经理沈乃叡表示, 泰克公司的仪器现在并不是一味地追求性能指标, 而是更关注客户的综合需求, 加之吉时利公司的系列源表, 以整体测试解决方案为目标实现利益的最大化。

的确, 本次春季论坛北京站演讲者的主题全部从某一领域的解决方案出发, 分别涵盖了数据中心外部互联接口测试综合解决方案、数据中心的最新高速工业总线测试及SI仿真技术、突破2GHz带宽的超宽带测试系统、精确高效的电源测试方案等等。

数据处理服务方案 篇3

随着终端设备的普及、电信基础设施的改善和网上银行的发展,互联网开始在各行业得到深入应用,并促进了行业需求的提升。越来越多的商务交易开始通过互联网信息系统来实现,也导致了信息系统承担的风险越来越大。一旦电子商务的处理信息系统发生故障,导致用户数据丢失或者服务中断,不仅造成客户流失,还会带来巨大的经济损失和消极的社会影响。近年来,各企业CTO也逐渐意识到确保其关键业务连续进行的重要性。

万国数据此次展示的“高可用IT服务解决方案”,涵盖了高可用托管服务、高可用灾难备份服务以及高可用云服务,力图实现对信息的灾难备份建设和业务连续性管理。“新一代的世界级数据中心,应该具备一站式服务以及产业链整合能力,才能持续为用户提供专业高效、安全稳定的IT外包服务和解决方案。”万国数据创始人兼CEO黄伟表示,希望在此次大会上让企业主们亲身感受可用的一站式IT服务。

数据处理服务方案 篇4

(征求意见稿)

为促进互联网健康发展,营造健康有序的市场环境,规范IDC、ISP业务市场秩序,依据《中华人民共和国电信条例》、《电信业务经营许可管理办法》等相关规定制定本方案。

一、法律依据和实施目的

本方案依据《中华人民共和国行政许可法》(中华人民共和国主席令第七号)、《中华人民共和国电信条例》(国务院令第291号)、《电信业务经营许可管理办法》(工业和信息化部令第5号)等法律法规和相关通信行业标准制定。

本方案制定的目的是完善IDC、ISP两项业务的市场准入机制,加强IDC、ISP市场监督管理,强化网络信息安全管理,促进我国互联网市场健康发展。

二、基本原则

(一)鼓励健康发展,促进有效竞争。促进公平竞争,鼓励符合条件的企业,特别是民营企业进入IDC、ISP领域。营造健康有序的市场环境,推动我国IDC、ISP市场从资源出租向服务精细化、差异化发展。

(二)审批公平公正,信息依法公开。依法公开许可对象、范围、条件和申请方式,确保审查公平、审批程序合法、结果公 正。

(三)强化安全监管,确保网络安全。通过必要有效的行政管理和技术手段,对IDC、ISP企业网络信息安全保障情况依法实施监督管理,维护互联网网络信息安全。

三、IDC、ISP业务许可申请

(一)申请条件

申请IDC、ISP业务的企业,应按照《中华人民共和国电信条例》第十三条、《电信业务经营许可管理办法》第六条、第八条的规定,向我部或各省、自治区、直辖市通信管理局提交相关申请材料。其中2个条件细化明确如下:

1.“有与从事经营活动相适应的资金和专业人员” 申请IDC、ISP业务的企业,注册资本应符合有关规定。申请IDC、ISP业务的企业,需建立网络和信息安全专人专岗制度,配备与本企业接入网站数量相匹配的网络和信息安全管理人员。企业要明确2名应急联系人,负责7*24小时应急联系处置工作,每接入1万网站至少配备两名专职网络和信息安全工作人员,并根据需要配备必要的技术、管理、客户服务等工作人员。建立相应的客户服务部门,设立专职投诉处理人员,配置用户投诉处理公开服务热线。

2.“有必要的场地、设施及技术方案”

(1)申请经营IDC业务的企业,应利用自有或租用的机房和场地,以外包出租的方式为用户的服务器等互联网相关设备提 供放置、代理维护、系统配置及管理服务,以及提供数据库系统或服务器等设备的出租以及存储空间的出租、通信线路和出口带宽的代理租用和其它应用服务。机房要满足《通信机楼消防安全监督管理办法》(工信部电管〔2010〕543号)和《通信网络供电系统运行安全监督管理办法》(工信部电管〔2010〕563号)的相关规定;所使用的交换和路由设备应取得电信设备进网许可证。

IDC机房包括UPS、发电设备、冷却系统、机柜等设备。IDC机房和场地的证明材料包括:房产证或者租用合同、机房设计文档、监理报告、机房施工文档等。

(2)申请IDC、ISP业务的企业,应建设独立并具有以下功能的IDC、ISP企业资源和业务管理系统

——建设企业端互联网网站备案管理系统,记录并及时变更所接入网站的主体信息、联系方式和接入信息等,并实现与部、省网站备案管理系统的连接。

——建设企业接入资源管理平台,记录接入资源的分配、使用、出租、转让等信息,对接入资源异常使用实行日常发现、分析和处置,并实现与部电信业务市场综合管理系统的连接。

----提供虚拟主机(存储空间出租等)的IDC企业要建立相应的制度,对在本企业进行主机托管并提供虚拟主机服务的客户信息进行审核和登记,并报电信主管部门。

(3)提供域名注册服务的IDC、ISP企业,应按照《中国互 联网域名管理办法》(信息产业部令第30号)的规定,向电信主管部门申请获得互联网域名注册服务机构资质,并严格落实域名实名注册要求,规范域名注册服务行为。

(4)申请经营IDC、ISP的企业,应满足以下安全管理要求,并建设相应的网络和信息安全管理系统:

——网络安全管理要求。按照《通信网络安全防护管理办法》(工业和信息化部令第11号)、《互联网网络安全信息通报实施办法》(工信部保[2009]156号)、《木马和僵尸网络监测与处置机制》(工信部保[2009]157号)、《移动互联网恶意程序监测与处置机制》(工信部保[2011]545号)的要求,落实通信网络安全防护系列标准,制订并完善网络安全应急预案,开展应急演练,接受主管部门对各项网络安全工作落实情况的监督检查。

——信息安全管理要求。按照《中华人民共和国电信条例》和《互联网信息服务管理办法》的要求,建立违法网站和违法信息的巡查与处置、用户信息安全管理、信息安全评估等管理制度。按照《互联网数据中心和互联网接入服务信息安全管理系统技术要求》和《互联网数据中心和互联网接入服务信息安全管理系统接口规范》等标准要求,建设IDC、ISP信息安全技术管理手段,具备基础数据管理、访问日志管理、违法违规网站及违法信息发现处置等技术能力。

(二)审查流程和要求

1.申请者须按《中华人民共和国电信条例》第十三条、《电 信业务经营许可管理办法》第八条规定提交申请材料,并使用电信业务综合管理系统(网址为tsm.miit.gov.cn)在线提交申请材料。

2.电信主管部门将严格按照《中华人民共和国电信条例》、《电信业务经营许可管理办法》规定的审批时限和程序,依法审批发放IDC、ISP《增值电信业务经营许可证》。

数据处理专业技术服务合同书 篇5

为**分行

提供数据处理专业技术服务合同书

合同号:

甲方:**分行

乙方:**银行股份有限公司

*年*月

专业技术服务合同

甲方:**分行(包括在韩国所有分支机构)地址: 电话: 传真: 联系人:

乙方:**银行股份有限公司 数据中心地址: 电话: 传真: 联系人:

甲乙双方经充分协商确认合同,同意按照以下条款签定本合同并执行本合同。

一、合同标的

1.1乙方同意向甲方提供、甲方同意接受乙方提供本合同项下所列的专业技术服务(以下简称专业服务)。

1.2 一方未获另一方事先书面许可,不得将本合同所述的权利、义务及/或责任转让予第三方。

1.3 乙方需将本合同项下的专业技术服务项目分包其他方提供时,应在本合同规定的项目启动前30个工作日,专业技术服务合同

以书面形式通知甲方,甲方同意后双方签署合同变更书,方可生效。否则,甲方有权视分包商提供的服务为无效服务。

1.4 《专业技术服务说明书》应确定乙方提供的专业技术服务项目、专业技术范围、服务实施前提、工作项目、乙方及甲方责任、服务水准、专业技术服务完成标志以及提供专业技术服务的时间。

1.5 《专业技术服务说明书》服务项目中每一项服务完成时,双方将依照双方共同约定的验收方式和标准进行验收后,签署《验收备忘录》。

二、定义

“专业服务”指《专业技术服务说明书》,乙方向甲方提供的服务项目管理、工程、计划、咨询、教育、培训、安装及维护、场地准备、设备管理或操作支持等服务。

“服务水平” 指《专业技术服务说明书》所列乙方须提供的服务水平。

“项目” 指与《专业技术服务说明书》相关的活动。“获授权人员” 由乙方指派提供专业服务的人员。“数据”由甲方提供给乙方并与甲方客户相关的所有数据,以下所列均是数据的一部分:1.存储或者以其它方式固定于有形媒体、电子媒体或其他媒体上并且可提取为

专业技术服务合同

三、专业技术服务内容、服务期限

3.1 专业技术服务内容的具体细节见《专业技术服务说明书》。

3.2 专业技术服务期限:本合同持续有效到任何一方向另一方提前六个月发出书面通知予以终止。

四、服务变更

4.1 任何一方均可以要求对《专业技术服务说明书》下的服务进行更改。任一更改申请须以书面形式提交。

4.2 根据更改要求的范围和复杂程度,甲乙双方可对实现变更要求所发生的费用进行磋商。

4.3 就上述第4.1条,双方达成一致,并签署变更备忘录后,变更生效。变更将修改或替取《专业技术服务说明书》中或先前的任何变更备忘录中所有不一致的条款。

4.4 提出变更请求的一方应提交书面申请,描述变更、变更的理由和变更将产生的影响,并提交另一方讨论,接收方须于接到申请后三周内向建议方知会其决定。

4.5 如双方对该申请达成一致同意意见,双方授权代表将签署相应的《变更备忘录》。经双方授权代表签字盖章后的变更备忘录将作为本合同的有效附件和执行变更的依据。变更将修改或替取《专业技术服务说明书》中或先前的任何变更备忘录中所有不一致的条款。

专业技术服务合同

国金融管理机构推荐的现场安全审计以及韩国金融监管要求的信息系统维护的建议。

6.1.4 根据本合同条款以及所有合法的由乙方发布的指令,乙方须事先彻底地咨询甲方后负责谨慎地以最正确和最有效的方式提供专业服务,同时乙方对安全性有关规定、手册、获授权人员和委员会组织等应及时维护并升级,同时向甲方通知。

6.1.5 乙方在系统投产后6个月以内应进行安全性及系统缺点分析,向甲方提出分析报告。6.1.6隔离和区分: 乙方须确保:

(a)对数据进行清晰的隔离及/或区分,以确保乙方的任何其他客户或无权限人员不能够浏览、更改和访问数据。

(b)在乙方可运用的范围内必须对专业技术服务分工处理,只有获授权人员并且在必要情况下才能访问数据。(c)必须有充分的阻止非获授权人员进入的物理控制程序。必须有必要的数据加密措施、逻辑控制和监控程序以确保甲方数据所在网络、系统及对甲方数据的计算机操作正确地与乙方的其他客户隔离及区分。

(d)乙方须检测隔离及区分标准之有效性。乙方须在甲方对隔离及区分进行检测和审计时提供协助。

(e)所有正确数据及文件的管理程序须制定于乙方的操

专业技术服务合同

以及设备检查结果的第三方独立报告,报告范围指的是双方服务协议涉及的全部设备和费用(即包括购买设备的费用和维护设备所需要的费用,如果这部分费用需要分行承担的话)。

6.1.15乙方必须根据所提供的服务,提供合格的、有竞争力的人才来负责专业服务,以保证甲方业务的正常运行。且乙方必须制定人力资源培训计划,乙方制定的计划应该包括培训数量、培训类型、培训费用等方面。

6.1.16乙方应将本合同项下使用和操作的知识传授给甲方,以便甲方IT部门的人员懂得如何运用,特别是乙方提供的应用系统的处理流程和数据库结构。

6.2 甲方义务

6.2.1 为了乙方能够及时并按时完成本合同规定的责任,甲方须与乙方合作并为乙方提供其合理要求的资料和协助。

6.2.2 甲方必须让乙方注意到依据韩国相关法律乙方必须履行的对外保密责任。

6.2.3 甲方应乙方要求的技术配合,应认真负责。甲方技术部门应认真执行值班制度,在规定时间有响应。

6.2.4 甲方对乙方提出的版本升级、新业务投产等提供相关测试环境和配合。

6.2.5 甲方需采用防火墙、IP加密机、数据备份等技术,910

专业技术服务合同

予以保密,不得将数据作为履行其在本协议项下责任以外之任何其他用途(中国/韩国法律法规及监管要求另有规定的除外)。

9.8 若事先未经甲方书面同意,除获授权人员外,除非在本合同考虑及目的而言属必要或属于中国法律及/或韩国法律规定要求以外,乙方不得向任何人员透露数据(无论是全部还是部分)。

9.9终止:本协议终止后,乙方关于数据保密性的责任仍然具有全面效力。

十、保密

10.1 任一方将视另一方业务相关的所有信息为商业秘密,并有义务予以保密,不将在本合同谈判时或合同期间所获知的任何信息泄露给任何第三方(中国/韩国法律法规及监管要求另有规定的除外)。此条款的条文将本合同期满或终止后继续生效,但不适用于任何已在公众知悉范围的资料。

10.2 本合同属双方商业秘密,未经一方书面同意,另一方不得向第三方披露。

十一、违约责任和赔偿

专业技术服务合同

11.1 对于乙方在执行合同中给甲方造成的直接损失,损失由过错方承担。对于利润上的损失、本可节省或避免的损失、附带损失或其他经济上的间接损失,以及因甲方没有履行本合同项下义务而发生的任何损失,乙方不承担责任。

十二、终止

12.1 如一方提出终止合同,该方可在任何时间向另一方提前六个月发出书面通知予以终止。

12.2如果任何一方不能履行本合同中的责任和义务,则另一方可在知悉该重大违反事项后5个工作日内向违约方发出书面补救通知,要求违约方尽快就该重大违反事项作出补救措施。如在收到书面补救通知14日内,违约方未能补救该重大违反事项,则另一方可向违约方发出书面终止通知,于该终止通知指定之日期全部或部分终止本合同。12.3 在本合同期间,如接到韩国金融管理机构的书面要求,甲方可向乙方即刻发出书面通知终止本合同。如中国金融监管机关要求的,乙方可向甲方即刻发出书面通知终止本合同。12.4 对于在服务的所有工作终止之前乙方所提供的专业服务,甲方有责任支付费用。

十三、协助移交服务

314

专业技术服务合同

16.5 双方同意遵守韩国、中国以及此项业务所涉及的其它国家或地区的所有有关法律和条例。

16.6 本合同一式四份,双方各执二份,经双方授权代表签字并加盖公章后生效。

专业技术服务合同

甲方:**分行 盖章:

授权代表签字:

日期:

数据处理服务方案 篇6

南苑街道服务中、高考志愿服务活动方案

为庆祝建党90周年,街道团工委拟于高考期间举办“借青奥精神东风,展现南苑风采——南苑街道服务高考志愿服务活动”为主题的志愿者服务,具体方案如下:

一、指导思想:进一步开展创先争优活动,宣传“奉献、友爱、互助、进步”的志愿精神,激发辖区内广大青少年及市民参与志愿服务的积极性、主动性,更好地服务社会、服务市民、为建设经济社会和谐发展的小康社会做贡献、挖掘青奥志愿者。

二、组织领导:

本次志愿服务活动设置领导小组一个:

组长:施月华(街道工委副书记)

副组长:焦瑞(街道团委负责人)、丁丽娜(话园社区)、伍燕(庐山社区)志愿者:社工以及志愿居民。

三、活动时间:

2011年6月7日—9日高考期间。

2011年6月17日—19日

四、地点:

高考:建邺高级中学,话园社区广场正对面。

中考:金陵河西中学对面,庐山社区旁。

五、志愿者人员组织:以社区社工和志愿居民为主,每天由3个社区社区分别抽调1名志愿者协助。

六、服务内容:本次活动主要围绕志愿精神宣传和便民利民服

务为主要内容开展活动,具体安排如下:

1、休息区提供扇子、大型遮阳伞及饮水。(遮阳伞由麦当劳应天西路店提供)

2、避暑医疗点,请医生现场为中暑的家长、学生服务。

3、免费充电区。提供电瓶车免费充电服务。

4、志愿服务宣传、志愿者服务登记点。

七、宣传:由党群科联系记者进行报道。

附:2011年江苏高考时间表地点:建邺高中

数据处理服务方案 篇7

计量泵作为流体精密计量与投料的理想设备,广泛应用于石油化工、水处理、原料配送、肥料灌溉等行业[1]。目前国内外对计量泵的研究主要集中于两个方面:(1)从工艺结构和运行机理上进行分析和改良设计[2,3];(2)针对不同的应用场合,利用单片机、ARM、FPGA等微处理器设计嵌入式控制器,来实现对计量泵的流量控制[4,5]。而对于单泵,对多泵、泵群远程监控和协调调度的研究还比较少。

在实际工业应用中,往往由多台计量泵构成泵组,共同完成一定的生产任务。泵组间的通信、协调、调度和控制,均需要网络化技术才能实现。很多化工企业和水处理现场存在强碱、强酸和有毒气体,不便于人工操作,故采用网络化监控技术是非常必要的。

文献[6]提出了一种以太网-CAN总线的计量泵远程监控方案,具有一定的参考意义。但该研究着眼于协议转换器的实现,并未深入探讨网络监控方案,也没有将数据网和控制网隔离,可能会造成网络时延。

笔者结合计量泵组的工作特性,对文献[6]中的计量泵网络化监控方案作进一步的展开分析,使之满足大规模计量泵群及其辅助设备的远程监控需求。根据流体工业数据的特点,本研究采用Java语言设计一个专用数据服务器,实现监控系统对数据进行分析、组织、转发、存储等功能;为解决网络传输中数据量大导致的系统性能下降问题,笔者结合对象池技术和环形缓存机制,给出一种基于环形存储的对象池技术的实现方式。

1 远程监控系统方案

现场总线作为最受欢迎的工业控制网络之一,具有全数字化、实时性好、稳定性高等特点,而以太网技术的引入,使得远程监控成为可能。

针对大规模计量泵群的以太网/CAN总线远程监控系统方案设计需要考虑如下几个方面:

(1)通信是系统最基本也是最重要的功能需求。现场设备(如计量泵、传感器、开关设备等)通常采用数字化的现场总线网络互连,以提高数据传输的可靠性和实时性;考虑到计量泵往往工作于高空、矿井或易燃易爆等危险区域,工作人员需要进行远距离操作,因此监控设备(上位机PC)应使用以太网完成通信。目前学术上已有许多协议转换器的研究。

(2)简单地将以太网和现场总线相联是不明智的。因为现场数据往往具有短帧、量大等特点,而以太网通信依赖于TCP协议,数据的传输须先建立可靠的连接。大规模的现场数据可能会导致连接丢失、网络时延和网络冲突。因此,一方面在硬件上应该将控制网和数据网隔离开来;同时在分析数据特性的基础上,需要有一套适用于不同平台的通信模型,以满足以太网和总线网的完美对接。

(3)操作人员具有查看设备、分析数据、发送控制指令、打印历史报表等需求。远程监控软件可能会根据不同要求运行控制算法和协调现场设备工作。这些都有赖于一个公用数据库来实现即时和历史数据分析、存储、查询、组织等功能。

基于上述分析,一个基于CAN-Ethernet的远程监控系统框架如图1所示。

该系统主要有以下几个部分:

(1)连接网络。包括连接监控计算机的上位机以太网,若干个现场总线网和连接各总线网的下位机以太网。不同的网络之间通过中继设备互连。

(2)中继设备。协议转换器用于连接总线网和下位机以太网,完成TCP/IP和CAN的协议转换;数据服务器连接下位机和上位机以太网,提供数据过滤、分析、转发、查询、存储等功能。

(3)节点和终端。监控计算机定期从数据服务器中拉取数据,并显示设备运行情况;各CAN节点也将实时接收到经过数据服务器解析过的控制命令。

该方案实现了控制网和数据网的分离,并通过协议转换器和数据服务器来实现不同网络之间的通信连接和数据维护功能,减小了发生网络时延和网络冲突的可能性,成功地将以太网和现场总线技术相结合,使大规模计量泵群的远程监控成为可能。

2 数据服务器的设计

2.1 服务器组成

数据服务器不仅是上位机与下位机的通信交换中介,亦是所有实时数据和历史数据存储、分析、转发的地方。为了使软件的可移植性更强,它采用了Java语言编写。数据服务器主要包括以下部分:TCPServer、MessageFactory、ControlCenter。

2.2 TCPServer和通信实现

TCP服务器端的工作是建立一个通信终端,并被动等待客户端的连接。本研究采用Java net包中的ServerSocket和Socket来实现有阻塞的TCP服务端,并引入多线程机制来解决Socket的阻塞问题。

主线程启动若干个子线程:线程SocketSend从发送池中提取发送报文并转发;线程SocketSelect用来监听端口,调用accept方法来建立套接字,并针对每个套接字启动线程SocketReceive和若干个GetMessage;线程SocketReceive将接收到的报文写入一个buffer中;线程GetMessage从buffer中提取数据并推入接收池。各个子线程的程序流程如图2所示。

实际应用中的TCP协议不会在接收到数据后立即对其进行确认,通常为了减少网络拥塞而采用了延时确认的机制,使得TCP协议无法满足实时性要求较高的场合。因此TCPServer中调用Socket实例的setTcpNoDelay方法关闭了延时确认。

2.3 数据分析交换

数据的分析和交换主要依赖于MessageFactory和ControlCenter。MessageFactory用于报文的提取、阅读、验证等;ControlCenter维护用户列表和负责维护多个发送和接收队列,控制信息发送格式和流向,并为高级功能应用(数据库、数据表等)提供一些可用接口。

报文按格式分为4种:COMMAND、REQUEST、RESPONSE、COMMON。COMMAND用于发送控制命令,具有最高发送优先级和即到即传特性;REQUEST用于建立连接和获取数据等;RESPONSE是针对RE-QUEST的响应;COMMON用于发送一般性数据,如传感器值等,优先级最低。

与TcpServer相同,ControlCenter也采用了线程池的方法。主线程循环启动各个子线程。每个时刻都有多个不同类和同类的线程同时在运行(可能有上百个)。有以下几种子线程:

(1)ProcessReceive,从多个TcpServer的接收池中得到报文,辨别报文格式,提取其中信息,处理后放入相应的发送接收队列(对象池)。

(2)ProcessResponse,从相应队列中提取RE-SPONSE处理后放入TCPServer发送池等待发送。

(3)ProcessCommand,提取COMMAND并发送。

(4)ProcessRequest,处理请求信息,包括请求连接、请求实时数据、请求历史数据、请求断开等,生成RESPONSE并放入相应队列。

此外,ControlCenter还负责数据的存储和管理。

2.4 基于环形存储的对象池技术

以太网在通信过程中将产生大量的原始数据、解析封装后的中间数据以及处理后的最终数据;直至被持久化或发送出去之前,这些数据都将暂留在内存内。每个数据封装在各自的Java对象里。这将占用大量的资源空间,而且频繁地创建/删除对象也会大大降低系统的运行效率。为解决这个问题,笔者结合对象池技术[7,8]和嵌入式系统中常用的环形缓冲机制,提出一种基于环形存储的对象池技术。

环形缓冲机制的缓冲区通常有一个读指针和一个写指针。本研究通过移动指针来指向不同的内存地址,并对该地址进行数据读/写操作。因此,环形对象池的设计模型如图3所示。

图3中ProduceIndex为产生索引,指向下一个可写对象,ConsumeIndex为消耗索引,指向下一个可读对象。数据按同一个方向写入和读取。环形对象池设计结合了单例模式和工厂模式,它的UML类图基本如图4所示。

与普通对象池不同,用于提取可用对象的方法有两个:getCosumeObject()和getProduceObject()。它们的基本流程都是先判断当前对象池是否有可读/可写对象,如果是则返回,否则线程进入睡眠模式直至被唤醒为止。每次操作都将更新对象池状态。为了保证线程安全,以上方法都加上了同步(sychronized)关键字。

数据服务器中使用了环形对象池来实现多个不同的队列,包括接收池和发送池、COMMAND池、RE-QUEST池等。对象池技术明显提升了系统性能。

3 性能测试

数据服务器除了在功能上要满足各类报文分类查询转发等需求外,在性能上还要达到实时性和稳定性要求。考虑到各种数据中只有控制命令和报警输出才具有即收即发的要求,大多数数据允许有一定延迟。因此本研究设计测试流程如下:

在计算机A上启动数据服务器程序;在计算机B上使用现有的TCP软件模拟建立若干个客户端,连接服务器并发送不同格式的报文;在计算机C上模拟建立一个下位机端和一个上位机端,上位机端发送若干条控制报文并被上位机接收,并通过抓包软件查看报文并计算出报文平均延迟时间。通过改变负载条件可得到更多的测试结果。

负载条件包括两方面:(1)CAN网络数的数量,一个CAN总线网络的节点上限取决于电气驱动能力,一般只有数十台到上百台;(2)总发送速率,指的是数据总量大小。CAN网络的速率大约在5 Kbps~1 Mbps之间,相对于以太网来说还是较低的。

在不同的负载条件下,数据延迟及所占系统资源情况如表1所示。测试环境如下:服务器CPU为AMD4200+双核2.2 GHz,内存2 G;抓包软件使用目前十分流行的WireShark1.5。表1中:Nets表示模拟的的CAN网络数,SPEED表示数据发送总速度,Data Delay表示当前负载下一条控制报文的数据延迟。CPU和Memory表示稳态下服务器所占系统资源。

从表1中可知,在低负载条件(500 KB/s以下)的数据延迟是十几微秒以内,在流程工业中可以忽略;在负载条件在1 MB/s左右时数据延迟达到0.2 s,已到了数据服务器在实时性方面的瓶颈;当数据总量超过2.5 MB/s时,数据服务器无法正常工作:测试过程中发现内存占用快速上升,最后因内存耗尽而崩溃。其他条件下系统最后总能趋于稳定。可以认定,至少在模拟有20个CAN子网、总数据速度在1 MB/s以下的环境中,数据服务器能够保证实时性和稳定性需求。

4 结束语

针对实际工业中计量泵通常需要以泵群泵组方式工作的状况,以及目前国内外相关研究的欠缺,本研究详尽地分析了对大规模计量泵群监控的各方面,对文献中所提到的网络监控方案进行了改进和应用。

基于改进的计量泵群远程监控系统方案的需求,笔者使用Java语言开发了一个专用数据服务器,以满足监控系统对数据分析、交换、维护等需求。考虑到网络通信中数据量多大长度短的特点,本研究提出基于环形缓存的对象池技术。模拟测试结果证明服务器能够保证数据的实时性和可靠性。

参考文献

[1]陈雨田,黄晓斌,陈震,等.计量泵、磁力泵、高速泵和增压泵的应用介绍与市场发展[J].化工设备与管道,2006,43(6):35-38.

[2]李团结.行程可调计量泵的性能与结构参数间的关系[J].西安电子科技大学学报,2004,31(1):44-46.

[3]华锁宝,潘政广.计量泵振动机理分析和减振措施[J].流体机械,2010,38(2):45-48.

[4]WANG Guang-wei,WANG Li-fang.Research on FPGA con-trol-led metering pump flow system[C]//E-Product E-Ser-vice and E-Entertainment(ICEEE),2010 InternationalConference.Wuhan:[s.n.],2010:1-3.

[5]佟金颖,罗琦,黄圣杰.基于dsPIC的感应电动机调速系统控制器设计[J].微电机,2009,42(4):50-51.

[6]倪孟科,余世明,施金培.Ethernet-CAN总线协议转换器在计量泵远程控制中的应用[J].机电工程,2010,27(2):50-53.

[7]刁冬坡,陈平,张立勇,等.基于Java的对象池技术的设计和实现[J].计算机应用与软件,2006,23(2):66-68.

数据处理服务方案 篇8

关键词:科学数据 大数据 信息分析 信息服务 图书馆

中图分类号: G250 文献标识码: A 文章编号: 1003-6938(2013)04-0093-03

随着信息社会的发展,产生于科学实验、科学研究过程之中以及日常信息行为、社交网络、移动终端的数据海量增加,由于数据产生来源、存储媒介的不同,使得数据的类型、存在形态和结构都丰富多样,随着隐藏在这些数据背后的巨大价值被发现和利用,数据的科学价值逐渐被人们重视,致使科学研究工作向着数据密集型研究转变,科研人员必须对大量的科学数据进行收集、分析、管理、保存和共享。作为社会信息、文献的收藏、利用、加工、服务机构的图书馆,在科学研究进入到以数据为基础,以数据密集为主要研究范式特征的大数据时代,科学数据服务值得关注和研究,也必将是未来图书馆服务的主要组成部分。

1 科学数据与图书馆科学数据服务

信息社会的发展,使得科研环境也向信息化、网络化与数字化方向发展,在重构的科研环境下,各种实验及设备、计算机及仪器产生的原生科学数据指数增加,其中包含着大量未被重视和处理或只出版公布了最终实验结果而对实验过程数据没有记录的数据,而事实上这些数据也有着大量的科学研究价值,因此,科学数据作为一个传统的概念,随着数据科学的兴起以及在数字化科研背景下第四科学研究范式的形成[1],受到了越来越多科研人员的重视,其含义、组成及存在形态也都在发生着变化,如从科学数据来源来看,其既包括科研、实验过程中的实验数据、计算机中的存贮数据等数字化数据,如实验记录数据等,也包括原始的非数字形式数据,如神经图像等[2];从数据组成类型与格式来看,其既包括传统的结构化数据,如数值型数据、多媒体数据,也包括大数据时代的非结构化数据、半结构化数据,如文本数据、HTML数据、社交数据等。

实现对需要进一步研究方可发现其蕴含价值和内容的科学数据的存储、共享、利用与服务随着科学数据大规模的产生而显得愈发紧迫和必要,因为科学研究已不再是独立的观察某一实验或领域的数据,学科间交叉合作研究和学科内继续研究成为了科研发展趋势,在这种大环境下,科学数据成为科研机构、科研人员学术交流的基本单元。作为社会知识服务机构的图书馆特别是为用户提供科研、教学支撑的高校图书馆向用户提供科學数据服务,能有效保护数据免于丢失、提高数据曝光度,传播和出版成果、实现数据共享、对科学质疑公开、鼓励观点多样性、节约科研成本、完成研究资助方的要求等。

2 美国图书馆的科学数据服务与实践

2012年6月,美国大学与研究图书馆协会出版了《学术图书馆与科学数据服务》白皮书报告[3],该报告调查了美国和加拿大的大学与研究图书馆协会的351所成员馆的科学数据服务情况,结果显示尽管目前只有少数的美国、加拿大的大学与研究图书馆协会成员馆开展科学数据服务,但也显示许多高校图书馆准备在未来一到两年内开展科学数据服务。现有的科学数据服务以情报咨询类服务为主,如科学数据服务培训、数据管理计划、数据查找与引用等,很多高校图书馆还将科学数据服务嵌入到科研过程中,鼓励图书馆员直接参与到项目的过程之中。此外,科学数据的技术服务也是服务的主要类型之一,如提供数据标识、数据更新、技术支持等服务。但由于技术服务涉及到了科学数据的内容、存在形态、创建与更改等方面,对馆员的技术素养要求较高,因而开展此项服务的图书馆数量较少,而大多数图书馆只是计划在两年内提供此类服务。值得一提的是,在提供科学数据服务的图书馆中,尽管大多数图书馆倾向于让学科馆员(71.1%)担任数据馆员职务,但也更愿意对现有员工进行相关业务培训后重新上岗来从事此项服务,如参加课程进修、内部交流等培训方式,只有较少比例的图书馆愿意采取雇佣新员工的方式来开展此项服务。

3 图书馆未来科学数据服务的主要领域

3.1 科学数据的开发服务

作为以社会或机构信息组织、服务、加工为主要职责的图书馆,因其服务的用户在科研过程之中、所藏文献信息开发之后均能产生大量的科学数据,故而其蕴含着大量的科学数据,嵌入式服务、学科服务的深入开展及大数据时代的到来,使得图书馆的科学数据含量变得更为丰富多样,图书馆如何开发、挖掘自身的科学数据,搭建自己的科学数据开发、存储、共享、服务平台,变得尤为重要。因此,可以预见在图书馆的科学数据服务中,以科学数据的收集、整理、组织为主要服务内容的科学数据开发服务将得到图书馆的重视和开展,用以更深的揭示文献资源和隐含的数据价值。

3.2 科学数据的存储服务

大量数据的产生,使得实现便捷的存储与获取成为了图书馆和用户的一大问题,云计算的出现似乎解决了海量的存储、高速的运算问题,但云计算天性存在的不安全性和高价格并不是所有图书馆或用户都能解决的,图书馆通过自建或合建自身科学数据的管理存储库来实现科学数据的收集、共享与服务成为必然。如康奈尔大学图书馆建立的DataStaR 就是一个临时的存储库,用户可以上传数据、自主选择数据共享对象、数据出版等,同时支持小型研究团体的数据共享[4];普渡大学图书馆的D2C2 是一个分布式数据保存项目,其中e-Data作为数据管理服务的试验平台,图书馆员和各个领域的研究者合作进行数据收集[5];澳洲国立大学建立的超级计算机设备( Australian National University Supercomputing Facility,简称ANUSF) ,也提供了大量项目范围内的数据存储服务[6]。同时,从社会及图书馆事业发展的角度来看,合作与共享也是未来发展的主旋律,因此,图书馆寻求机构间或科研单位的合作存储服务也将是发展的一大趋势,如哈佛—麻省理工数据中心( Harvard-MIT Data Center,HMDC) 就是由两所学校联合建立的数据仓储中心,以供两所高校的教师存储、获取数据[7]。

3.2 科学数据的分析服务

在已经到来的大数据时代,数据的挖掘、分析与组织将是图书馆等信息服务机构的主要内容,因此可以预见,通过对科学数据的分析来达到对科学数据的增值与深度揭示将是未来图书科学数据服务的主要的内容之一,如对科学数据的关联度分析、可视化分析、聚类分析等。如哈佛大学的“Dataverse Network”项目除包括有科学数据的出版、共享外,还包括有参考、抽取和分析等内容[8]。

3.3 科学数据的发现服务

技术的发展与海量信息环境中用户需求的变化,使得图书馆的发现服务也发生着变化,目前主要以资源名称检索和链接,如数据检索、数据导航等,来揭示资源存在与实现服务。其途径也将随着数据来源、类型、存在形态等的变化而借鉴谷歌、百度、搜狐等一站式搜索引擎和Google Scholar、SCIRUS、INFOMINE等学术搜索引擎理念,实现一站式的资源发现服务将会是图书馆未来信息服务的发展方向之一。而这一服务类型主要就是科学数据服务,如科学数据的集成融汇服务等。知识发现服务系统的开发与大量应用将加速发现服务的发展,目前已开发和在图书馆大量应用的发现系统有Primo、EBSCO Discovery Service(EDS)、Encore等,OCLC也推出了自己的一站式知识资源发现与服务系统Worldcat Local,这些系统通过类似Google的简单检索框,采用统一路径以实现对图书馆各种资源的发现和获取。图书馆界特别是高校图书馆已开始引进和应用这些资源发现服务系统,如北京大学图书馆、浙江大学图书馆、西安交通大学图书馆以及北京师范大学图书馆引进了Summon系统[9-10], 清华大学图书馆、上海交通大学图书馆、中科院高能所图书馆、农科院图书馆、中国社科院图书馆引进了Primo系统[11]。

4 图书馆科学数据服务的切入途径

4.1以科学数据咨询服务为切入点,拓展服务的范围与领域

近年来,随着科学数据服务在美国等发达国家的发展,我国图书馆界也开始对科学数据服务进行了探索,如中科院国家科学图书馆提出并开展的科学数据与科技文献跨界集成服务、数据融合技术的研究和开发[12],利用数据SRU技术实现了科技文献、科学数据、字典等的服务融合[13];北京大学图书馆等还通过引入和应用信息资源发现系统,来向用户提供知识发现等服务。同时,我国学者还对图书馆特别是高校图书馆的科学数据服务进行了学术研究[14-15],提出了多种服务模式。笔者以为,我国图书馆的科学数据服务,可以借鉴美国等发达国家的科学数据服务,开展以数据引用、数据查找等内容为主的咨询服务,帮助科研人员对科学数据进行快速的查找与利用,在具有一定科学数据服务的基础上延伸到其它高端领域,如技术支持、数据关联等,最终实现对科学数据的深度分析、价值挖掘等服务,扩大图书馆在科研支撑、数据保存于传播、知识创造与应用中的作用。

4.2 设置数据馆员,重视人才的培养与素质教育

西方的部分高校图书馆把科学数据服务也称作为数据监管(data curation)服务,因而在2012年美国大学与研究图书馆协会研究规划与评估委员会的报告中将数据监管服务列为2012年学术图书馆的十大趋势之一[16]。从美国的科学数据服务来看,一方面其服务人员主要是从内部挖掘,通过图书馆员的学术内部交流、课程进修来使其达到科学数据服务的基本素养;另一方面,图书馆专门设立数据馆员岗位,通过对岗位的设置要求来促使数据馆员来提高自身的服务技能与素养。我国图书馆特别是高校图书馆应借鉴这种岗位设置模式,设计数据馆员管理制度,重视人才培养与素质教育,如数据馆员的胜任条件、进修课程等,如爱丁堡大学的数据馆员管理政策明确指出:“学校为科学数据馆员提供培训、支持、建议和适当的指导方针和指导”[17]。

参考文献

[1]钱鹏.高校科学数据管理研究[D].南京:南京大学,2012.

[2]ANU data management manual: Managing digitalresearch data at the Australian National University[EB/OL].[2012-11-29].http: / /ilp.Anu.edu.au /dm/ANU_DM_Manual_v1.03.pdf. [3]Academic Libraries and Research Data Services: Current Practices and Plans for the Future[EB/OL].[2012-11-29].http://www.acrl.ala.org/acrlinsider/archives/6297.

[4]DataStaR[EB /OL].[2012-03-15].http: / /datastar.Mannlib.Cornell.edu /.

[5]D2C2[EB /OL].[2012-03-15].http: / /d2c2.lib.purdue.edu /.

[6]ANU supercomputer facility[EB /OL].[2010-09-01].http://anusf.anu. edu.au /.

[7]Harvard-MIT Data Center[EB /OL].[2012-03-15].http: / /hmdc.harvard.edu /.

[8]An open-source application for publishing,citing and discovering research data[EB /OL].[2012-03-15].http: / /thedata.org/book/features.

[9]北京大學启用Serials Solutions Summon 发现服务[EB/OL].[2012-12-10].http://www.serialssolutions.com/news/serialssolutions-peking-university-summon-simplified.

[10]Prim 资源发现与获取系统案例[EB/OL].[2012-12-10].http://www.exlibris.com.cn/support/casestudy.Html.

[11]项英,李向军.高校图书馆资源发现服务系统应用研究[J].情报科学, 2012,(11):1682-1685.

[12]李春旺.图书馆集成融汇服务研究[J].现代图书情报技术,2009,( 12) : 1-6.

[13]李春旺,王小梅,王昉等.基于SRU 的集成服务平台设计与实现[J].现代图书情报技术,2007,( 2) :12 -15.

[14]师荣华,刘细文.基于数据生命周期的图书馆科学数据服务研究[J].图书情报工作, 2011, 55(1): 39-42.

[15]肖潇,吕俊生.E-science 环境下国外图书馆科学数据服务研究进展[J].图书情报工作, 2012, 56(17):53-59.

[16] ACRL Research Planning and Review Committee. 2012Top Ten Trends in Academic Libraries[EB/OL]. [2013-01-07].http://crln.acrl.org/content/73/6/311.full.pdf+html. [17]Research Data Management Policy [EB/OL].[2013-05-28].http://www.ed.ac.uk/schools-departments/information-services/about/policies-and-regulations/research-data-policy.

环保管家服务方案 篇9

一、全方位的环保排查和技术诊断服务

1、环评及三同时验收的符合性:通过对企业所有项目的全面排查,一方面明确企业内所有建设内容环评及三同时制度的执行情况,对未履行相应手续的项目进行梳理,向审批部门及时补交相关材料;另一方面对照既有环评及验收报告,对环评及验收报告相关要求的符合性作出综合判断,并提出整改意见;

2、产业政策符合性排查:通过对企业项目的排查,对企业内相关生产线及生产设施的产业政策符合性做出判断;

3、废水废气的达标分析:收集企业在线监测数据、自行监测数据及监督性监测数据,对企业废水、废气的达标排放情况做出判定,分析可能产生的超标原因,并提出针对性的整改意见;

4、固体废物排查:排查企业一般工业固体废物、危险废物的产生、贮存及处置环节,梳理各环节可能出现的主要问题,并提出针对性的整改方案;

5、环境风险排查:排查厂内危险化学品的使用及贮存情况,结合企业的环境风险应急预案,完善环境风险应急措施、建设环境突发事件应急体系及预案;

6、排污许可执行情况排查:按照排污许可技术规范的要求,从环境管理台账的完备性、自行监测计划的完整性、执行报告发布的及时准确性角度出发,对企业排污许可执行情况进行排查;

7、专项督查要求预查:按照国家专项督查的要求,如对排污许可证的督查、进口固体废物的督查等工作,结合以上工作要点,在企业进行预查。

二、传统的环境咨询服务

1、建设项目环境影响评价:负责建设项目环境影响评价的全过程,对企业现有工程的情况进行系统全面梳理,并对新项目的从产业政策、环保要求、经济技术可行性等方面提出针对性的评价。

2、竣工环境保护验收监测/调查报告:负责企业建设项目竣工环境保护验收监测报告的编制,在验收过程中对企业工程建设是否发生重大变更做出专业判断、识别主要污染源,按照自行验收的程序,编制竣工环境保护验收监测报告;

3、变更环评、环境影响后评价;

4、清洁生产审核、应急预案等。

三、排污许可相关服务

1、协助企业办理排污许可证申请、变更、延续等业务;

2、按照技术规范和相关行业规范,规范填报申请排污许可证相关信息和内容;

3、协助企业建立污染源监测数据记录、污染治理设施运行管理台账;

4、根据企业实际运行和环评审批情况,为企业制定废气、废水和固体废物等污染物实际污染物核算技术方案;

5、为企业制定符合规范要求的自行监测方案,并协助企业联系检测机构设置监测点位、确定监测指标及频次、现场取样和数据整理分析等工作;

6、编制排污许可证执行报告,以及半年及月报等;

7、协助企业对企业现有环境问题进行整改,以满足排污许可证现场核查要求。

四、环境会计相关业务

1、针对2018年即将开征的环保税,核算应税污染当量及应纳税总额;

2、协助企业从生产工艺技术的改进、末端治理措施的提升两方面着力,为企业设计税额减免方案,并给出技术改造及减税的方案比选分析;

五、环保相关培训

1、清洁生产及污染治理方面技术和政策文件培训;

2、环境管理相关政策和制度培训;

3、场地环境管理政策和相关土地修复技术培训;

4、固体废物管理政策和综合利用技术培训;

上一篇:商品进场协议书下一篇:图书22大类