柳州市大数据发展规划

2024-11-26 版权声明 我要投稿

柳州市大数据发展规划(共8篇)

柳州市大数据发展规划 篇1

江西华图提醒您:2018年赣州市大数据发展有限公司人员招聘2人公告已公布,报名时间为截止至2018年11月30日。欢迎关注江西华图官方微信(jxhuatu),了解更多资讯信息!

赣州市大数据发展有限公司是经赣州市人民政府批准,由赣州市国有资产投资集团有限公司独资成立的在区域内运营大数据相关产业的全资子公司,注册资本金1亿元人民币,该公司将负责推进赣州市大数据产业的整体运营,其主要经营范围是大数据产业、智慧城市、物联网、计算机云计算、云平台服务等。赣州市国有资产投资集团公司,原名为赣州市国有资产经营公司,组建于2005年8月,是赣州市人民政府批准设立的国有独资公司,隶属市国资委出资监管。集团公司注册资本金1亿元人民币,拥有全资(控股)企业19家,参股企业15家。因业务发展需要,赣州市大数据发展有限公司决定向社会公开招聘以下工作人员:

一、招聘岗位职责及任职要求:(一)副总经理1名

1、岗位职责:

(1)组织研究、拟订及修订公司(长、中、短期)战略发展规划;(2)组织开展公司战略项目执行情况评价工作;(3)统筹开展公司拟拓展业务板块的市场调研分析、可行性研究、项目评估和规划和商业谈判;(4)组织开展公司战略性参股、控股项目的前期调研分析以及后期运营状况的分析和评审工作;(5)组织开展公司相关产业研究、信息收集,分析和评估宏观经济和行业发展对公司造成的影响,发现主要发展机会与风险;(6)负责技术团队的建设,打造项目实施、运行维护团队。

2、任职要求:(1)国家211工程全日制研究生及以上学历,具有硕士及以上学位,年龄在45周岁(1973年11月1日以后出生)以内,中共党员优先;(2)十年以上计算机及互联网公司、咨询公司等大型企业战略规划、企业管理等相关工作经验,对政府行业和互联网行业非常了解;(3)具有多个大型系统集成项目管理经验,单个项目合同规模不低于5千万;(4)具备前瞻性思维、优秀的市场分析能力与市场洞察预测能力;(5)热爱并善于研究新知识,具有优秀的学习能力;(6)具有优秀的职业素养,具有强烈的事业心,团队协作意识强,工作责任心强;(7)具有项目管理中高级职称者优先。(二)技术总监1名

1、岗位职责:

(1)带领技术团队完成项目的技术论证工作,参与重大项目方案计划的评审,负责大数据项目和信息化项目过程中不同项目的资源分配与协调,组织团队攻关重点技术难题,为项目实施和运维实现提供技术保障;(2)负责技术团队日常管理工作,包括工作流程梳理、组织结构优化、岗位职责界定、技术人才配置、人才梯队建设、团队能力提升、绩效评估与团队激励等,打造高效团队;(3)优化项目流程,完善项目制度,制定项目标准,规范项目文档,为项目效率和质量负责;(4)参与公司业务规划及流程优化,与其他部门良好协作,共同推动公司发展;(5)参与公司产品规划,为新产品开发提供技术意见和技术解决方案;

2、任职要求:

(1)熟练使用Linux系统,熟悉多线程,高并发,分布式相关技术,熟悉Hadoop体系主流组件,对部分组件有深入优化改进经验;(2)国家211全日制本科及以上学历,计算机软件相关专业,5年以上项目集成经验、5年以上技术团队管理经验,年龄在40周岁(1978年11月1日以后出生)以内,中共党员优先;(3)具备优秀的团队管理能力,有管理5人及以上技术团队的成功经验,对团队管理与建设有独到见解和实践经验;(4)具有强烈的责任意识和开放的心态,良好的沟通表达能力和团队合作精神,有大局观和客户导向,能够站在公司发展角度考虑问题。

(5)具备强烈的创新变革意识,关注新技术的发展,善于学习、积极主动;(6)熟悉至少一种主流数据库。

二、薪酬待遇

其薪酬支付标准根据双方商谈结果参照市场薪酬水平实行协议薪酬,被录用人员实行试用期,一经录用,签订劳动合同,办理“五险一金”。

三、应聘方式

应聘者可携带报名材料到市国投集团公司综合办公室现场报名或将报名材料电子版发至报名,报名时间截止至2018年11月30日。报名材料包含但不限于以下:

1、报名表(请下载附件,按要求填写并贴上一寸近期彩色照片);

2、个人身份证、学历证、学位证、职称或职业资格证书、从业证明、工作业绩成果、奖励证明材料原件及复印件各一份(电子邮箱报名的应聘者在参加面试测评时须带相关证件原件备查);

3、学信网下载的本人《教育部学历证书电子注册备案表》或《中国高等教育学历认证报告》。

四、招聘程序

招聘按照报名、资格审查、笔试面试测评、综合考察、体检、录用的程序进行。资格审查将贯穿于选聘全过程,弄虚作假与体检不合格的,取消录用资格。笔试面试时间和地点另行电话通知。联系地址:赣州市红旗大道46号国经大厦602 联系人: 谢金

(附件下载http://jx.huatu.com/2018/1119/1521853.html)附件:《赣州市国投集团员工招聘报名表》.doc

赣州市大数据发展有限公司

柳州市大数据发展规划 篇2

1 邳州市城市公交发展现状

邳州市地处江苏省北部,陇海铁路与京杭运河交汇处,面积2088平方公里,人口近180万,城区人口约60万,系江苏省第二人口大县。近年来,邳州经济社会得到了持续快速的发展,城市化进程不断加快,广大市民对于公共交通的需求日益增长,市委、市政府审时度势,自2013年起全力推进城市公共交通发展,近两年来取得了初步成效。

截至目前,全市城市公交线路总数达到21条,线路总里程达到387.6公里,公交车总数达到268辆,其中新能源公交车120辆,平均日发1610班次、日运送旅客达5万人次,有效满足了广大市民的出行需求,公交智能化及场站等基础设施建设也正稳步推进。

2 邳州市城市公交发展的主要措施

随着城市化进程的不断加快,城市公交经营体制落后、配套基础设施薄弱、经营行为不规范、服务质量差等问题日益凸显。对此,邳州市委、市政府高度重视,自2013年“发展大公交、提升大服务”,开启了城市居民便捷、优质、高效出行的幸福之路。

(1)深化公交运营体制改革,实行公车公营。2013年下半年,市委、市政府提出了“发展大公交,提升大服务”的总体要求,制定了《邳州城市公交发展规划(2013-2030年)》,明确了近期、中期和远期发展目标,并投入9000万元财政资金主导实施了城市公交经营体制改革,将全市原17条城市公交线路148辆公交车,从承包经营转变为公车公营,并执行新的惠民票价,有效解决了原承包经营模式下,公交车不正班、不准点,服务态度较差,老百姓怨声载道的问题,新线路、新票价、新形象得到了广大市民的一致好评,公交公车公营这一惠民工程也得到了绝大多数经营人的理解和支持。

(2)优化线网布局,让群众出行更便利。自2013年下半年开始,结合公交经营体制改革工作的开展,将全市公交线路进行了优化调整,从根本上解决了主城区道路交通拥挤问题,实现了客流的快速高效疏通,进一步提高了公交线路网络化和通达水平,更好地方便群众出行。

(3)提升服务水平,让群众出行更满意。自2014年1月起,公交运营模式实现重大转变,所有公交线路全部转变为公车公营,实现公交车辆和驾乘人员的统一管理,对驾驶员实行星级考核管理,进一步规范经营行为,提升服务质量,更好地服务百姓出行。

(4)投放新型公交车,让群众出行更舒适。2013年底投资近3000万元购置了60辆新型智能公交车投放到公交线路运营。新型公交车均为LNG清洁能源车,具有低碳环保节能的特点,可大幅度降低尾气排放量、接近“零排放”,运行中平稳性能也明显提高,市民乘坐会更加舒适。这些新公交车全部配备了高端智能系统,有实时监控、语音播报等功能。2014年7月1日,再次购置60辆新型智能公交车投入运营,此后将每年加大投入,逐步更新现有老旧车辆,使更多的群众享受到更加舒适的出行环境。

(5)加大基础设施建设,增强公交可持续发展能力。依据城市公交发展规划,加快公交换乘枢纽、首末站、保养场、调度中心等配套基础设施建设,提升城市公交服务水平,增强公交可持续发展能力。

2013年底投资近1亿元规划建设了公交维修保养场、公交指挥调度中心、5座公交首末站。目前,工程建设正紧锣密鼓地进行中,预计2014年底前完成主体工程建设,2015年5月1日前投入正式使用。

(6)实行智能化管理,提升公交运营调度效率。目前,全市228辆公交车已全部安装智能终端及公交IC卡系统车载设备,并已完成智能化信息平台首期工程建设,通过调度机房和监控运营调度平台,能够及时了解和掌握客流量、运营班次等数据信息,可以更加合理地调配运力、调整发班密度。通过监控和运行轨迹回放,对驾驶员出勤和服务质量进行考核,为驾驶员的星级考核提供依据。

下一步还将逐步实现“掌上公交”等功能,使乘客在手机上就能够及时了解到公交车辆运营时间、距离本站台的数据以及各站的换乘路线和站点信息,并查询IC卡余额及近期消费记录等。

通过建立公交智能化管理平台,实现公交车辆运营管理的智能化,为公交运营管理及服务提供强有力的保障。

(7)落实惠民政策,让群众享受公交发展成果。通过推行公交惠民IC卡的办理及使用,针对不同人群给予适当的票价优惠,有效落实公交惠民政策,使公交发展成果能够更好地惠及广大群众。

自2014年6月6日起,我市已正式推广使用城市公交IC卡,对普通市民及社会特殊群体分别实行不同的优惠政策:70岁以上的老年人、全市持二代残疾证的残疾人、现役军人等实行免费乘车;60到69岁老人实行半价优惠;在校学生享受五折优惠;普通成人享受八折优惠。

公交IC卡的普及使用将进一步提高公交服务水平,更好地方便广大市民出行。

3 推进邳州市城市公交发展的体会

在邳州市委、市政府提出的“发展大公交、提升大服务”战略的大背景下,邳州城市公交发展取得了重要的阶段性成果,使广大群众充分享受到了公交优先发展的实惠,进一步拉近了政府与群众之间的距离。回顾实践过程,主要有以下几点体会:

(1)理念转变是关键。在新的历史条件下,邳州市委、市政府、交通运输部门能够迅速转变发展理念,加快推进公共交通事业发展的步伐,明确坚持“公交优先、城乡一体、低碳环保、便民惠民”的发展理念,推进基本公共服务均等化,将城市公交发展作为解决城市居民“行有所乘”的民生工程,高起点、高标准加以落实。同时,结合邳州财政实际情况,量力而行,制定合理的发展计划,分阶段稳步实施,集中人力、物力、财力有针对性地解决群众的实际需求,为城市公交的快速健康发展指明了方向。

(2)政策扶持是基础。推进城市公交发展离不开政府的政策引导和财政扶持。首先,要建立一个支持公交发展的长效优先发展政策。为此,邳州市出台了《关于加快推进城乡公交一体化发展的实施意见》等政策文件,将城市公交发展工作列入为民办实事工程,加大组织领导、政策扶持、协调推进的力度。将优先发展公交形成长效机制。其次,要形成一个多部门协调配合的工作原则。为加强对公交优先的组织领导,邳州市成立了由市委、市政府主要领导任组长,相关分管领导任副组长,交通、发改、国土、住建、财政等11个部门以及各镇主要负责人为成员的城市公交发展工作领导小组,统一指导、协调全市城市公交发展工作。第三,要制定一个相对固定的财政合理补贴机制。邳州市政府不断加大财政对公交发展的支持力度,制定了每年给予城市公交不低于3000万元的专项补助财政补贴政策。通过公交专项补偿补贴机制的建立和完善,为城市公交快速健康可持续发展奠定了基础。

(3)群众满意是根本。快捷、方便、经济、舒适的公交才会成为城市居民日常出行的首选方式,在城市公交发展实施过程中,更要注重以人为本。在公交线路优化、车辆投入、站亭建设等过程中,充分征集群众意见,了解群众所需,以群众的实际需求推动公交的更好发展。通过惠民票价的执行,降低公交出行成本,提升公交出行的吸引力,让群众愿意选择公交出行。

(4)监督管理是保障。建立和完善考核监管的长效机制,是促进公交服务质量全面提升和有效控制企业经营成本、政府投入落到实处的有效保障。在抓好公交运营管理充分满足群众出行的基础上,加强公交运营成本控制,提升经济效益,以保证公交的可持续发展。同时,加强服务质量考核,行业管理部门定期不定期对企业的经营行为、服务质量、管理水平等方面进行综合考评,督促企业抓好内部管理,提升运营管理水平。

大数据发展亟需破冰 篇3

“高热”之下有“冰点”

盘点当下的高热词,“大数据”是其中之一。但业内专家担忧,“高热”下掩盖着“冰点”,这些“冰点”将阻碍刚刚起步的我国大数据产业的健康成长。

阿里巴巴集团副总裁、数据委员会会长车品觉认为,目前,大数据行业最突出的问题是“只见树木,不见森林”。移动互联网、电商等是“重用”大数据的重点领域,而大部分传统企业对此却缺乏意识,甚至还不清楚如何利用数据。

同时,大数据应用的深度也远远不够。“国内的不少企业仅是利用大数据模型做营销方案,而像谷歌、亚马逊等国际知名企业,已将大数据思维全面融入公司管理。”车品觉说。

找不到数据是数据应用企业面临的普遍困扰。海尔家电产业集团营销总经理宋照伟直言,海尔希望获知用户的多维度行为习惯,但能够掌握的信息渠道仍然狭窄,信息量不够理想。

“拿走数据的多,贡献数据的少。”贵阳大数据交易所执行总裁王叁寿表示,不少企业以保护商业机密或节省数据整理成本等为理由,不愿意交易自身数据,直接导致交易所的数据量不够丰富。

以阿里巴巴旗下的“芝麻信用”为例,其评分依据的数据只来自支付宝平台,本身公信力有限,而其他企业希望能利用支付宝相关数据时,又很难获得。

同样,政府数据公开程度也非常有限。比如,银行在为客户办理信贷业务时,只能查到其在当地的工商信息,无法获知其在外地的情况。

对于个人数据隐私保护、数据权属、政府数据公开等问题,目前尚无明确的规定,因此,纠纷时有发生。

以朱烨诉百度侵权案为例,2015年,网民朱烨发现自己用百度搜索关键词后会收到相关广告推送,因此将百度以侵犯隐私权为由告上法庭。法院一审认定百度侵犯朱烨隐私权,但二审却撤销一审判决。中国政法大学传播法中心研究员朱巍表示,两级法院给出截然相反的判决,说明法律界对此类新情况认识不一致。

基础性缺陷待弥补

专家从三个方面分析了产生上述问题的原因,并认为这是我国大数据产业发展必须加快弥补的三大基础性“缺陷”。

IBM大中华区大数据与分析部数据分析产品线主管洪建勋研究发现,目前国内大量客户还停留在将80%的时间用在数据获取上,还缺乏系统化整理,更谈不上“商务智能”应用了。这和企业信息化水平较低有直接关系。

洪建勋介绍,兴于上世纪末发达国家的“商务智能”管理,即“用数据说话”,这种管理方式的普及大大提升了信息化意识和水平。

中国社会科学院信息化研究中心秘书长姜奇平表示,信息化是大数据的基础,而信息化的推进都是先从消费者开始,然后才传导到企业和政府。农业、工业、能源等行业的数据化还需假以时日。

车品觉表示,现在企业大多将大数据作为工具,导致“要数据的不知道大数据从哪里来,做数据的不知道大数据如何用,用数据的人担心真实性不敢用”。

也正是因为“大数据思维”未能达成共识,数据互惠共利的环境难以形成,推动数据共享就比较艰难。

大数据产业发展之快难以想象,但对于数据权属、个人数据隐私、政府数据公开等,目前都缺乏具有针对性的法律法规。而且,大数据作为新型资源,目前还没有明确专门的监管部门。

“企业和政府收集的数据拿来交易,这个数据究竟是谁的?比如政府收集了企业的数据,那么这些数据是企业的还是政府的?国家鼓励数据交易,但在法律方面要进一步明确,让行业发展有法律依据。”王叁寿说。

朱巍介绍,现在对个人数据的保护,大多依照2012年通过的“关于加强网络信息保护的决定”,这已远远不能适应目前行业的发展现状。

在加快发展中成长

业内人士认为,我国大数据产业在目前乃至较长一段时间或都处于“成长烦恼期”,这也是大数据产业从稚嫩走向成熟的必经阶段。因此,要在加快发展中探索成长之路。

从规模上看,2015年我国大数据市场仅有102亿元,不及一家股份制银行一年的净利润。而在国内以及境外的资本市场上,还没有出现中国的大数据行业巨头。

关于大数据应用问题,清华大学数据科学研究院执行副院长韩亦舜表示,大数据产业仍在起步阶段,随着社会信息化程度加深,数据源也将更加丰富,大数据应用范围将不断扩大。

“随着经济转型升级,势必有越来越多的企业将借助大数据实现增长。”IBM大中华区大数据与分析部大数据与分析业务技术总监刘胜利表示。

对于大数据共享的困境,业内专家指出,这在全球都是一个难题。目前,我国正探索建立大数据交易所,以交易驱动数据共享;有的行业内部已经形成企业间互换数据的惯例,如我国参与的国际间卫星数据交换交易、移动互联网公司间的数据互换等。春节期间,微信支付、支付宝、百度钱包等联手诸多商家推出促销活动,本质上也是一种数据互换、互惠共利。

另外,可以借鉴国外经验,对政府数据进行更好的挖掘、利用,如将非涉密的政府数据放在网上,供社会查阅。

中国大数据发展报告 篇4

该指数由政策环境、人才状况、网民信心等6个一级指标、11个二级指标构成。测评结果显示,全国大数据发展指数平均仅为47.15,总体仍处于起步阶段。在指数分项中,贵州的政策环境与网民信心指数分别为77.93和90.00,均居全国第一。

报告发布全国十大最具影响力的地方大数据政府机构,贵州有贵州省大数据局、贵州省发改委、贵州省经信委、贵州省信息中心、贵州省科技厅5家机构上榜,分别排名第一、第二、第四、第五、第七。此外,报告评选出最具影响力的十大大数据企业家,贵阳大数据交易所执行总裁王叁寿以新闻媒体影响力6.87、自媒体影响力7.77、综合得分7.32的成绩位居第四。

据统计,20,全国各地积极部署大数据项目,政府投资大数据项目数量整体呈攀升态势,保持较高增速。在这份榜单中,贵州表现突出,以7.74%的占比排名第三。各地都依托产业园促进大数据发展。近年来,贵州抢抓机遇,凭借高海拔、低气温、低电价等天然优势和财税政策优惠发展大数据产业,关注度排名前二十的大数据产业园中,贵州就占3个,分别是贵阳经开大数据产业园、贵阳市大数据呼叫中心产业基地、贵州(乌当)大数据智慧产业基地,与江苏、四川在数量上并列第一。此外,全国各大国家级新区积极布局大数据产业,吸引大批优质大数据项目进驻,其中,贵安新区以87.59的高关注度遥遥领先,位居第一。

用大数据来了解大数据

这份报告全面汇聚了国家发改委互联网大数据分析中心、国家信息中心、“一带一路”大数据中心所掌握的30多个种类,总计40多亿条相关数据,综合运用多种大数据分析方法,对我国大数据产业发展进行了全面分析。所以,称得上是用大数据来了解大数据。

北京、广东、上海大数据发展位居前三

报告显示,我国大数据发展总体处于起步阶段。但是从地域上看,就有意思了。

国家信息中心信息化研究部副主任、南海大数据应用研究院院长于施洋指出:“从地域分布,从各个省来说,北京排第一,这个不足为怪,东部沿海地区这些省份排在前面,大家也都能够想象。但是在西南地区,四川、重庆、贵州这三个地方异军突起,是我们大数据发展的第二个增长极。”

产业落后是地方大数据发展的突出短板

具体来看,各省份大数据发展指数的排名中,贵州、重庆、四川,紧随东部沿海省份,全部排进了前十名,领先任何一个中部省份。分析认为,这主要是地方政策引领的结果。这三个西部省市,早早都把大数据产业的发展作为重点工程来打造。对于这种“弯道超车”现象,国家行政学院教授汪玉凯建议,这些地方下一步可以重点考虑产业落地问题:“它们是首先抓住了一个概念,然后占了一个先机。但是相对能够落地的产业应用还是比较少的,这是它们的软肋。所以我认为,你们一定要注意应用,要打造你的优势。”

人才短缺问题日益突出

报告指出,数据管理环节漏洞较多,是大数据发展面临的首要问题,包括由此引发的运营成本过高、资源利用率低、应用部署过于复杂等难点。而于施洋更关注的是另一大问题。

于施洋:“我们会发现,大数据领域里数据是有了,但是能驾驭这些数据的人是极其匮乏的。比如说大数据的专业人才方面,现在分析类的人才,市场是供不应求,缺口非常大,而项目管理类的`人才,供给又远远大于需求,所以结构上还不平衡。高端的人才奇缺,这是最突出的问题。”

大数据投资热度持续攀升

报告还披露,年各地政府投资大数据项目数量整体呈攀升态势。但是,在这些政府投资项目中,超过七成都是大数据平台和基础设施建设,应用层面的软件开发不到5%,“重建设、轻应用”的问题比较明显。这也再次引发了对大数据建设过剩甚至泡沫的担忧,不过,国家信息中心主任程晓波认为,作为新事物,大数据出现这样的问题是正常的。

程晓波:“正如前后,“互联网泡沫”第一次破灭,经过短暂调整后反而催生了互联网行业新一轮理性快速健康发展,所以说,我们认为,当前大数据发展不管面临什么问题,应该是一个行业初生阶段所必经的过程,也是一个‘理性回归’的过程。”

央广短评:发展大数据 要谨防人才“眼高手低”

大数据的核心就是数据的抓取与分析,而分析环节,目前离不开人工设置变量,建立模型。所谓“差之毫厘,谬之千里”,大数据分析对人才的要求很高。但首份大数据发展报告却揭示,我国大数据人才能搞管理的不少,真正能做分析的却远远不够,这是典型的“眼高手低”,势必伤害大数据产业的长远发展。人才短板可以从教育方面着手弥补,探索新的人才培养模式。比如,将高校大数据系列课程分为理论教学和技术教学两方面,增加大数据技术实践课程,重点提高学生的动手能力等。

关键词:大数据;报告;问题;北上广

大数据告诉你:情人节的正确打开方式

五年大数据,见证“奔跑吧德州”

,德州市第十四次党代会召开以后,德州跨进了新跑道,德州市上下接好接力棒,奋发有为,使得德州市综合实力明显增强。尤其是建设协同发展示范区以来,更为德州的发展注入了强心剂,多项经济数据快速增长。

大数据勾勒山东人形象:山东人表情符使用率全国第二

2014中国大数据发展分析报告 篇5

来源:36数据|发布时间:2014-11-20|852|0

未来随着越来越多的大数据分析平台和工具的开始广泛应用,大数据的价值将会被进一步释放并获得企业认可。大数据发展究竟如何?它能给我们带来什么?或许很多人还不清楚,今天我们就来讨论一下。

目前,在对大数据的价值的态度上,除了6.9%的企业认为数据没有价值以外,绝大多数企业都认为数据具有或可能具有很高的价值,可见大数据的价值已经在企业中获得了广泛的认可。未来随着越来越多的大数据分析平台和工具的开始广泛应用,大数据的价值将会被进一步释放并获得企业认可。大数据发展究竟如何?它能给我们带来什么?或许很多人还不清楚,今天我们就来讨论一下。

一、国内外大数据的发展状况及应用

1.大数据已深耕于经济领域且创造了巨大的经济价值 美国的大数据产业已经创造了巨大的价值,具体表现在: 1)大数据使美国医疗服务质量得到提高

对于医疗服务的提供方和支付方来说,在减少医疗成本的同时不断提高医疗质量和效率仍然是一个难以实现的目标,而这也是改善民生的重大机遇。2010年,全美医疗支出占国内生产总值的17.9%,比2000年增长13.8%。而且,某些慢性疾病如糖尿病的患病率正在增加,正在消耗更多的医疗资源。

对这些疾病和其他相关健康服务的管理将深刻地影响国家的福祉。在这方面大数据可以发挥作用。为在广大人群中取得最有效的医疗效果,更多地使用电子健康记录(电子健康档案),并与新的分析工具相结合,将提供挖掘信息的机会。研究人员可以利用信息寻找有效的统计趋势,并依据真实的医疗服务质量开展医疗评估。

2)大数据使美国的交通更加便利

通过完善信息和自动驾驶功能,大数据有可能在许多方面彻底改变交通的面貌。开车的人多,交通堵塞就多,其后果是浪费能源,造成全球气候变暖,耗费时间和金钱。手持设备、车辆和道路上的分布式传感器则可以提供实时交通信息。这些信息,再加上更好的自动驾驶功能,可以使驾驶更安全,交通堵塞更少。智能汽车日益互联的新型交通生态系统有可能彻底改变道路使用方式。3)大数据使美国的教育质量得到提升

大数据可以对美国教育及其在全球经济中的竞争力产生深远影响。例如,通过深入地跟踪和分析学生的在线学习活动——精细至每个鼠标点击动作,研究人员能够确定学生的学习方式和提高学习的方法。这种分析可以针对成千上万的学生进行,而不是孤立的小型研究。课程和教学方法,无论是在线的,还是传统的,都可以根据大规模分析所收集到的信息进行修订。4)大数据提高了美国的征税效率

由于迅速发现异常的能力日益增加,政府税务部门可以缩小“税收缺口”,即纳税人应付税款与其自愿缴税额之间的差额,并且对于那些试图进行不当纳税申报的人,会深刻地改变他们的行为方式。大多数税务机构实行“自愿缴税与追讨欠税并举”的模式。在这种模式下,它们接受纳税人的纳税申报单并办理退税,并对一部分纳税申报单进行抽查,以找出有意或无意欠税的情况。

大数据则能够提高欺诈检测的水平,在纳税申报之初就揭露违规情况,减少问题退税的发放。资料表明,在医疗领域每年产生3000亿美元的潜在价值;在公共管理部门,每年产生2500亿美元的潜在价值;在个人位置数据领域,每年产生1000亿美元的市场;在零售业能够增加60%的营业额;在制造业部门,能够降低50%的产品开发及装配成本。

5)大数据在欧洲公共管理部门得到深入应用

大数据在OECD组织中的欧洲国家公共管理部门创造了1500到3000亿欧元或更高的潜在经济价值,这些经济价值主要通过政府公共管理机构开支的减少、转移支付的下降及税收的增加来实现。三是全球大数据人才需求将上升并且出现供需缺口。Gartner咨询公司预测,到2015年,大数据人才需求达到440万人,人才需求缺口将达到三分之一。

2.欧美等发达国家把数据资产上升到国家信息战略高度 1)美国已经布局大数据产业

美国政府将大数据视为强化美国竞争力的关键因素之一,把大数据研究和生产计划提高到国家战略层面。2012年3月,美国奥巴马政府宣布投资2亿美元启动“大数据研究和发展计划”,这是继1993年美国宣布“信息高速公路”计划后的又一次重大科技发展部署。美国政府认为大数据是“未来的新石油与矿产”,将“大数据研究”上升为国家意志,对未来的科技与经济发展必将带来深远影响。以美国科学与技术政策办公室(OSTP)为首,国土安全部、美国国家科学基金会、国防部、美国国家安全局、能源部等已经开始了与民间企业或大学开展多项大数据相关的各种研究开发。美国政府为之拨出超过2亿美元的研究开发预算。奥巴马指出,通过提高从大型复杂的数字数据集中提取知识和观点的能力,承诺帮助加快在科学与工程中的步伐,改变教学研究,加强国家安全。

据悉,美国国防部已经在积极部署大数据行动,利用海量数据挖掘高价值情报,提高快速响应能力,实现决策自动化。而美国中央情报局通过利用大数据技术,将分析搜集的数据时间由63天缩减到27分钟。2012年5月美国数字政府战略发布,更是提出要通过协调化的方式,所有部门共同提高收集、储存、保留、管理、分析和共享海量数据所需核心技术的先进性,并形成合力;扩大大数据技术开发和应用所需人才的供给。以信息和客户为中心,改变联邦政府工作方式,为美国民众提供更优公共服务。2)欧盟及日韩将会紧随其后

继美国率先开启大数据国家战略先河之后,欧盟、日本及韩国等国家也将跟进,预计不久相应的战略举措也将出台。数据规模及运用数据的能力将成为综合国力的重要组成部分,对数据的占有和控制也将成为国家间争夺的焦点。

法国政府为促进大数据领域的发展,将以培养新兴企业、软件制造商、工程师、信息系统设计师等为目标,开展一系列的投资计划。法国政府在其发布的《数字化路线图》中表示,将大力支持“大数据”在内的战略性高新技术,法国软件编辑联盟曾号召政府部门和私人企业共同合作,投入3亿欧元资金用于推动大数据领域的发展。

法国生产振兴部部长ArnaudMontebourg、数字经济部副部长FleurPellerin和投资委员LouisGallois在第二届巴黎大数据大会结束后的第二天共同宣布了将投入1150万欧元用于支持7个未来投资项目。这足以证明法国政府对于大数据领域发展的重视。法国政府投资这些项目的目的在于“通过发展创新性解决方案,并将其用于实践,来促进法国在大数据领域的发展”。众所周知,法国在数学和统计学领域具有独一无二的优势。

日本为了提高信息通信领域的国际竞争力、培育新产业,同时应用信息通信技术应对抗灾救灾和核电站事故等社会性问题,日本总务省于2012年7月新发布“活跃ICT日本”新综合战略,今后日本的ICT战略方向备受关注。其中最为关注的是其大数据政策(从各种各样类型的数据中,快速获得有价值信息的能力),日本正在针对大数据推广的现状、发展动向、面临问题等进行探讨,以期对解决社会公共问题作出贡献。

2013年6月,安倍内阁正式公布了新IT战略——“创建最尖端IT国家宣言”。“宣言”全面阐述了2013~2020年期间以发展开放公共数据和大数据为核心的日本新IT国家战略,提出要把日本建设成为一个具有“世界最高水准的广泛运用信息产业技术的社会”。3.我国大数据的国家战略

争夺新一轮技术革命制高点的战役已经打响,中国政府在美国提出《大数据研究和发展计划》的2012年也批复了“十二五国家政务信息化建设工程规划”,总投资额估计在几百亿,专门有人口、法人、空间、宏观经济和文化等五大资源库的五大建设工程。我国的开放、共享和智能的大数据的时代已经来临!2012年8月份国务院制定了促进信息消费扩大内需的文件,推动商业企业加快信息基础设施演进升级,增强信息产品供给能力,形成行业联盟,制定行业标准,构建大数据产业链,促进创新链与产业链有效嫁接。

同时,构建大数据研究平台,整合创新资源,实施“专项计划”,突破关键技术。大力推进国家发改委和中科院基础研究大数据服务平台应用示范项目,广东率先启动大数据战略推动政府转型,北京正积极探索政府公布大数据供社会开发,上海也启动大数据研发三年行动计划。

当前,在政府部门数据对外开放,由企业系统分析大数据进行投资经营方面,上海无疑是先行一步。2014年5月15日,上海市自今年起推动各级政府部门将数据对外开放,并鼓励社会对其进行加工和运用。

根据上海市经信委印发的《2014上海市政府数据资源向社会开放工作计划》,目前已确定190项数据内容作为2014年重点开放领域,涵盖28个市级部门,涉及公共安全、公共服务、交通服务、教育科技、产业发展、金融服务、能源环境、健康卫生、文化娱乐等11个领域。

其中市场监管类数据和交通数据资源的开放将成为重点,这些与市民息息相关的信息查询届时将完全开放。这意味着企业运用大数据在上海“掘金”的时代来临,企业投资和上海民生相关的产业如交通运输、餐饮等,可以不再“盲人摸象”。在立足国家战略和产业政策推动大数据收集和分析技术快速发展的同时,我们也应清醒地认识到避免数据垄断和保护数据安全的重要性,及早开展相关法律法规的探讨和研究。

伴随着大数据时代的来临,世界各国对数据的重视提到了前所未有的高度。套上大数据的光环后,原本那些存放在服务器上平淡无奇的陈年旧数一夜之间身价倍增。按照世界经济论坛报告的看法,“大数据为新财富,价值堪比石油”。正如大数据之父维克托所预测,“虽然数据还没有被列入企业的资产负债表,但这只是一个时间问题。”

今天的国家将大数据视为国家战略,并且在实施上,也已经进入到企业战略层面,这种认识已经远远超出当年的信息化战略。我们上面介绍了许多国外的动态,末了自然也要落脚到本国,思考本国可能采取的发展道路。但是,尚未见到网络安全战略和信息化发展战略全文(据说两会期间公布,也就是这几天),我们也不妨先总结国外的情形,以便进行比较。

2014年2月27日中央网络安全和信息化领导小组宣告成立,组长习近平指出,没有网络安全就没有国家安全,没有信息化就没有现代化。建设网络强国,要有自己的技术,有过硬的技术;要有丰富全面的信息服务,繁荣发展的网络文化;要有良好的信息基础设施,形成实力雄厚的信息经济;要有高素质的网络安全和信息化人才队伍;要积极开展双边、多边的互联网国际交流合作。从话的另一方面也说明目前我们没有自己的过硬技术,网络文化还有点问题,基础设施还是太差,人才队伍素质跟不上需求,也没有可靠的盟友,信息经济实力太弱。毫无疑问,中国的底子太薄了。但是,大数据是信息化时代的“石油”。开发大数据资源的能力将影响未来国家的核心竞争力。我国不能幻想走在别人修好的道路,更不能等靠,只能依赖自身能力加速前行,这种能力就是将数据转化为信息和知识的速度与技术,而这种转化速度和技术,则决定了大数据技术能力的高低。

二、我国大数据的发展趋势及误区 1.我国大数据的发展趋势

在全球经济、技术一体化的今天,我国IT行业已经开启了大数据的起航之旅,大数据已经在经济领域发挥重要作用。据计世咨讯预测,2012年,政府、互联网、电信、金融等领域市场规模占据近一半的市场份额。大数据在主要经济领域的发展趋势如下:

1)大数据在经济预警方面发挥重要作用

在2008年金融危机中,阿里平台的海量交易记录预测了经济指数的下滑。2008年初,阿里巴巴平台上整个买家询盘数急剧下滑,预示了经济危机的来临。数以万计的中小制造商及时获得阿里巴巴的预警,为预防危机做好了准备。2)大数据分析成为市场营销的重要手段

与传统的市场研究方法不同,大数据的市场研究方法不再局限于抽样调查,而是基于几乎全样本空间。例如,百度拥有中国最大的消费者行为数据库,覆盖95%的中国网民,搜索市场占比达87%。百度基于最真实的用户行为数据和多维度研究工具,帮助宝洁精准的定位了消费者的地域分布、兴趣爱好等信息,根据百度分析的结论,宝洁适时地调整了营销策略。

3)大数据在临床诊断、远程监控、药品研发等领域发挥重要作用

我国目前已经有十余座城市开展了数字医疗。病历、影像、远程医疗等都会产生大量的数据并形成电子病历及健康档案。基于这些海量数据,医院能够精准地分析病人的体征、治疗费用和疗效数据,可避免过度及副作用较为明显的治疗,此外还可以利用这些数据进行实现计算机远程监护,对慢性病进行管理等。4)大数据为金融领域的客户管理、营销管理及风险管理提供重要支撑 大数据能够解决金融领域海量数据的存储、查询优化及声音、影像等非结构化数据的处理。金融系统可以通过大数据分析平台,导入客户社交网络、电子商务、终端媒体产生的数据,从而构建客户视图。依托大数据平台可以进行客户行为跟踪、分析,进而获取用户的消费习惯、风险收益偏好等。针对用户这些特性,银行等金融部门能够实施风险及营销管理。

当前,我国正处在全面建成小康社会征程中,工业化、信息化、城镇化、农业现代化任务很重,建设下一代信息基础设施,发展现代信息技术产业体系,健全信息安全保障体系,推进信息网络技术广泛运用,是实现四化同步发展的保证。大数据分析对我们深刻领会世情和国情,把握规律,实现科学发展,做出科学决策具有重要意义。

中国人口居世界首位,将会成为产生数据量最多的国家,但我们对数据保存不够重视,对存储数据的利用率也不高。此外,我国一些部门和机构拥有大量数据却不愿与其他部门共享,导致信息不完整或重复投资。政府应通过体制机制改革打破数据割据与封锁,应注重公开信息,应重视数据挖掘。美国联邦政府建立统一数据开放门户网站,为社会提供信息服务并鼓励挖掘与利用。2.我国大数据行业的误区

误区一:只有搞大数据技术开发的,才是真正“圈内人”。

笔者曾经参加过若干会议,70%是偏技术的,在场的都是国内各个数据相关项目经理和技术带头人,大家讨论的话题都是在升级CDH版本的时候有什么问题,在处理Hive作业的时候哪种方式更好,在Storm、Kafka匹配时如何效率更高,在Spark应用时内存如何释放这些问题。参会者都一个态度:不懂大数据技术的人没资格评论大数据,您要不懂Hadoop2.0中的资源配置,不懂Spark在内存的驻留时间调优,不懂Kafka采集就别参加这个会!对了,最近Google完全抛弃MR只用Dataflow了,您懂吗?不懂滚粗!

在这里我想说,技术的进步都是由业务驱动的,某宝去了IOE才能叫大数据吗,我作为一个聋哑人按摩师用结绳记事完成了对于不同体型的人,用什么按摩手法进行全流程治疗,就不叫大数据分析了吗?技术发展到什么程度,只有一小部分是由科学家追求极致的精神驱动,大部分原因是因为业务发展到一定程度,要求技术必须做出进步才能达成目标的。

所以,真正的大数据“圈内人”至少要包含以下几种人: 1)业务运营人员

比如互联网的产品经理要求技术人员,必须在用户到达网站的时候就算出他今天的心情指数,而且要实现动态监测,这时候只能用Storm或者Spark来处理了;比如电信运营商要求做到实时营销,用户进入营业厅的时候,必须马上推送短信给用户,提示他本营业厅有一个特别适合他的相亲对象(呈现身高、三围、体重等指标),但是见面前要先购买4G手机;再比如病人来到银行开户,银行了解到用户最近1周曾经去医院门诊过两次,出国旅游过3次,带孩子游泳两次,马上客户经理就给客户推荐相关的银行保险+理财产品。这些业务人员,往往是驱动技术进步的核心原因。2)架构师

架构师有多么重要,当一个业务人员和一个工程师,一个说着业务语言,一个说着技术术语在那里讨论问题的时候,工程师往往想着用什么样的代码能马上让他闭嘴,而架构师往往会跳出来说“不,不能那样,你这样写只能解决一个问题并且会制造后续的若干问题,按照我这个方案来,可以解决后续的若干问题!”一个非技术企业的IT系统水平,往往有70%以上的标准掌握在架构设计人员手里,尽快很多优秀的架构师都是从工程师慢慢发展学习而来的,IT架构的重要性,很多企业都意识到了,这就是很多企业有CTO和CIO两个职位,同样重要!架构之美,当IT系统平稳运行的时候没人能感受到,但是在一个烟囱林立、架构混乱的环境中走过的人眼中,IT开发一定要架构现行,开发在后!3)投资人

老板,不用说了,老板给你吃穿,你给老板卖命,天生的基础资料提供者,老板说要有山便有了山,老板说要做实时数据处理分析,便有了Storm,老板说要做开源,便有了Hadoop,老板还说要做迭代挖掘,便有了Spark„„ 4)科学家

他们是别人眼中的Geek,他们是别人眼中的高大上,他们是类似于霍金一样的神秘的早出晚归昼伏夜出的眼睛男女,他们是驱动世界技术进步的核心力量。除了世界顶级的IT公司(往往世界技术方向掌握在他们手中),其他公司一般需要1-2个科学家足以,他们是真正投身于科学的人,不要让他们去考虑业务场景,不要让他们去考虑业务流程,不要让他们去计算成本,不要让他们去考虑项目进度,他们唯一需要考虑的就是如何在某个指标上击败对手,在某个指标上提高0.1%已经让他们可以连续奋战,不眠不休,让我们都为这些科学家喝彩和欢呼吧。在中国,我认为真正的大数据科学家不超过百人„„ 5)工程师

工程师是这样一群可爱的人,他们年轻,冲动,有理想,又被人尊称为“屌丝”“键盘党”,他们孜孜不倦的为自己的理想而拼搏,每次自己取得一点点进步的时候,都在考虑是不是地铁口的鸡蛋灌饼又涨了五毛钱。他们敏感,自负,从来不屑于和业务人员去争论。工程师和科学家的不同点在于,工程师需要频繁改动代码,频繁测试程序,频繁上线,但是最后的系统是由若干工程师的代码组合起来的。每个自负的工程师看到系统的历史代码都会鄙视的发出一声“哼,这垃圾代码”,之后便投入到被后人继续鄙视的代码编写工作中去。6)跟风者

他们中有些是培训师,有些是杀马特洗剪吹,有些是煤老板有些是失足少女。他们的特点就是炒,和炒房者唯一不同的就是,他们不用付出金钱,他们认为只要和数据沾边就叫大数据,他们有些人甚至从来没碰过IT系统,他们是浑水摸鱼、滥竽充数的高手,他们是被前几种人鄙视的隐形人。不过我想说,欢迎来炒,一个行业炒的越凶,真正有价值的人就更能发挥自己的作用。误区二:只有大数据才能拯救世界 大数据目前的技术和应用都是在数据分析、数据仓库等方面,主要针对OLAP(OnlineAnalyticalSystem),从技术角度来说,包含我总结的两条腿:一条腿是批量数据处理(包括MR、MPP等),另一条腿实时数据流处理(Storm、内存数据库等)。

在此基础上,部分场景又发现MR框架或实时框架不能很好的满足近线、迭代的挖掘需要,故又产生了目前非常火的基于内存数据处理Spark框架。很多企业目前的大数据框架是,一方面以Hadoop2.0之上的Hive、Pig框架处理底层的数据加工和处理,把按照业务逻辑处理完的数据直接送入到应用数据库中;另一方面以Storm流处理引擎处理实时的数据,根据业务营销的规则触发相应的营销场景。同时,用基于Spark处理技术集群满足对于实时数据加工、挖掘的需求。以上描述可以看出,大数据说白了就是还没有进入真正的交易系统,没有在OLTP(OnlineTransactionsystem)方面做出太大的贡献。至于很多文章把大数据和物联网、泛在网、智慧城市都联系在一起,我认为大数据不过是条件之一,其余的OLTP系统是否具备,物理网络甚至组织架构都是重要因素。

最后还想说,大数据处理技术,再炫如Google的Dataflow或成熟如Hadoop2.0、数据仓库、Storm等,本质上都是数据加工工具,对于很多工程师来说,只需要把数据处理流程搞清楚就可以了,在这个平台上可以用固定的模版和脚本进行数据加工已经足够。毕竟数据的价值70%以上是对业务应用而言的,一个炫词对于业务如果没有帮助,终将只是屠龙之术。任何技术、IT架构都要符合业务规划、符合业务发展的要求,否则技术只会妨碍业务和生产力的发展。

随着时代变迁,大浪淘沙,作为数据行业的一员,我们每个人都在不同的角色之间转换,今天你可能是科学家,明天就会变成架构师,今天的工程师也会变成几年后的科学家,部分人还终将步入跟风者的行列。

三、我国大数据发展的机遇和困境 1.大数据迎来大发展的机遇

大数据的快速发展,使它成为IT领域的又一大新兴产业。据中央财经大学中国经济管理研究院博士张永力估算,国外大数据行业约有1000亿美元的市场,而且每年都以10%的速度在增长,增速是软件行业的两倍。我国2012年大数据市场规模大约4.7亿元,2013年增速将达到138%,达到11.2亿元,产业发展潜力非常巨大。

1)政府积极介入推动

2009年,联合国启动“全球脉动计划”,借大数据推动落后地区发展。2012年1月,世界经济论坛年会把“大数据、大影响”作为重要议题。美国从开放政府数据、开展关键技术研究和推动大数据应用三方面布局大数据产业。美国在开放政府上非常积极,通过Data.gov开放37万个数据集,并开放网站的API和源代码,提供上千个数据应用。除了推动本国政府数据开放,美国倡导发起全球开放政府数据运动,已有41个国家响应。美国政府还投资两亿美元促进大数据核心技术研究和应用,把大数据放在与集成电路、互联网同等重要的位臵,从国家层面推进。

2)资本市场也对大数据钟爱有加

2012年4月,大数据分析公司Splunk高调宣传大数据,引发投资者关注。12月初,为企业市场提供Hadoop解决方案的创业公司Cloudera获得6500万美元融资,估值约为7亿美元。近期,高盛联席主席斯科特。斯坦福说:“投资大数据及其运用回报率最高”。大数据领域的企业并购热度也在上升,单笔平均并购金额方面,大数据超过云计算位居IT领域榜首,在总并购额上也位居第二。3)人才需求巨大

据一家国际咨询公司,盖特纳咨询公司预测大数据将为全球带来440万个IT新岗位和上千万个非IT岗位。麦肯锡公司预测美国到2018年需要深度数据分析人才44万—49万,缺口14万—19万人;需要既熟悉本单位需求又了解大数据技术与应用的管理者150万,这方面的人才缺口更大。中国是人才大国,但能理解与应用大数据的创新人才更是稀缺资源。4)各方积极参与

大数据的火爆,也带动了国内学术界、产业界和政府对大数据的热情。2011年以来,中国计算机学会、中国通信学会先后成立了大数据委员会,研究大数据中的科学与工程问题,科技部的《中国云科技发展“十二五”专项规划》和工信部的《物联网“十二五”发展规划》等都把大数据技术作为一项重点予以支持。其中工信部发布的物联网“十二五”规划上,把信息处理技术作为4项关键技术创新工程之一被提出来,其中包括了海量数据存储、数据挖掘、图像视频智能分析,这都是大数据的重要组成部分。而另外3项关键技术创新工程,包括信息感知技术、信息传输技术、信息安全技术,也都与“大数据”密切相关。应用方面,中国三大通信运营商都在结合自身业务情况,积极推进大数据应用工作,并取得了较好的进展。电子商务企业阿里巴巴提出要做中国数据分析第一平台,通过掌握的企业交易数据,借助大数据技术自动分析判定是否给予企业贷款,全程不会出现人工干预。据透露,截至目前阿里巴巴已经放贷300多亿元,坏账率约0.3%左右,大大低于商业银行。

研发企业方面,我国能够处理大数据的企业并不是很多。北京永洪科技在这方面做的不错。永洪科技在大数据、分布式计算、数据分析等领域具备核心竞争力、自主创新并拥有多项发明专利。推出的Z系列产品在大数据的应用分析中在国际上也是领先的。大数据的热潮触发了一场思想启蒙运动,使得“大数据是资产,不是包袱”、“要拿数据说话”等观念逐步深入人心,改变了以往不重视数据积累,不相信数据分析等认识。有了这种思维模式的改变,大数据的应用就有了希望。2.大数据落地面临的困难

应该说,全球来看,对大数据认识、研究和应用还都处于初期阶段。特别是对我国来说,大数据真正落地,还需要迈过三道坎。1)数据是否足够丰富和开放

丰富的数据源是大数据产业发展的前提。而我国数字化的数据资源总量远远低于美欧,每年新增数据量仅为美国的7%,欧洲的12%,其中政府和制造业的数据资源积累远远落后于国外。就已有有限的数据资源来说,还存在标准化、准确性、完整性低,利用价值不高的情况,这大大降低了数据的价值。

同时,我国政府、企业和行业信息化系统建设往往缺少统一规划和科学论证,系统之间缺乏统一的标准,形成了众多“信息孤岛”,而且受行政垄断和商业利益所限,数据开放程度较低,以邻为壑、共享难,这给数据利用造成极大障碍。制约我国数据资源开放和共享的一个重要因素是政策法规不完善,大数据挖掘缺乏相应的立法,无法既保证共享又防止滥用,一方面欠缺推动政府和公共数据的政策,另一方面数据保护和隐私保护方面的制度不完善抑制了开放的积极性。因此,建立一个良性发展的数据共享生态系统,是我国大数据发展需要迈过去的第一道砍。

2)是否掌握强大的数据分析工具

要以低成本和可扩展的方式处理大数据,这就需要对整个IT架构进行重构,开发先进的软件平台和算法。这方面,国外又一次走在我们前面。特别是近年来以开源模式发展起来的Hadoop等大数据处理软件平台,及其相关产业已经在美国初步形成。

而我国数据处理技术基础薄弱,总体上以跟随为主,难以满足大数据大规模应用的需求。如果把大数据比作石油,那数据分析工具就是勘探、钻井、提炼、加工的技术。我国必须掌握大数据关键技术,才能将资源转化为价值。应该说,要迈过这道坎,开源技术为我们提供了很好的基础。3)管理理念和运作方式能否适配数据化决策

大数据开发的根本目的是以数据分析为基础,帮助人们做出更明智的决策,优化企业和社会运转。哈佛商业评论说,大数据本质上是“一场管理革命”。大数据时代的决策不能仅凭经验,而真正要“拿数据说话”。因此,大数据能够真正发挥作用,深层次看,还要改善我们的管理模式,需要管理方式和架构的与大数据技术工具相适配。这或许是我们最难迈过的一道坎了。

四、对我国发展大数据产业的建议

大数据有巨大的社会和商业价值,就看会不会挖掘,是否善于运用数据分析的结果。同时,它又是一个应用驱动性很强的服务,要做好大数据产业,为经济发展提供更大的动力,需要从以下几人方面入手。1.建立一套运行机制

大数据建设是一项有序的、动态的、可持续发展的系统工程,必须建立良好的运行机制,以促进建设过程中各个环节的正规有序,实现统合,搞好顶层设计。2.规范一套建设标准

没有标准就没有系统。应建立面向不同主题、覆盖各个领域、不断动态更新的大数据建设标准,为实现各级各类信息系统的网络互连、信息互通、资源共享奠定基础。

3.搭建一个共享平台

数据只有不断流动和充分共享,才有生命力。应在各专用数据库建设的基础上,通过数据集成,实现各级各类指挥信息系统的数据交换和数据共享。4.培养一支专业队伍

大数据建设的每个环节都需要依靠专业人员完成,因此,必须培养和造就一支懂指挥、懂技术、懂管理的大数据建设专业队伍。

五、结论

目前,大数据在电信、智慧城市、电子商务及社交娱乐等行业已经出现规模化应用,中国大数据市场将进入高速发展时期。大数据真正的价值体现在从海量且多样的内容中提取用户行为、用户数据、特征并转化为数据资源,对数据资源进一步加以挖掘和分析,增强用户信息获取的便利性,实现从产品价值导向到以客户体验价值为中心导向的转换,客户体验的提升也正是激发信息消费的根本原因。中国信息消费市场规模量级巨大,增长迅速。在网络能力的提升、居民消费升级和四化加快融合发展的背景下,新技术、新产品、新内容、新服务、新业态不断激发新的消费需求,而作为提升信息消费体验的重要手段,大数据将在行业领域获得广泛应用。

浅析大数据时代统计学的发展 篇6

一、大数据与统计学的区别

统计知识在大数据的利用研究中有多样化的应用形式,主要是对“大数据”进行肢解,对爆炸增长的数据信息进行搜索、分类以及整合主要依赖于统计学。因此,大数据的相关研究在一定程度上运用了统计学的知识。但是,大数据的使用尚未被统计学这门学科充分利用,这主要是因为大数据的运用方式,使用模式和统计学之间存在着重要差异。统计学主要利用的是样本统计资源,样本主要在根据既定的概率标准从总体中抽样调查,但是随机抽样调查是带有成本属性的,例如消耗时间、资本投入的成本等。在样本数量逐渐增加的情况下,样本估计的误差范围是伴随着总体样本数量的增大而逐渐增加的,这是样本统计学不能忽视的缺点。大数据时代最具代表性的就是海量的信息数据化以及即时电子商务信息,大数据在整体上呈现出“总体样本数据化”的趋势,这样的特征恰好可以补充样本统计的弊端。大数据环境下的整体样本统计即使可以囊括全部的样本容量,但是因为很多情况下数据具有非结构性和半数据化的特征,而且大量的数据资源呈现的是重视尾部分布的状态,方差、标准差等标准化的`方法变得毫无意义,整体依靠性和不稳定性经常会超越经典时间内的时间序列的整体假设性,所以概率论的应用范围呈现狭窄化的发展趋势。因此,统计学在利用大数据进行样本统计的过程中,可以对整体上的数据资源进行融合和选择,这和样本统计中的数据化处理技术存在异曲同工之妙。

二、大数据时代统计学教育的发展

1、全面培养人才素质

统计学专业的学生需要具备良好与人交往能力。统计学的学生很多都是理科出身的学生,不善于交际。但是在日常的工作中,有数据经验的科学家应该经常和每个部门的工作人员交流,协同工作。怎么样才能让颇具专业性的数据分析结果让普通的老百姓也可以读懂,让每个部门的工作人员都能无障碍地理解,这是不容易做到的。要训练自己的交往能力和沟通技能,主动地参加演讲活动是不错的渠道,演讲活动锻炼了演讲者的自信,在整个演讲的过程中,能否清晰地表达自己的思想以及给人以信服力是至关重要的。需要培养数据常识,广其见闻。数据科学家经常面对各种各样的海量数据,并需要从这些数据中挖掘出有价值的信息,这就需要数据科学家具有强烈的数据敏感性。对数据的敏感程度的训练不是一蹴而就的,要经过长时间的积累和数据分析工作的磨练,同时也可以根据阅读数据分析材料积累阅历,提升对数据资源的敏感程度。

2、培养应用型人才

大数据时代培养的数据科学家需要两方面的基本素质,第一是概念性,也就前面所说的数据科学家需要掌握的基本素养和专业知识;第二是实践性,也就是本文中我们提及的应用型人才,也就是实际操作中处理数据的能力。在高校开展大数据分析研究生学科,最大的问题是没有可用的数据,这就需要高效与大数据企业合作,进行研究生的联合培养,注重学生的实际操作能力,这里面涉及到我们的应用统计学专业硕士的双导师培养制度,一名校内导师一名校外导师,校内导师注重学生的概念性,校外导师注重学生的实践性,学生通过在校外导师单位的实习,从而熟悉并且掌握实际工作中所需要的技能。

3、促进统计与数学、计算机学科合作

“大数据”时代需要的海量数据分析资源仅仅凭借统计学科单一学科的发展是不能满足发展需求的,大数据的数据结构性特征已经抛弃了传统意义上的数据分析模式的非智能化框架,而且数据分析需要利用新型的数据运算方式以及计算机技能分析,这也是进行数据分析工作的拦路虎。所以,数据科学家的成长仅仅依靠单一的统计学科知识的学习是远远不够的,其需要的是数学、计算机和统计学三门学科融合发展,紧密结合。三门学科之间交叉发展,融会贯通,这样既可以发挥学科的优势资源,同时也能弥补其他学科的弊端。

三、结语

数据信息的爆炸式增长使我们在使用统计数据处理信息时需要更多的数据资源,更有甚者,在很多情况下可以利用全面化的数据,数据资源不再是制约统计分析的唯一因素,大数据前提下的统计学效用和粘合度预测的准确程度不断提升,而且可以发现诸多在样本统计基础上未能显现的细节。统计学关键优势就是“见微知著”,也是统计学在数据环境下的约束性妥协。在海量数据汹涌袭来的年代,充分发挥统计学的优势,和大数据资源整合发展,实现“以小见大”和“由繁入简”的有效结合。

参考文献:

[1]田茂再.大数据时代统计学重构研究中的几个热点问题[J].统计研究,,05:3-12.

[2]刘春杰.大数据时代统计学教育面对挑战的应对[J].凯里学院学报,2015,03:29-32.

柳州市大数据发展规划 篇7

一、大数据时代的必然出现

大数据的概念最早由麦肯锡咨询公司提出, 顾名思义即数量规模庞大的数据, 体现数据的规模性、多样性、高速性和价值性四大特点。大数据是信息处理与计算技术的延伸, 也是社会进步和发展的必然趋势。

在信息和网络技术飞速发展的情况下, 社会生活中越来越多的活动实现了数字化。随着数据生成的自动化、数据生成速度的快速化, 数据量随之迅猛增长。存储设备、内存、处理器等电脑元件成本的不断下降, 使之前昂贵的大数据存储和大数据处理更加便宜, 为数据量飞速增长提供了有效的保证, 从而使得大数据的存在成为可能。信息技术的飞速发展, 为数据的生产、存储提供有力的基础, 并且允许数据形式的多样化, 从而促进了大数据时代的产生和发展。随时随地通过各种方式和手段, 上传和下载、发布或共享文字、图片、音频和视频等各种形式的数据, 越来越多各种形式的数据提供给人们使用。数字化已经成为经济社会发展的必然趋势。与生产过程必须依赖硬件设备和人力资本一样, 企业的业务活动、创新、成长也越来越离不开大量数据的支持。也就是说, 社会生活中的任何一项业务活动都与大量的数据紧密相联, 每一个人都是数据的产生者, 同时又是数据的使用者。数据量与日俱增, 数据结构繁杂多变, 数据产生速度越来越快, 数据带给我们的价值远远超过以前, 我们已经进入了大数据的时代。

在大数据时代, 有计算机技术的支持可以分析处理更多的数据, 甚至可以处理某个特定范围的所有数据。随着数据数量的不断增加, 使我们的思维有所改变不再只关注数据的准确性, 不再关注数据的之间的因果关系。大数据为工作、生活和思维带来了改变, 所以需要对数据和信息的重新界定。

二、大数据时代带来大规模的数据

数据的一般定义为, 科学实验、检验、统计等获得的和用于科学研究、技术设计、查证、决策等的数值。随着数据定义的发展, 不同研究领域数据已不再单纯局限于数字本身, 它是载荷或记录信息的符号, 并且是按照一定规则排列组合的符号, 除数字以外, 数据表达方式也可以是文字或图像, 甚至是任何代码。数据无所不在, 充斥于社会生活中的每一个角落、每一个人、每一个组织都在使用数据。数据的海量生产、共享和应用已经成为必然。在大数据时代背景下, 数据具有传统数据所不具备的独特特点。

首先, 数据产生数量庞大。数据量非常大是大数据的首要特点之一, 大数据时代的数据量不再用TB为存储单位, 而是以PB、EB、ZB为存储单位。社会生活中每天产生的数据量已经远远超过过去每7年所产生的数据量。企业的磁盘存储量及个人电脑和笔记本的存储量超过了7EB字节。经济社会被如此庞大的数据量所包围, 这也正是大数据时代下重大变化之一, 即用数据来表示社会生活中的各种活动。

第二, 数据增长、变化速度飞快。这既是大数据时代所具有的独特之处, 也给大数据的处理带来机会与挑战。大数据环境下, 数据产生、存储和处理、并不断更新的速率十分惊人。因特网上每秒钟产生的数据量超过了20年前整个因特网所存储的数据量, 可见大数据产生速度之快, 数据处理变化之快。数据生产量飞速增长的同时, 要求创新出更快更好的数据处理技术。才能满足这个用数据说话、竞争异常激烈的大数据时代对数据的要求。通过快速地有效地处理不断更新不断变化的大规模的数据量, 才能获得竞争优势, 才能在大数据时代发展和进步。

第三, 数据表示方式越来越多。多样性也是大数据的重要特点之一。大数据以多种多样的形式涌现, 文字、语音、图像、视频等形式。随着大数据时代的发展, 新的数据来源与数据形式会不断出现。如此多样化的数据对数据非结构的存储要求更高, 从而要求改变传统的数据库。另一个方面, 大量、繁杂的数据中却保存着更多的有价值的信息, 这也是数据多样性带来的数据价值的体现。

第四, 数据具有较高的价值。数据数量巨大并且价值总量也很高, 但价值密度却很低。连续不断的视频数据中, 有用的数据可能仅仅只有几分钟甚至是几秒钟。大数据的价值体现在数据的数量多, 进而带来更多的价值, 但是从繁杂的大数据中找到有用、有价值的准确数据也是大数据时代带来的挑战。

三、有意义的数据才是信息

在很多情况下, 数据和信息两个词常被赋予同样的定义。严格意义上讲, 二者间是不同的。数据是对信息数字化的记录, 是一种表示的符号, 其本身没有实际意义。信息则是指把数据放到一定的背景下, 对于数字进行解释并赋予意义, 也就是说信息是有意义的数据。但在进入信息时代后, 人们趋向于把所有存储于计算机上的信息, 无论是数字还是音乐, 甚至连视频都统称为数据。

信息具有价值性, 有意义有价值的数据才是信息, 信息是使用者可以利用的数据。信息是真实的, 可以客观地反应现实世界的, 相反不符合客观事实的信息是没有价值的。反应客观事实并且不虚假的数据才是信息。信息比数据更有时效性, 过期的数据对现实没有用处不是信息。如果反应客观事物的所有数据都可以找到那么这样的信息就是完整的。不同的载体可以承载相同的信息, 与数据相同信息具有多样性和变换性。信息可以被共享, 共享后的信息价值相对会下降, 因此为了获得更多的利益, 必须寻找新鲜的信息。

迅猛增长的数据数量, 快速涌现的新数据, 千变万化的数据表现形式, 不断增加的数据价值, 以及不断创新的计算机技术给大数据时代打下了夯实的基础, 标志着数据化的必然趋势, 也标志着经济社会已经迈入大数据时代。在大数据时代对数据和信息的理解要有所变化, 需要我们重新审视, 重新区分数据和信息, 这样有助于我们在大数据时代获得更多更好更有价值的信息, 从而在竞争激烈的大数据时代获得竞争优势。

摘要:大数据开启了一个时代的转型, 给人们带来一场生活、工作与思维的大变革。时代的变革需要以大数据为视角理解数据与信息。本文介绍了大数据时代出现的必然性, 分析大数据时代数据的特点, 从而阐述大数据时代背景下信息的特点。

关键词:大数据时代,数据,信息

参考文献

大数据与图书馆发展 篇8

关键词:大数据  图书馆工作  思维方式  评论

中图分类号:G25 文献标识码:A 文章编号:1674-098X(2014)10(c)-0181-01

1992年,美国政府公布了“信息基础建设与科技法案”,1994年9月,“数字图书馆首创计划”一期工程,在美国国家基金立项共投入2440万美元,并与次年成立国家数字图书馆联盟。1998年,美国图书馆协会制定了学生的信息素养标准,2009年10月1日,为了强调公民信息素养的作用,白宫发布了总统签署的公文,将每年10月定为全民信息素养意识月。2012年3月29日,为了提高从大数据的分析和利用能力,转变学习方式,加快科技创新,美国总统宣布启动“大数据研究与开发计划”。

高校图书馆除了为师生服务,还要为科研和企业服务、更重要的是为决策部门的知识支持服务。不仅仅是文献信息的提供中心和为教学、科研服务的学术性机构,逐步向学习研究中心,校园文化建设的主阵地职责倾斜。高校图书馆工作是一个较为复杂的系统工程,其工作内容既有行政和业务,又有思想政治工作;工作对象既包括广大读者,又包括本馆职工。随着数据信息量的空前丰富和交流技术手段的突飞猛进,如何利用数据信息增强组织机构的竞争力,如何了解世界、产业的发展动向,如何支持战略性的创新和研发活动,以及传统的业务(如科技查新、竞争情报等)如何转型,对于图书馆情报界而言,既是一个严峻的挑战,也是一次发展的机遇。具体来说,就是要紧紧围绕全面提高高等教育的质量这一主题,进行变革、拓展、传承,探讨大学图书馆面对不断变幻的信息环境,面对不断变化的用户需求,如何通过技术革新、服务创新、管理变革等谋求发展,图书馆在做好传统的文献支撑工作的同时,在大学生信息素质、知识产权意识、创新意识培养方面承担更多的责任,践行文化育人的职能;充分适应教育信息化,向社会进一步开放;新形势下不断拓展新服务,更好地为学校教学、科研、战略发展提供高质量服务。

全面系统的研究高校图书馆各项工作的过去、现在和未来,明确新时期图书馆工作任务之际,张福俊于2014年2月在中国时代经济出版社,出版了《大数据时代高校图书馆工作研究》,仔细读来给人豁然开朗的感觉。

该书第一章主要回顾了图书馆学发展历程,综述了大数据的相关研究,展望了大数据为图书馆带来的契机与影响,指出数据正在成为组织最重要的资产,数据分析能力正在成为组织的核心竞争力。第二章主要介绍了大数据时代图书馆资源建设,作者认为馆藏资源建设经历了从藏书建设到文献资源建设再到信息资源建设的过程,随着大数据时代的来临,非结构化读者互动数据也成为高校图书馆的重要建设资源,图书馆的资源建设将过渡到数据监护时代。本章主要研究了大数据时代文献资源建设和数字化电子资源建设和各种来自读者的非结构化数据收集,比如:用户借阅流通数据,馆藏书目数据和电子数据库,数据库利用数据,各种评论数据,读者自行分类和TAG数据,入馆读者数据,在线咨询数据,文献传递数据,科技查新数据,无线射频识别数据、社交网络交互数据、移动互联数据及各种传感器数据等。第三章,大数据时代读者工作,主要阐述了读者分析特别是读者行为分析的方法,介绍了大数据时代图书宣传与阅读指导的工作特点和工作范式,研究了基于读者大数据的个性化推荐系统和虚拟参考咨询以及文献传递工作。第四章主要研究了大数据时代信息素质内在结构体系的构建和信息素质教育课程模式及实施组织模式;第五章主要介绍了图书馆开展基于决策支持的竞争情报工作的方法,不但论述了理念、理论,还结合多年的工作实践举例说明,特别值得一提的是,指出了科技查新服务工作向基于大数据、基于知识的情报咨询服务转型问题,比如书中给出了FTO检索案例和基于单位和竞争单位的内生增长研究报告以及基于学科或行业发展研究报告的做法。第六章,基于大数据的信息化建设,是本书的重点,特别是云数据中心搭建部分,从架构到设备配置介绍的比较详细,但未见述及横计算和万物互联等时代前沿问题。综合布线、安防系统、自动化集成系统、第五代Wi-Fi无线网络系统的应用部分理念也比较先进,介绍的也比较详细,图书馆资源数字化及服务系统部分详述了资源数字化的方法及存储设计,资源管理服务系统部分只研究了规划,理念还不够先进,有待于著者进一步研究,比如基于大数据的移动应用问题。第七章图书馆管理工作部分,研究了大数据时代高校图书馆人力资源配置和管理办法,创新性的把图书馆工作划分为简单工作岗位和复杂工作岗位,并提出了划分标准,即把无法清楚地描述目标任务和岗位责任的工作岗位划为复杂工作岗位,并科学地提出这部分岗位的闭环目视考核管理办法,有一定的现实价值和借鉴意义。

总之,《大数据时代高校图书馆工作研究》全面系统地阐述了现今时代高校图书馆工作的理论与实践,对做好图书馆工作有一定的指导意义,是图书情报工作人员和大学生学习提高的教材。全书内容总体比较新颖,能够注重理论联系实际,总结了图书馆工作与管理的卓有成效的实践经验,对各类图书馆的工作均有一定的参考价值。

参考文献

[1] Fu-jun Zhang.The application of ElGamal encryption technology to the information security of digital library[J].Telkomnika,2013(11):1801-1807.

[2] 張福俊.基于SCI论文引证的学术期刊信息服务[J].山东科技大学学报(自然科学版),2013(5):107-110.

[3] 韩翠峰.大数据时代图书馆的服务创新与发展[J].图书馆,2013(1):121-122.

[4] 张福俊,刘桂仁,刘谦,等.山东省国内专利文献计量学分析[J].科技管理研究,2013(1):60-63.

[5] 张福俊.大数据时代高校图书馆工作研究[M].中国时代经济出版社,2014.

[6] 樊伟红,李晨晖,张兴旺,等.图书馆需要怎样的“大数据”[J].图书馆杂志,2012(11):63-68,77.

上一篇:面试着装和礼仪需要注意哪些下一篇:家具公司岗位职责