中国教育和科研计算机网
EDU首页 |  中国教育 |   高校科技 |   教育信息化 |   CERNET
教育信息化

资讯 | 专题 会议 观点 专栏 访谈 企业 产品 CIO 技术 校园信息化 下一代互联网 IPv6视频课堂

中国教育网 > 教育信息化
您现在的位置: EDU首页 > 教育信息化 > 解  读
方伟杰:浙江大学共享数据环境建设与应用
http://www.edu.cn   2009-12-07 中国教育和科研计算机网 作者:

字体选择:【大】 【中】 【小】

  第一类部门业务的管理系统,非常多。人士科研、教学、学工一类。他们各自都有自己业务的数据库。

  第二类我们把它称之为全体应用的业务系统。全体应用业务系统主要围绕着我们的各类系统库进行开展业务,比如说战略我们可以看到,我们的学校师生的一站式,个人的主页。后面还有一个侦查,现在我们目前09年重点再做的一个侦查的数据库,如何把学校职场相关东西汇到一起,围绕这个职场用好。最右边是我们的决策分析,这个主要是我们通过基础数据库的建设和未来数据仓库的规划来展开的。最上面就是我们的系统的用户。

  所以说整个架构来说,我们主要有以下几个特点:第一个来说共享数据库与基础数据库分离这样一个设计。在之前的话,我们在数据中心的建设中心当中,第一个阶段很多高校都会整个共享库就是产品库的设计理念去建。这个里面为什么要把它封闭开来呢?其实共享库本身,首先高校的数据交换有自己的一些特殊性。这样一些特殊性就造成了共享库和产品库,如果合在一起建设的话,会把数据交换和业务难以剥离开来。所以地位上来说,共享库做成真正数字的交换,基础数据库主要是把学校这样数据的收藏。
  第二个方面我们设置了教师的个人信息库,教师个人数据库一方面看得到主要是为师生提供全局性的一些数据的应用,第二个方面来说其实为将来的数据集中提供一个基础。

  现在浙江大学各个部门的业务系统的建设采取分布式的,其实我们在建设当中在还是发现分布式,因为各个系统是不同阶段不同时期,不同公司来角色的。对于一些残局数据来说,还是会有一些方面的,这样那样的不足。所以我们在未来也是要业务系统逐渐的一体化、集中化去考虑。这个个人库的信息库的话,围绕着师生这个管理两条线打这样一个基础。

  第三统一的数据调动和数据交换平台,无论是我们共享库我们的基础库或者是数据的仓库,都是使用同一套的数据标准和数据交换的平台进行数据的抽取,数据的订阅,数据的交换,对数据进行分析,这样来说也可以做一些建设。整个数据中心都处在这样一个结构,对于中间来说的话,是我们的数据库,我们的数据库的集成平台。数据存储以及大量的这样一个业务的系统,所以说,这个页面是后来根据这个主题建的。我们在整个数据中心当中用到了这样一些技术,因为我们今天这个主题还有一个虚拟化的技术,在数据中心建设当中如何利用虚拟化的技术来减少空间和成本方面的考虑。因为我不是这个方面的人员,这样数据中心进行一些新的应用,是不是可以利用一些虚拟化的技术来解决。我们现在整个数据库,整个数据库的规模是非常大的。有非常多的数据库,现在全部是在一个机器上面,是不是可以通过一些虚拟化的技术来解决,分担单机的可能。包括我们应用两台IBM的服务器,包括很多的中间库的服务器。接下来这个专家可以给我们出出一些主意。

  第三个方面我们拥有这样一个共享数据的环境以后,如何开展数字的应用?整个数据的应用根本我们架构的特点,我们把它根据围绕我们三个库进行开展一些数据的应用。我们首先一个共享库基本库,我们各类信息库,如何根据三个库开展我们的数据服务。共享库是为我们两个以上部门的业务系统提供数据交换。如果是两两部门之间数据交换的话,我们认为这个数据不需要通过共享库进行数据的沉淀。

  第二个情况共享库同时要为我们个人信息库和基础数据库提供共享的数据。这样我们把三个库之间的关系通过数据交换平台把它衔接起来,所有的数据,我们个人信息库和基础数据库对于数据交换平台来说,是定点的关系和部门业务系统之间,所以共享数据库成为学校共享数据最大的一个集合。共享数据库上面的一个服务主要是数据集成,数据掌握与数据交换。数据集成主要是针对有本地数据库系统的这一类的应用提供数据服务。目前我们得到的情况现在已经进入31个系统。94个数据集成任务,是一个什么概念?31个系统之间两两之间的关系,因为中间还有一个共享库已经有94个,我们可以理解成网络的布线系统与系统之间拉的数据库,涉及到的表格,现在已经有350多个借口,350多张的目标表在数据里面已经集成在一块了。这个工作我们大概是这样。

  第二对于一些没有本地数据库系统的话,我们是提供了一种数据掌握的技术,主要是和数据集成进行一个户。首先数据访问是一个青量级的话,这样对于一些小型的业务系统可以提供,围绕这个数据访问的技术进行这样一个访问,进行一个时时的数据访问。

  第三数据的交换,数据交换主要是解决两两系统之间数据之间,我们校园卡消费的数据,因为我们学工的部门对这个校园卡的数据进行分析,这样的数据是非常巨大,这个数量非常巨大。除了我们现在没有其他的部门来,我们直接在他通过这个数据交换平台把这个数据进行一个交换。这个构想数据的服务主要是以下三项,也是整个构想环境的基础。

  这里有一个想和大家探讨的,数据集成如何做到稳定可靠。其实这个也是我们在座数据项目当中遇到最大的一个问题。首先我们在三个方面做了一些工作。

  一个是在数据共享的数据库模式设计上,我们提出了一种通过对象的方式来进行数据模式的设计。这个主要是希望能够做到以后共享数据库的模式,做到与业务系统无关。只与业务相关,保证这样一个扩展性。

  第二需要设计一套规范数据集成的规范,所有的数据计算刚说的31个系统90多个集成的任务需要有这样一个数据集成的规范。这个工作我们非常容易,因为我们前期做了,就像我们网络布线一样,希望有一个规范布线的系统。

  所以在这个数据集成的组织已经在这个更新上面,我们非常重视。第三个加强数据集成的监控。首先每天跑的数据集成的任务进行日常的监控,以及异常的这样的一些处理。这个图我们可以看得出来,左边不太清楚,是我们一个数据的一个监控画面,以及每天数据集合量的一个变化。

  第二围绕基础数据库开展这样一些服务。基础数据库我们刚才说过,主要涵盖人才物方面学校各方面的数据的资产。暴露出来的话主要是现在来说主要是提供基础的数据查询和初步的统计分析,这样一些工作。基础数据库我们是把它定位一个操作数据库,是作为未来数据仓库的一个全新准备的库进行建设。

  这个是我们目前数据库的情况,在人方面我们基本上把在长在爹离退休的所有数据都已经进入了基础数据库,现在还未开展是一些非全日制的,以及一部分的效率。在资产方面的话,现在入库主要是我们的公共资产,借助物、公用房、注册等。在才方面的话,入库的话主要是个人的一些缴费的信息,下一步重点要来说,把学校经费方面的财务信息进入到基础数据库。这是基础数据库的统计,整个系统我们按照决策分成四大类:分别向我们的校领导,我们部门的管理人员。院系的管理人员以及我们的个人用户。这个决策分裂进行权限的管理,这是我们系统上的一个演示,整个基础数据查询这样一个截面,这是在校生的一个分析的情况。

页面功能 【打印】 【关闭】 【我有话说】

MOOC风暴来袭

版权所有:中国教育和科研计算机网网络中心 CERNIC,CERNET,京ICP备15006448号-16,京网文[2017]10376-1180号

关于假冒中国教育网的声明 | 有任何问题与建议请联络:Webmaster@staff.cernet.com