|
安藤隆郎先生:
首先让我来介绍一下我们的公司,我是来自三菱电机集团公司的,众所周知,三菱电机集团公司,是三菱集团的一个主要的组成部分,三菱电机去年营业额达到330亿美金的营业额,所有的员工加起来超过98000人,当然三菱电机集团里面,包括了除了IT以外,还有宇宙开发,包括各种各样的通讯还有家电等等,我属于三菱电机底下集团有个叫三菱电机信息技术有限公司的,我们简称MDIT公司,MDIT公司在三菱集团里面侧重于IT的解决方案,其中包括我今天要着重讲的Data与数据的核心解决方案,还有IT
的Management,还有软件和硬件的产品。
首先我想介绍一下我们的数据的核心解决方案,在我们的三菱MDIT看来,我们把企业IT的一个整个应用架构分成四层,其中我们最着眼的是第二层的数据架构,在数据架构这个层次里面,我们会提供包括所有的对数据有关系的解决方案,其中今天要着重给大家介绍的一个是分析解决方案,还有一个是安全的解决方案,当然其他还有包括认证、保存和删除等等解决方案。我待会儿详细的以安全解决方案给大家讲解一下我们的数据核心解决方案。
首先,我要介绍的是DIAPRISM这么一个分析的解决方案,DIAPRISM这个产品在业界领先的一个数据仓库引擎的解决方案,他包括以下的特点,比如说它有超高速检索的性能,和对非确定的检索有非常自由度和灵活度的检索功能,特别是对海量的检索数据,它会提供更加准确的一种分析。它能够提供通过我们DIAPRISM这个解决方案,对企业来说可以有效的提供他更准确的一些分析,对企业的决策层能够做到更有效,更省钱的一种智能的决策辅助。底下我给大家介绍在各个行业领域的几个比较成功的案例,首先我想给大家介绍的是在一个超大型的零售企业里面的一个应用,这个零售企业可以看到,它将近有两年的,将近达到6亿条的购买的数据,这数据基于100多万顾客的数据,这些数据通过我们的六个服务器,主要应用在什么地方呢?主要应用在零售的企业,通过不断的DM,把DM的结果返回,返回以后,通过分析放到我们数据仓库里面进行分析,然后针对性的,对他们的企划和业务的零售部门进行指导性的一些回馈,不断的进行这么一个循环。可以看到,这个系统在客户的应用层面非常成功,客户不断的增加他的服务器,最终达到6台DIAPRISM服务器,供230个最终的客户进行分析使用。
这个例子是在通讯行业的应用,电信行业的应用,这个客户是在日本最大的一个移动的运营商,你可以看见这个数据量,移动运营商的数据量可能在日本是最大的数据仓库了,将近在一年的时间里面,会有60亿条的手机上网的记录,通过这些记录的分析,这个移动运营商他会不断进行挖掘,进行分析,首先和竞争对手进行对比,提供有效的有竞争力的价格体系,甚至通过挖掘,他们的一个行为模式,客户的应用的行为模式,诱导怎么做好促销,诱导我们手机的客户更有效的通过网来访问我们的Internet
Netphone。
第三个例子,就是在一个金融行业的例子,它是一个国际性的保险的一个企业,这个企业实际上它在导入我们DIAPRISM之前,他已经有了自己的BI的应用,但是有一个问题,因为这个数据量非常大,他将近用6个小时知道,导入我们的之后,实际上你可以看到,这可以大大提升他们在商业智能分析,包括在实际的操作当中一个可能性,实际上在导入我们这个DIAPRISM以后,他们不断推出新的产品,对他们企业价值提升得到了非常大的帮助。这张图可以看出来,跟普通型的传统型的数据仓库相比,我们DIAPRISM,数据越多,越能显示出我们DIAPRISM的优势,如果数据量达到10亿级别的数据量,首先在检索的数字上,我们可以达到十几秒的速度,检索性能相比我们可以达到他们200倍的检索性能。
下面这个我想讲一下,为什么我们DIAPRISM做到这样优异的性能,我罗列了三个特点,第一、在文件结构上面,它有检索的文件结构上面,比较有特点的是它是用数据块形式的一种文件结构,也就是说,具体的说来,它是基于自段列的数据储存方式,检索的时候我只查询我需要的数据列,这是一个特点。第二、在数据的存储当中,我们采取了大量的压缩技术,在我们的实测结果当中,普遍来说,可以比原来的系统可以达到减少,压缩率达到他原来系统的1/5,最高达到1/40,最高一点,在我们数据的读写I/O的技术上面,用了一种分散式的多盘的读写技术,保证我们在读写速度上也能提高。
底下我想介绍我们在一些利用DIAPRISM引用在我们安全这方面的数据安全方面实际的一个产品,叫Log
Auditor这个产品,主要是用在分析这些安全记录上面所产生的一个产品,这个产品是基于DIAPRISM的技术,主要这个产品在分析一些Log
Auditor技术上面进行实时的分析,对很多不确定性的角度你可以进行一些检索,二是在高速的压缩还有有效的利用海量的Log数据有效的节省空间方面,Log
Auditor有很大的特点。
为什么要使用我们的开发,为什么我们开发Log
Auditor这个产品呢,首先在企业现在对数据级的这种安全的考虑当中,采取了很多在IT环境和IT的投资里面进行了一些安全的措施,比如说监控或者分析的需求,往往在大型企业里面,上千台,上万台机器里面,他们产生的Log是非常海量的,往往通过人工的手段几乎是不可能检索到,比如说某一台机器在某一天产生了一些泄露或者产生了Email的一些泄露,通过人工来产生的,在上亿条的记录中检索是不可能的,我们Log
Auditor这个产品提供了一些很便捷的模块,有助于管理者在监测或者监控他们安全的隐患,或者是可疑的安全方面,能够用到便捷的一些检索方式。
这张图里实际上就是说,在日本也好,或者在比较先进的对安全的管理的需求一些企业里面,实际上遵循了一个有个叫PDCA这么一个循环,什么叫PDCA,第一部就是P,首先我架构要设计整个安全的比如说规则开始,安全的系统,这个架构系统以后,我肯定要通过这个系统进行实际的操作,就是实际的监控或者实际的实施,比如说类似跟我们合作比较好的产品,通过这些产品的实施,有一些警告的日志,这些日志我们会直接导入到Log
Auditor数据仓库里面,通过Log Auditor我们进行第三步,有那些东西需要分析,我们在第三个阶段里面着重要做的,通过我们Log
Auditor,很简单的分析出你想看出来的东西,这些隐患怎么来判断,这是要提交到我们经营层和管理层,他们看到了,比如说我有部分的隐患,Email有隐疾患,加强对Email监控,就是说不断的PDCA的循环,最终可以提升我们整体的一个企业的对安全的管理水平。
底下我给大家简单的介绍一个,实际上是我们Log
Auditor在日本有一个大企业,这也是著名的运营商,这个运营商现有6000多台PC需要监控,包括在客服中心,包括在所有的业务系统里面,主要监控一些什么东西呢?比如说在现在日本,他们在监控比较多的U盘,外设的U盘,在国内现在可能还没有这种产品可以监控,他们对U盘进行泄露,非常在意,比如说文件的拷贝到U盘,或者外设里面,写入DVD的监控需要做的,作为监控,万一他违反我安全规则的话,我怎么进行证据的提取,在违反你的同时,还有没有经过认证的操作,这些操作每天通过我们Log
Auditor系统的导入和安全系统的导入,这个公司每天我们的IT经营层或者IT manager每天会收到报告,哪些人违反了这些东西,甚至针对不同的需求,我们每天或者每个礼拜都要提升他们安全的规则。这张实际上每天的一个简表报告,首先安藤先生把自己写上去了,安藤先生的老板自己看报表,看他是不是干了一些违法的事情,右边这栏是空白的,说明早上零点到24点我都不在办公室里,可能是星期天,或者我出差去了,在底下这一点,我加班,加班很晚到12点钟,在Office这一栏你可以看见,这个人不知去向,最有问题是第一列的文件拷贝,这是不允许,他没有这个权限拷贝,而且出了不止一次,连续出了六次,他们老板可能会问安腾先生,你要给我合理的解释,通过这样的形式,很快的对每个人干什么事情,他为什么干这个事情,就可以知道,甚至刚才我讲到的三和三这个地方,我们进行数据挖掘的话,他干了什么,拷了什么东西,什么时候拷的都可以看得见。综上所述,我们Log
Auditor可以在各种层面上,提供表或者提供图形,对不同的部门,不同的个人进行这种报表的,就是安全性的报表上的一些操作,而且很便捷的形式,便捷我们的工作,便捷节省我们的时间。
我今天很简要的介绍了一下我们在,因为是头一次在这样的场合,很简要的介绍了一下我们三菱数据仓库产品的一些介绍和我们Log Auditor在安全领域上的一些应用,如果大家有兴趣的话,可以参考上面写的网站,也可以直接跟比如在上海的朋友可以跟我们上海的,就是我所在的公司,如果在北京的朋友,可以跟我们三菱商社中国北京分公司的同仁进行联系,有更多的资料,详细的介绍,甚至可以做一些演示,谢谢大家。
|