前言
在飞快的e-mail文件往来间,我们已经很难想像以前人类所用之飞鸽传书需要花费多少时间才能把讯息传递到收件人手上,然而快速的消息资料取得,相对地,就造成资料的暴涨,我们每天面对无数的mail 、无数的讯息,及无数的资料,如何选择需要或有用的资料,便成为当前企业面对的重要课题。因此企业知识管理变成热门的议题,而智慧资料库亦因而逐渐受市场需求。
为了说明企业知识管理的重要性,我在此先将资料、资讯及企业知识定位清楚:
资料(data)
所谓资料即未经整理、筛选过的讯息,网路上来往的一切记录、click的栏位、客户交易的金额等,这些全部都是资料(data)。
资讯(information)
资讯是把资料加以分析、summary 后成为有用的讯息,是主管需要的information,有利主管做判断的资讯。
企业知识
企业知识则是须靠时间、经验累积的,就如一个主管从事某一行业很久,他懂得何种产品该如何促销、该促销多久、价格等等,这些是要靠时间经验累积的知识,与一般资讯不同。
以资料仓储帮助企业知识管理
在现今资料暴涨的时代,若一企业储存了大量的资料,但却不知或无法将其有效利用,成为有利企业的资讯,则必将成为牺牲品。因此企业知识管理变得十分重要,而所谓企业知识管理即是要于最短的时间,将企业搜集到的资料变成有利于主管做判断之资讯。
这个机制即是企业需要导入资料仓储的重要原因。而更进一步说,企业在导入资料仓储后透过历史资料的分析使较年轻、资浅的主管也可以透过系统的分析,快速累积经验而迅速的养成知识,因此导入资料仓储即为企业知识管理的重要环节(图一)。
《图一 Data Warehousing Components》 |
|
资料仓储的好处
所谓资料仓储即为一种存取方便的整合性资料库,这些资料系取自各种不同的来源,经过转换成有意义的主题与资讯群组,以提供查询报告、分配资源、决策制定,以及思考支援。对于建置资料仓储能为企业带来的好处,在此我先以一般企业在未做资料仓储前常会遇到的3个问题来说明:
1.高层主管与IT人员间的概念差异:
一般企业高层主管经常要求需要看经营报表,因此须由公司内IT部门制作,但主管因应市场的不断改变,自然需求会不断调整,此时技术人员可能为了前一个需求在制作时,主管已经想要另一个解答,此时冲突或不愉快便容易产生。加上就企业人力规划考量上,技术人员并不喜欢做这些拉报表之事,而企业培养出一个成熟之技术人员亦不希望其永远只会做拉报表之杂事,若主管的需求一直不断增加,并不时改变时,没有完善的资料仓储系统前提下,IT 人员是有可能天天沦为拉报表之重复工作中,人才流失率亦相形增加。
2.分析历史资料的不足:
传统中MIS放的多半为现况资料,其历史资料不是ready的,碰到问题或老板要求时,MIS人员变成要再写程式去把历史资料找出来,如此之作业模式既费时长且不经济,而毫无竞争力可言。
3.跨AP之整合问题:
data在不同AP间时常无法整合,例如同一日期在甲系统用西元表示,而在乙系统用民国表示,如此当在做分析时,就必须花很多功夫来重新整理及整合资料,特别是当AP又分属不同的作业平台时,整合的问题将更大。
以分析报告辅助经验法则
举一个券商的实际案例来说明建置资料仓储带来之优势:对于每个产业而言,企业主管皆有一些domain knowhow 并需要MIS人员做经常性报表的,此券商主管也不例外,在一次特殊状况中,此主管用过去的经验判断问题所在,认为的是A,而当MIS人员经由资料分析出来的结果却是B,此主管极为震惊,但最后事实证明确实是B。可见透过历史资料的收集分析,而产生出的明确报表,因有详细数字,使得可靠度与可信度大幅提升。
因为人毕竟不会将所有发生之历史事件清楚记住,而以上的例子即是主管忘记曾经发生过甲事件,因此导致结果为B而非A,此为利用电脑储存资料的优点。然而若企业未建置资料仓储系统,而是用传统的方式分析,通常需要MIS人员花费很长的时间来分析才能得出问题所在,可能导致已不符时效性,而失去了商机。此时企业若导入资料仓储系统,则可在极快速的时间内分析出问题之症结所在,因此当主管在做决策时,过去只能凭借经验法则加上等待很久后之分析报告来做判断,但若导入资料仓储系统,则可于有效时间内用实际的报表、数字来验证或提供决策资讯。
资料仓储系统的导入
由此可见建置资料仓储对于企业知识管理的重要性,然而资料仓储是需要一段时间的建置过程,须经过后端ETL资料转换,并将资料正确的导入资料库,及建置前端工具等一系列的过程,因此选择协助建置资料仓储公司,变成极为重要,除了要有好的产品外,有经验的建置技术顾问也极为重要(图二)。
《图二 DW Physical Architecture》 |
|
现在在市场上虽然很多公司为提供企业知识管理或客户关系管理系统者,但多数仍只做前端OLAP(线上资料分析)的,并不是全面性的考量企业需求。虽然OLAP工具有其贡献度,且其强大明显易见的效果,这也是许多企业会考虑采用的原因;相较之下,建置完整资料仓储系统不仅费时、费力,须投入之金钱也极为可观,这常导致许多企业驻足不前,或选择只做显而易见之前端OLAP工具。
但以本人过去多年从事资料库/资料仓储的建置及研究工作中,必须在此说明,目前市场上为了因应需求,多数之厂商在提供解决资料大量涌入或管理资料系统时,多数使用的方法为建置更强大之资料库,或者使用前端OLAP系统来处理,然而在此,本人提倡的却是建置资料仓储系统的model 设计,相信此概念也会是未来的趋势。我们重视的是model设计的完整性,重点是model而非资料库大小或前端呈现工具美观与否。
我们提倡的建置模式,是拥有一定时程规划,首先为最重要的即model之设计,当客户还不是很清楚自己的需求时,我们以过去的经验,结合对不同产业熟悉之技术顾问,先帮客户设计一个资料仓储架构,再经与客户端沟通,依不同企业需求做调整。
此阶段最需要有经验的顾问人员,因其不但技术纯熟更清楚不同产业的需求,其能很清楚知道系统设计的重点,而给予企业建议,如此能掌握建置时程不会因企业需求调整或方向不清而一直拖延,导致建置计划失败。且如此才能设计出完整的系统,不会有所偏失。 model设计完成后才是资料转换、资料库建置、前端工具建置等一系列过程。
实际案例
我可以提出几个实际碰到的例子,来说明企业决定建置资料仓储后仍应慎选建置模式及建置顾问公司。此例为某企业决定导入之资料仓储系统,但并非用本人所提倡之此种概念来建置,之后面临了一个问题,即系统并不会区隔因事件引起的不同行为模式分析,举例来说,某甲于10月10日结婚,其婚前与婚后导致有许多行为模式的不同,而传统的资料库或一般以OLAP工具为解决方式的系统,并无法将其区隔为不同的个体来分析,但因其行为模式已不同,系统若无法将其区分为不同的个体,则会导致分析出来的结果错误。这是在当初设计系统model时就该考量到的因子,而这也是由有经验的顾问团队来建置资料仓储的一个重点。
慎选顾问,让企业更上层楼
以上很概括的说明了企业知识管理的重要性,及导入资料仓储的好处,并表达本人对资料仓储建置的观点。综合而言,在此讲求时效、掌握有利资讯的时代,企业的确需要资料/知识管理,而在目前市场上可看到不错的资料仓储系统,其能满足资料暴涨却又极需快速掌握有利资讯的时代。但本人仍希望呼吁企业在花费极大成本投入建置时,真的需要慎选有良好方法策略及经验之公司,才能将资料仓储系统发挥完善,协助企业更上层楼。
(作者为智酷科技顾问公司资深技术顾问)