大数据现在不仅仅是IT行业的一个炒作的概念,更像是一场探寻与挖掘数据价值的运动。如今,大数据不再仅仅局限在媒体与厂商之中的讨论,它犹如一场数据旋风开始席卷全球,从各行各业的IT主管到政府部门都开始重视大数据及其价值。最为典型的例子就是,作为世界上IT水平最高的国家,美国已经开始重视大数据及其相关价值,将大数据上升为国家意志,奥巴马政府投资2亿美金启动了“大数据研究和发展计划”,希望增强收集海量数据、分析萃取信息的能力。正可谓时不我待,我国的经济总量位居世界前列,与此同时具有世界上最多的人口,随着信息化日渐深入我国百姓的生活,数据及其价值是一项非常值得探索的领域。事实上,国内一些行业比如像互联网、证券等行业的公司已经在大数据领域进行了一些探索,他们对于大数据的观点与做法非常具有借鉴意义。为此,针对目前国内大数据和信息化在证券行业中的应用情况,有幸邀请到民族证券公司颜阳博士畅谈了大数据、证券行业信息化建设等话题。
大数据对证券行业意义非凡
随着社交化成为人们生活与工作中必不可少的环节,如何让社交网站所产生的大量数据产生价值成为最近几年一些基金公司或者科学院校思考的问题。2011年,英国对冲基金Derwent Capital Markets建立了规模为4000万美金的对冲基金,该基金是首家基于社交网络的对冲基金,该基金通过对Twitter的数据内容来感知市场情绪,从而进行投资。无独有偶,通过分析Twitter用户对股票的敏感度以及市场情绪也成为科学机构的研究对象,2012年年初,美国加州大学河滨分校公布了一项通过对Twitter消息进行分析从而预测股票涨跌的研究报告。
图一:英国对冲基金Derwent Capital Markets通过分析Twitter数据来预测股市的波动,该应用为典型的大数据应用,通过实时分析数据来获得更为准确的投资趋势。图中红线代表Tweets中“平静”数值;蓝线表示3天后的道指变化。在这两条线段重合的部分,“平静”指数预测了3天后道指收盘指数,从图中我们可以发现红、蓝两线经常走势相近。
实际上,当前广大行业用户需要明确知道的一点就是,过去传统的数据仓库与当前的大数据处理最大不同就是一个是往后看,另外一个是往前看,这就好比数据仓库是坐在自己的车里,通过后视镜看后面的镜像,而不是你面前所面对的东西;而大数据分析更多地是向前看,看我们即将面对什么样的问题,而做出分析与预测。
民族证券公司颜阳博士表示:“企业数据就是新时代还未开采的石油,具有非常之高的价值。国外一些金融机构已经开始做一些前瞻性的研究,这种做法是非常值得学习和借鉴的。比如国内已经有一些券商开始研究互联网、微博与股市的关系,通过舆情分析现有的业务与数据研究上市公司的走势。”
不过颜阳也认为目前国内券商在大数据方面仍然需要有很多工作要做。他表示,国内大部分证券公司仍然没有摆脱交易性数据为主的特点,有前瞻意识的证券公司已经开始做一些转型了,对微博、互联网等外部数据进行一些分析与预测。民族证券在这方面显然走在了前面,根据颜阳透露,目前民族证券的数据中心建设开始做第三期了,第三期的重点就是开始涉及到非结构化数据的处理,从互联网、微博等平台抓去一些数据来做分析。民族证券这种能够很好地顺应IT应用趋势、大胆尝试与创新的做法值得肯定。
证券行业该做好哪些准备?
大数据实际上在某种程度是一种IT建设成果的转化,如果没有一个良好的IT基础架构以及业务应用环境,那么即使上了大数据解决方案也不一定能够获得多大的效果。从民族证券颜阳博士对于信息化建设的观点我们也能看出这一点。
颜阳表示:“对像云计算这些比较热门的概念其实需要冷静的心态。特别是在金融行业,更加需要一个谨慎的态度。这并不意味着金融行业就是一个保守落后的行业,大部分的金融行业用户对云计算以及IT基础架构建设都是做的多,说的少,一步步的稳步推进着云计算的建设。比如我了解的情况就是,目前很多证券公司都在做虚拟化方面的工作,包括服务器虚拟化和桌面虚拟化,甚至有些公司已经把一些相对关键的业务应用放在了虚拟化环境之中。”
证券行业其实是一个跟市场波动紧密联系的行业,大牛市和大熊市之间的区别同样能够反映在证券公司身上。好行情之时,证券公司往往迎来利润的高峰期;差行情之时,证券公司甚至可能需要面对亏本的局面;如此一来,其实云计算和大数据的应用模式是非常适合证券行业的。颜阳对此也表示认同,他表示:“证券行业的确是越来越有必要推进云计算。业务高速发展与扩展,意味着数据中心设备、应用都需要扩张,这会造成机房空间紧张、管理成本上升等难题,我们需要把以前的资源有效的利用起来,这样才能够在市场波动之中立柱。”
另外,针对市场波动对证券公司IT建设的影响,颜阳还着重强调了CIO需要有更加合理的规划,他表示:“一个聪明的证券公司,一定会在行情比较清淡的时候加强基础建设,替换老系统,推进基础设施的建设,这时选择这么做的IT风险是最小的。在大牛市行情好之时,做一些系统变更的风险系数非常之高,并且这个时候IT会非常繁忙,管理容易出错。在冷静的时候进行规划和实施,充分发挥云计算的特点、利用好过去的资源,虽然投入会较大,但从时间上均摊来看,会取得一个非常不错的投入产出比。”
最后,颜阳博士认为内存计算将成为证券行业关注的一个焦点。