订阅业界RSS CSDN首页> 业界

日志易:银行如何应对双十一TB级交易数据冲击?

发表于2017-11-15 09:34| 次阅读| 来源互联网| 0 条评论| 作者互联网

摘要:各大银行纷纷加入“双十一”盛宴,系统每天产生TB级的交易日志数据,日志易帮助银行搭建全新的日志大数据解决方案,应对海量日志数据挑战。

 据新华社报道,“双十一”网购节期间,天猫商城11日全天成交额再次刷新纪录达到1682亿元,京东商城累计下单金额超过1271亿元,苏宁易购全渠道销售迎来163%的增长。“双十一”我国电商交易额再创新高。

而今天的“双十一”已不仅仅是电商巨头们的狂欢,银行们也纷纷加入盛宴,像农业银行信用卡免息分期购买iPhone X,平安银行在京东商城消费满10元立减9元,华夏银行云闪付一折观影,招商银行信用卡积分兑换星巴克等,各家银行纷纷出招,刷卡全是各种优惠、立减、送礼、N倍积分,可谓赚足眼球。

是什么让各大银行对“双十一”表现出如此高的热情?显然目的不仅仅是借势营销,马云的一句话暴露出更多玄机,马云在央视采访中说到“双十一对我们(阿里巴巴)来讲没有什么赚钱,而是大量提升技术”。 随着互联网+的持续深入,银行和金融服务行业面临着技术革新带来的众多机遇和挑战。 例如“双十一”期间,系统每天产生数以 TB 计的交易、支付、渠道等各种日志数据。银行机构需要建立全新的处理架构和策略,来应对海量数据对交易系统带来的冲击。

图1. 日志易大数据界面

为什么是日志数据?

以银行核心业务手机银行App为例,为了对系统运行健康度作出实时判断和快速决策,业务运维团队需要对用户频繁访问的页面如App登录页、跨行转账页面等模块的访问量和平均响应时间做实时统计分析,这就涉及到TB级日志数据的实时搜索处理。

传统的统计方法和技术,很难同时兼顾Fast(快,实时搜索)、Big(处理数据量大,TB级)两方面需求。尤其是手机银行业务排障时,因其涉及十几个模块,各模块日志数据分布在不同的服务器上,以往出现服务故障,排查起原因非常不便,效率低下。

日志易作为专业的日志大数据实时搜索处理产品,可通过以下功能,为该类业务提供解决方案:

1、日志汇总,方便快速查询

采用日志易平台后,手机银行所有相关日志统一汇总,用户只需点击日志标签,即可快速查询到所需日志。日志易提供灵活的SPL语言(Search Processing Language),对实时数据实现统计分析,并提供了强大的图表功能用于结果展现。

图2. 日志易:各服务器业务响应时长对比

2、完善的权限管理,日志信息更安全

日志数据中包含了大量业务信息及用户隐私信息,日志数据的使用在任何企业都是敏感话题,金融企业更是如此。国家网络安全法对日志数据的管理和保护也有明文规定。

日志易采用HTTPS协议来保证日志数据传输过程中的安全性,同时通过完善的权限管理体系维护日志安全。例如日志易提供日志分组和用户分组功能,保证只有手机银行运维团队才能查看手机银行相关业务日志。2017年下半年,日志易成功通过ISO27001安全认证,这标志着日志易在信息安全管理与质量管理体系方面受到业界权威机构的认可,能够提供令客户放心的产品与服务。

3、业务日志关联分析,实现分钟级故障定位

以上述银行核心业务手机银行App为例,使用日志易后,用户可以将所有模块日志进行统一收集展示,各模块间通过唯一的业务流水号进行关联,这样操作员在前端搜索框输入流水号,就可以进行日志的自动关联查询,并将日志按时间排序,保证日志的显示顺序和业务模块的处理顺序一致。

日志易还提供了“上下文查询”功能,运维人员在筛选出问题日志后,可通过“上下文查询”快速提取问题日志的前后各100条日志,方便快速定位故障原因,实现分钟级故障定位。

图3. 日志易:日志分析功能概览

作为成立不到4年的初创技术型公司,日志易不仅获得了顶级VC真格基金、红杉资本的青睐,也服务了中国银行、华夏银行等大量银行业客户,这些成绩的背后,体现了日志易强大的研发实力和优质的本土化客户服务能力。CEO陈军本身是20年互联网行业老兵,从程序员到研发VP,厚积薄发。日志易研发团队核心成员全部来自国内知名互联网公司。 互联网化的研发管理体系,保证了产品的快速迭代和持续交付。最近3个月,日志易连续发布了1.10和1.10.1两个重量级版本,引入了机器学习技术,让运维更智能。未来,日志易希望能够用更优质的产品和服务回馈客户,为银行业客户的交易增长保驾护航。

 

原文链接:http://www.cctime.com/html/2017-11-14/1336958.htm

 

【免责声明:CSDN本栏目发布信息,目的在于传播更多信息,丰富网络文化,稿件仅代表作者个人观点,与CSDN无关。其原创性以及中文陈述文字和文字内容未经本网证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本网不做任何保证或者承诺,请读者仅作参考,并请自行核实相关内容。凡注明为其他媒体来源的信息,均为转载自其他媒体,转载并不代表本网赞同其观点,也不代表本网对其真实性负责。您若对该稿件由任何怀疑或质疑,请即与CSDN联系,我们将迅速给您回应并做处理。】 

0
0