文 | 张婧怡
编辑 | 苏建勋
近年来,云计算、大数据、开源技术等风起云涌,数字经济正不断带来时代变革的更多可能。据知名分析机构 Forrester 预测:未来五年,大数据技术市场的年复合增长率将达到12.8%。
近期,Kyligence 联合创始人兼 CEO 韩卿在上海举办 Data & Cloud Summit 2021 行业峰会上,正式宣布了企业全新"智能数据云"战略、Kyligence 最新产品以及一系列合作伙伴计划。
作为企业级数据服务与管理平台,Kyligence 自 2016 年成立以来,不断尝试跟进云原生时代下技术发展趋势,解决企业在数据分析、管理及治理等方面的痛点。
“数据仓库在云时代的变革才刚刚开始,新的技术架构、新的使用方式、新的成本结构都将深刻改变这个行业。未来人类使用数据,应当和今天使用云计算一样简单、方便,只需关注数据本身,而无需关注到底在哪个平台上,真正实现数据的随取随用。” Kyligence 联合创始人兼 CEO 韩卿在会上谈到。
今天,作为重要生产要素的数据正在发生根本性的变化,对此韩卿也总结了数据仓库行业假设发生的几点根本性变化。
第一,数据仓库的构建模式正在改变。过去数据仓库的构建模式是集中式的,能够解决数据烟囱(信息孤岛)问题。但现在的数据是天然分布的,数据不仅在不同的系统里面,它们甚至在多个云上,更甚者在一个云、多个数据库里面。“数据量已经大到不可能集中起来,几十个 PB 数据只是一个‘起步价’。这么大的数据量,让特别是在云环境下的数据传输变得不再现实。”
随着 GDPR 数据隐私法案的来临,企业不可能把所有数据都进行汇总。所以整个数据仓库构建模式正从“Collect”——把所有数据收集起来,变为“Connect”——所有数据有机地连接起来。
第二,使用数据的人发生了根本性改变。数据的管理和使用已经从过去只为决策者和管理者服务,渐渐演变为需要满足所有人的数据分析需求。以前是决策者、专家使用数据,或者有专业化的团队,包含项目经理、各种工程师等,经过三个月、六个月给出一个决策方案。而今天使用数据的人已经发生了根本性改变,他们是一线工作者、是非技术或者分析岗位的职场人。
图片来源:kyligence 官方
“我们发现企业不可能为每一个业务人员配备一支庞大的分析团队,而且整个数据 IT 构建模式也发生了巨大的变化,没有那么多人去服务它,所以对企业来说,要么投入更多人力、物力赋能数据管理,要么就用技术去改变它。”
第三,数据的消费方式发生了变化。以前是从已知问题找已知答案,现在需要从未知问题找未知的答案。现在的业务人员希望的是,企业可以基于已知的一些数据、文化、能力,并沉淀之后自动推荐给需要的人。“例如我们服务平安银行的时候,当工作人员去看指标,对方怎么知道现在存款指标非常重要呢?这些应该是系统自动告知,而不是工作人员自己想出来的。同时,现在大家习惯用两样东西,一是手机,二是搜索。所以,市场必须降低整个数据使用的门槛,用技术迭代来帮助客户推送更具价值的数据。”
韩卿认为,随着数据和使用端越来越多,数据的搜集与管理变得难上加难;另一方面,企业又希望数据能够多面化,顾及到、赋能到每一个业务人员,这就导致了两者之间不可调和的矛盾愈加明显,越来越混乱。“现状是企业根本不知道有价值的数据在哪里,以前是没有数据,所以企业希望 IT 把数据全部收集起来;而今天是数据太多、信息过载,企业已经不知道该要什么类型的数据。”
传统的数据平台和分析技术正面临赋能失灵,而大数据智能分析业务则日渐火热。因此,Kyligence 以云技术为核心,以人工智能为推动来解决所有的技术和数据的问题,因此“智能数据云”应运而生。
据 Gartner 调研数据显示,74% 的用户选择使用云上“分析、BI 及数据科学”的相关服务,这表明云上构建企业数据服务与管理已成为重要的发展趋势。面向这一趋势,Kyligence 也迭代了自身的产品:企业级并以公有云版本为主的 Kyligence 全新版本(v4.5) 。
值得一提的是,Kyligence 还正式推出玄武计划,加速下一代基于 Kubernetes及分布式对象存储等架构的私有云产品落地的进程,为大型企业级客户提供私有云环境运行 AI 增强数据服务与管理的能力。除玄武计划外,Kyligence也宣布 Kyligence Partner Network 合作伙伴计划,该计划将从培训认证、资源支持、推广合作等方面赋能合作伙伴,帮助企业智能管理最有价值数据,支持企业全面数字化转型。
媒体:这两年大家都在讨论开源相关的话题,包括中美在开源环境上也有一些差距,您怎么看待国内的开源环境?
韩卿:从去年开始,不管是在基础社区还是基于开源做商业化,开源都被讨论的非常火热,Kyligence 从 2015 年开始走开源商业化道路,是第一个由中国人主导,贡献到 Apache 软件基金会的顶级开源项目。我认为这是好事情,说明国内正在涌现越来越多开源的技术。通过大家在更大范围内的交流,有利于开源技术的落地和发展,更甚者加速了技术的成熟发展周期,促进中国在底层技术上的提升。中美之间差距确实会有,不过可以看到国内非常不错的一些开源社区包括我们 Apache Kylin 等等都在走向全球化,为全球开源社区做更多的贡献,这是非常好的现象。
媒体:Kyligence 出云原生的产品也有两年左右了,云原生从去年到现在成为一个非常火的概念,Kyligence 做云原生是不是可以称之为转型?我想听您聊一聊 Kyligence 做这个云原生的转型都做了哪些事,或者云原生没有那么火的时候,为什么选择云原生这个方向?
韩卿:云原生是我们的一个战略转型,Kyligence 最早出来创业的时候是作为 Apache Kylin 的开源项目,这个开源项目最早的定位是基于 Hadoop 技术帮助企业提供大数据分析服务。但在2018年我们决定往云原生方向转型,Kyligence 真正的云原生版本是在2020年初的时候推向市场,整个技术架构里面没有任何对 Hadoop 的依赖,在云上只依赖云的存储和技术资源,目前已有众多客户案例,例如瑞士银行等都在使用。
Kyligence 是一家全球化的企业,通过服务全球客户,这也让我们看到了不同市场的不同需求。较早之前,我们就会被国外的客户问到是否有云版产品,这时我们发现市场有了新的需求,从而做了调整。不过我们最开始第一个在云上版本还是以Hadoop为基础,客户反馈也不错,但是后续发现 Hadoop 带来的挑战甚至会被放大,这个时候 Kyligence 发现可能需要做一些新的转型,所以就把整个体系架构从底层全部做了更改。可以说,基于对全球市场发展以及客户需求的及时洞察,我们做了相应及时的调整,现在看来,我们做对了。
媒体:Kyligence 发布玄武计划时提到了国产化,为什么会把国产化列到其中?在国产化上,Kyligence未来的愿景是什么样的?
韩卿:Kyligence 一直面向全球客户。除了中国,我们在美国和东南亚都有一些付费的客户,尤其是我们的开源项目 Apache Kylin 在全球有超过1500家企业用户。今天提到中国的环境,尤其是在云计算方面,中美 IT的基础架构展现了不一样的地方。例如美国、欧洲的 IT 基础架构基本以公有云为主,不太会走私有云这条路,但在国内大有不同。目前 Kyligence 产品有公有云版本,我们也正在投入资源做一些基于私有云的产品。对于国产化,国内也是一个风潮。我们作为一家来自中国的科技公司通过不断发展与实践,收获了很多丰富的经验,接下来希望与大家一起共创有关国产化方面的技术架构和内容。
媒体:最近数据安全是一个很热门的话题,您也提到现在的数据是分布式的,很难将一个数据集中一个系统处理,这会导致一些很严重的数据安全问题。Kyligence 在做技术上还是战略上是如何保障数据安全的?
韩卿:首先,我们提供的是一个技术产品,我们提供的是软件本身,在这个过程中是把相应的安全和合规的要求融合在产品中了,例如利用了行业里比较流行的先进的安全能力。我也一直在强调两个方面:第一是信息安全本身,Kyligence 已通过 ISO9001,ISO27001 及 SOC2 Type1 等各项认证及审计;第二是我们也会在安全上投入更多资源,目前也跟安全的厂商合作,甚至跟我们客户合作时,我们客户会聘请第三方的安全公司扫描漏洞,确保我们的软件产品生产出来是符合安全相关的要求和规范,这些都会有第三方来做验证。
媒体:Kyligence 宣布战略升级的智能数据云还有合作伙伴的网络和玄武计划,可不可以具体从行业聚焦的角度介绍一下基于技术和生态伙伴合作在未来这一年的发展方向。
韩卿:我们在行业上还是会聚焦自己擅长的大行业,金融、制造、零售、电信等等行业,由于每个行业的特性不太一样,我们还是希望把自己擅长的领域先做深做透,这是我们的选择。尤其在金融行业,整个金融行业不管是对安全还是赋能业务本身,对于数据服务和数据分析技术的要求远远超过其他行业,所以我们会跟这些行业的头部客户或者领先的创新客户一起合作尝试做一些新的东西。
在生态方面,我们会在几个方向上发展:一方面会与更多的云厂商合作,已经合作了微软云 Azure、亚马逊云 AWS、华为云等公有云平台,后续还会有腾讯云、阿里云、谷歌云等等。另一方面,我们也希望拓展合作伙伴类型,目前合作了 各类 BI 厂商,各种应用厂商等等。