Zilliz星爵:高维打击,OLAP数据库的下一程

时间:2022-08-13 01:07 作者:澳门电子游戏正规网站
本文摘要:一个月前,在IBMSystemsopentower上,IBMSystemsopentemsopendowerower总经理Kenking在媒体交流会上再次强调了Power9架构的优势。总之,在性能方面,与X86相比,他说悬挂这个词很差。在一定程度上,这种数据处理能力的大幅度提高是有关的,Zilliz这家看起来不太引人注目的数据库公司是诗歌能力者之一,领导IBM发表的是国内首个GPU硬件加速OLAPS数据库一体化的MEGAWISE。 这对Power9的性能有多大提高?

澳门电子游戏正规网站

一个月前,在IBMSystemsopentower上,IBMSystemsopentemsopendowerower总经理Kenking在媒体交流会上再次强调了Power9架构的优势。总之,在性能方面,与X86相比,他说悬挂这个词很差。在一定程度上,这种数据处理能力的大幅度提高是有关的,Zilliz这家看起来不太引人注目的数据库公司是诗歌能力者之一,领导IBM发表的是国内首个GPU硬件加速OLAPS数据库一体化的MEGAWISE。

这对Power9的性能有多大提高?Zilliz创始人星爵(本名谢超)当时,利用GPU的高并发性,数据处理性能比CPU的框架提高了100倍,同时硬件成本减少了10倍,数据中心的运输维护、能源消耗成本减少了约20倍。这些数据的背后是Zilliz的价值,从星爵慢的语速结束,记者们可能还没有反应。但是,更令他们困惑的是,基于GPU硬件加速的新一代OLAP数据库可能不是新的霸权技术。

结果,计算力过于这个时代属于人工智能,但不要忘记作为最重要的基础的大数据。放眼望去,各行各业无论是冲刷的历史数据还是产量数据越来越复杂,享受数据的企业都期待着更好的数据分析服务来调整和控制自己的业务。但是,现有的处理方案,例如,基于Hadoop的技术成本低,但是分析速度不能满足企业的市场需求,收集数据的处理也有时效性。总的来说,数据库处理主要面临两个瓶颈:第一,数据计算速度与处理器有关,处理器越强,计算力越少,处理越慢;第二,数据访问速度,数据应从磁盘加载,然后转移到内存,转移到处理器进行分析。

这两个问题在数据库的发展中还没有消失,交错妨碍了彼此的发展。例如,通过水平扩展可以减少更多的处理器,但这不会减少数据访问速度。之后,经常出现的A6、SSD的固态硬盘将数据访问速度提高到了数量水平,但处理结构不得不改变,例如数据仍然放入固态硬盘,存储器中。

这样的问题来了,因为存储器比固态硬盘多了一个数量级的访问速度,所以得到更多的数据,CPU的计算能力又跟上了。所以,不能在处理器上写文章,陷入了你上下的死循环。这是当时在Oracle成为数据库的明星爵士乐思考的问题。在世界顶级数据库专家聚集的系统中,他对这个产业的理解仍然只是木村明确的技术细节,回到了那些基础问题。

为什么数据库的发展不会?为什么大数据都有这个?Hadoop方案频出?为什么数据分析跟不上数据产量?毕竟,明星爵士之所以告诉他,是因为数据库处理系统的计算力太大了。数据库的indexes放慢了数据采访、分析的速度,本质上是用空间交换时间,计算力慢1万倍的CPU不是更好吗?他想起了indexes。之后的数据有可能只剩下1TB了,但是现在有可能留下1.5TB到2TB的数据。

但是,在改版数据的同时,必须改版索引以确保数据的一致性,不会减慢放入改版数据的分析速度,算法也会变得更简单。这又是另一个死胡同,摆脱了这个思维困境,一个大胆的假设不要求indexes。上世纪80年代以来,indexes被视为数据库的标准,但实质上,像电池宝被视为手机的标准一样,明星爵士指出,力量过强,如果足够的话,indexes可能不需要。

2012年,In-MemoryDatabase系统的频繁出现也解决了一些问题,但他确实可以展开高维压制-GPUUUTO处理器智能手机是高维压制。这条路不通,他正在寻找创新数据库的机会。

公里/小时降本是基于高维基于GPU,加快的数据库研究始于2006年,当时主要在GPU进行数据库处理算法。随后,数据库处理算法在大幅度扩展和优化中,与之相关的话题在每年的SIGMOD、VLDB和ICDE三大国际顶级数据库会议上被业内人士探索,但直到2013年,深度自学的兴起使GPU的市场普及度达到了高潮。基于GPU这个新硬件平台的自然优势,人们对它的理解还是不正当的游戏机,可以成为CPU的服务器芯片。

更重要的是,以英伟达的CUDA为代表的GPU,研究开发门槛也减少了。这应该是高维压制的临界点,星爵还在寻找从常态到异化的数据库创新。

于是,2015年下半年,谢超所在的团队完成了,Oracle12c所的多租户数据库开发后,是时候离开这个已经服务了6年的地方了。在Oracle的那一年,他经历了第一个项目的立项,如功能分析、需求分析和设计。

值得注意的是,2013年,星爵所在的团队开发了具有Oracle12c的第一版,c代表cloud(云计算),这是Oracle首次为云而生的数据库,为未来Oracle数据库的发展奠定了战略方向。但是,这个世界上仅次于的数据库巨头打算在云计算市场发挥力量,是他硕士毕业后转入Orale领导的第一年,这比Amazon在2005年首次明确提出了云计算平台的开发晚了4年。不,Oracle首席执行官Larryellison,当时云计算显然不是男性,指出这是一个奇怪的概念。

与前上司的态度不同,明星爵士乐有机会逃离GPU离开数据库。他忠诚地指出,在与数据库巨头竞争时可以突破差距。GPU经常出现,数据的获取速度和数据处理速度超过了平衡。

此外,由于GPU的置放能力近年来以数十速度大幅度提高,这与数据供应相近的速度同时基于IBM这样的高速技术,特别是在Power9服务器中使用的GPULink2.0,GPU之间可以创建3条地下通道对于Power系列韧性一体机来说,基本的市场需求点是软件制作硬件销售,因此IBMF显然用于Zilliz的数据库软件后也不会增加硬件销售量。数据分析速度问题解决了问题,接下来看能否降低成本。星爵说(公共编号:),Power9一体机每套约90万元,与Oracle相比,前者占优势。更重要的事前确保和能源消耗成本。

以前,在数据库中心挂上服务器占有一半的机械室,现在一台服务器可能足够,节约了数据库中心的空间,后期的运输维护、能源消耗也自然减少。除了配备在X86、Power这样的韧性一体机外,Zilliz的GPU、GPU、数据库软件也应用于互联网、金融、政府等行业,他们自由行POC,将数据库系统配置在生产环境中,解决问题技术落地。他们预计今年不服务,30-50家客户。

他也寄予厚望云的SaaS数据库方案,指出未来有相当大的茁壮空间,现在他们的客户有AWS、腾讯云、蚂蚁云等云制造商。下一个Oracle的机会市场还处于初期阶段。

Zilliz现在是中国唯一成为GPU数据库的创业公司,其他获得大额融资的有3家,其中2家在硅谷,1家在以色列。这四家公司在OLAP数据库市场的年收入特别少。但是,据Gartner统计,2017年,OLAP数据库是约183亿美元的市场,到达2020年,预计不会超过228亿美元。这个领域没有机会成为下一个Oracle和安卓。

星爵这样指出。一个问题是,既然这个市场空间的想象力这么大,巨头们为什么不忽视呢?理论上,既然英伟达和IBM这样的大公司有硬件,那么以这样的优势,对GPU数据库软件的自然也不奇怪。另外,在数据库领域,Oracle的盘子,Zilliz这样的创业公司有多少机会呢再行从技术层面来看,数据库作为基础系统软件,其管理制度的门槛虽然不低,但对于传统基于CPU数据库的Oracle来说,如果自由转换为以GPU为中心的数据库,从硬件到软件必须包括存储、优化、数据管理和调整这个过程看起来没那么精彩。

手机APP,甚至不是ERP,也不是CRM。星爵说明,微软公司在PC操作系统中漫游了几十年,但手机这个硬件平台的竞争力完全被忽视了。从另一个角度来看,即使大公司有转入的能力,其共同性也不会迟到。

另一方面,从商业的角度来看,如果大型企业使用GPU离线库软件的话,肯定不会影响现有的业务线。例如,Oracle现在最差的是Exadata,这是2010年收购SUN并开发的。那个投入了数十亿美元的产品线,如果还没有恢复成本的话,那个目标应该是销售更好的Exadata,如果转向GPU的服务器的话就不会变得非常谨慎。

因此,近年来,大型企业的战略自由选择也开始发生变化,一般是保护自己擅长的硬件,在软件上寻找合适的伙伴加入开放平台,执着于大包的大包。IBM正式成立的Open,Power基金会就是这样。因此,星爵毫无疑问,在GPU数据库的道路上,他们不会很快与Oracle相撞。

创业公司的机动性更强,但并不意味着Zilliz进入新兴领域比大公司容易得多。公司发展战略、商业拓展、市场销售等方面都是CEO星爵近两年面临的挑战,而且未来几年可能还会持续下去。一些挑战使这个团队在这两年中绕道而行。

最烦恼的是产品化的识别,初期如何在产品和市场上找到无缝的接近点,使他们无法权衡。最初必须相容。几乎不能说与现在市场的所有(系统)相容。选择哪个房子相容本身也没有错,但最后能否投票决定最有价值的客户可能需要很多工作。

对据不同的方案对应数据库,他们很快制作了产品,但是随着系统的急剧增加,这种做法今后在技术上扩大并不容易。他们现在更期待提取其共性,制定统一的方案与多个系统相容,即使研究开发工程进度不适当减慢。

对于OLAP数据库软件来说,本质上是平台,ERP、CRM等企业级软件都是在数据库上制作的。明星爵士乐显然,下一代数据库技术需要基本利用各行业的大数据,包括病死的数据。

为了这个目标,Zilliz正在推迟市场的扩张。他们已经与包括英伟达、IBM、伟创在内的渠道业者、系统合作业者合作。

流通特渠道的销售是现在的战略,这种方式使Zilliz拥有硬件合作伙伴,后者也出现了自己的渠道业者,头部客户的关系也不会更有效率,但是如果自己开设销售团队的话,效率就跟不上了。换句话说,他们今年的焦点偏向于产品的落地,考虑到技术和产品的开发,下半年也不会在FPGA开发数据库的场景化。

我一定要创业现在正好是Zilliz正式成立两周年,回顾当初离开Oracle的要求,明星爵士的问题非常强烈。在那里工作结束的第一天开始,他为创业积累了经验——很久以前就确认了自己一定要创业。他说自己本质上讨厌执着冒险,不知道空间。

创业不为人知,但自由选择的领域明显是他擅长的。在威斯康星大学麦迪逊分校学习计算机科学硕士学位时,他专门从事数据库,然后在Oracle读书和现在都能做到。

他还将硅谷文化转移到Zilliz,公司基本上是硅谷的极客范。工程师的身份使他重新加入了臭味相投的人才。他希望重新加入的早期员工有一个共同理念:为了让热情有意义的事情一起回顾,偷偷地。

我赚了钱。在团队内部,他尊重个人英雄主义,希望每个人都能独立,这也说明了他为什么选择星爵——银河护卫队来保护国家银河系的英雄——作为自己的花名。星爵在宇宙中探索,但没有告诉下一个目的地,他也吻了创业中的不确定性。在这个过程中有挑战的也是会计,这已经足够了之后说结束了也不会成为下一个你探索的起点。

有骑士堂吉诃德的意思,漂浮在宇宙中的星爵在他眼里也结束了。但是,如果能预见人生的话,很少有体验。

他补充了道路。记录:主题图源于Behance,作者Ilyatselyutin的原创文章,允许禁止发表。下一篇文章发表了注意事项。


本文关键词:Zilliz,星爵,高维,打击,OLAP,数据库,澳门电子游戏正规网站,的,下,一程

本文来源:澳门电子游戏正规网站-www.tjjunnuo.com