网易首页 > 网易科技 > 网易科技 > 正文

国产图数据库厂商「费马科技」通过LDBC-SNB官方审计测试,达到原纪录的7.6倍

0
分享至

2020年7月30日,LDBC_SNB官方宣布完成了对费马科技TuGraph的测试和审计,并公布了测试结果。该结果刷新了世界纪录,达到原记录的7.6倍。

近年来,随着大数据技术的发展,社交网络、交易网络、知识图谱等图数据也得以大量积累,从而有力的推动了图数据的应用。目前,图数据已经被成功应用于包括金融风控、推荐、工业流程控制、设备管理等许多领域。图数据库作为管理图数据的基础软件,也吸引了许多厂商的注意。近年来,包括Oracle、IBM、微软在内的传统软件巨头及众多初创企业都大举进军图数据库领域。

北京费马科技有限公司是一家以研发图数据库和图计算软件为目标的初创企业。在此前36氪的报道中,我们注意到这家由多名清华博士创办的公司对图计算技术有深厚的积累。今天我们欣喜地看到,费马科技的图数据库TuGraph取得了突破,在国内企业中率先通过了国际基准官方审计测试并取得了国际领先的测试结果。

2020年7月30日,费马科技宣布,公司成为国内第一家通过图数据库国际标准基准测试程序LDBC-SNB官方审计测试的企业,同时打破了LDBC-SNB已经公布的最高纪录。在中大规模数据集(300GB)上,吞吐率达到之前最高纪录(由Virtuoso保持)的7.6倍。


图1. 审计测试成功的声明页截图(含认证审计员,LDBC SNB任务组主任和费马科技CTO的签名)

读者可以通过以下链接访问LDBC官网上的正式公布的测试结果,并下载测试报告、程序、说明文档以及软硬件信息等。

关于LDBC和LDBC-SNB测试:

1.关联数据基准委员会(LDBC,Linked Data Benchmark Council)是由Oracle、Intel等软硬件巨头和主流图数据库厂商NeoTechnology和TigerGraph等组成的非赢利机构,是图(Graph)和RDF数据管理的基准指南制定者与测试结果发布机构。

2.社交网络基准测试(SNB,Social Network Benchmark)是由关联数据基准委员会(LDBC)开发的面向图数据库的基准测试(Benchmark)之一,分为交互式查询(Interactive)和商业智能(BI)两个场景。本次费马公司测试了其中的交互式查询场景,主要考察系统在并发情况下的更新和交互式查询吞吐率。与很多厂商采用的基于单项测试的评测方式相比,LDBC-SNB(Interactive)更接近真实场景并对数据库系统的并发执行性能和事务处理能力进行了更具挑战性的评测。 

测试详情

据公司创始人洪春涛介绍,本次测试采用LDBC SNB的30G(SF30)、100G(SF100)、300G(SF300)三个规模的数据集,其中300G数据集包含8亿结点53亿边及相关属性。查询操作由7类简单只读查询,14类复杂只读查询和8类事务类更新查询按LDBC SNB Interactive测试规范规定的比例组合并发执行,并以吞吐率为性能指标。可以看到,TuGraph在数据量增大时仍能保持较高的性能,体现了其对大规模数据的良好支撑能力。

下表为不同数据规模下的测试结果,吞吐率(OPS)表示每秒完成的操作次数。


表1. 不同数据规模SF30(30GB),SF100(100GB)和SF300(300GB)的测试结果

CTO朱晓伟表示,公司在测试环境准备、测试数据生成和导入、测试例程序的安装和执行、结果正确性的验证方面都严格遵守LDBC-SNB的规范。整个测试过程由LDBC认证的评估师在其租用的标准云系统上操作完成,并对测试代码进行了详细的评审。整个测试环境和测试过程均完整披露并可在LDBC网站上公开下载,保证了测试结果的可信性和公正性。

LDBC-SNB Interactive的主要测试要求包括:基准程序会通过多个客户端并发地发送各类读写请求到服务器端,每个请求都有相应的计划时间,数据库需要尽可能地使得所有操作都按计划正常进行;一旦某个操作晚于计划时间超过1秒以上则视作超时,如果超时比例大于5%则无法通过测试,对图数据库的更新和查询性能提出了很高的要求;查询分为7类简单查询和14类复杂查询,每类复杂查询在不同数据规模下根据其复杂度以不同的频率混合在一起,简单查询则穿插在这些复杂查询之间;8类更新操作中不少都涉及多个数据对象的更新,因此需要ACID事务的支持来保证操作的正确性,SNB规范要求隔离级别至少达到提交读(Read Committed),并在审计过程中对ACID支持进行了特别的测试。

值得注意的是,在本次测试中,TuGraph的超时比例为0%,且SNB实现了最高的隔离级别可串行化(Serializable),说明TuGraph在提供了高级别的事务隔离保证的同时仍然获得了低延迟和远远超过其它数据库的吞吐率。

CTO朱晓伟表示,相比同类型的图数据库产品,TuGraph可以支持更大的数据量,提供更快的响应,支持更多的并发查询,因此也更适应大数据时代。TuGraph在系统的设计目标上围绕实时图数据分析的特点展开:一方面,绝大部分请求是在最新数据上的只读查询,因此存储引擎需要面向读优化,并需要对其中一些查询操作采用并行的方式进行处理;另一方面,数据库需要在快速完成这些只读查询的同时处理源源不断的数据更新,而这些修改请求可能来自多个客户端,因此需要完善的事务支持,并需要尽可能地避免使用全局锁导致并发度的降低。为此,TuGraph实现了多版本的存储使得只读事务可以无阻塞地进行,并且提供了乐观和悲观两种模式的读写事务,从而针对不同情形提供最优化的事务管理,在并发度和读写效率间取得较好的权衡;针对复杂的分析任务,提供了并行遍历和迭代式图计算的接口,通过多个线程的协同工作来保障任务不会超时并持续占用系统资源。除此之外,TuGraph提供了丰富的开发接口:不仅支持描述式的查询语言OpenCypher以方便用户更快地上手和开发原型,还提供了过程式的核心API让用户可以通过存储过程的方式对一些需要追求极致性能的场景进行加速;存储过程支持开发效率较高的Python和执行效率较高的C++,未来还将增加受众较广的Java作为开发语言;访问上同时支持RESTful和RPC两种方式供用户选择。这些丰富的选项使得用户可以在开发和生产环境上根据各自不同的场景和需求灵活地选择最适合的使用方式,在易用性和高效性两方面取得更好的平衡。

关于费马

根据36氪此前报道,费马科技成立于2016年5月,拥有图数据平台(TuGraph,曾用名LightGraph)、图分析平台(PandaGraph)两大产品。TuGraph的定位是高性能单机版图数据库,这也是目前市场占有率最高的产品类型。费马科技基于创始团队在图计算领域积累的经验以及领先的科研成果,研发出的TuGraph具有高性能、大数据量以及稳定易用的特点,因此被广大客户所信赖。目前,费马科技的产品已经被多个领域的头部客户所采用,包括京东数科、大型国有银行及商业银行等金融业客户,以及国家电网、中国商飞、西门子等工业部门用户。

相关推荐
热点推荐

天问一号成功着陆火星,国际媒体发出惊叹:巨大飞跃、重要里程碑、超越众多同行

环球网资讯
2021-05-15 11:22:09

酒吧KTV那些陪酒公主,最后都嫁给了哪些人,看看你身边有没有

凡间事
2021-05-15 04:56:04

全队放开抡~ 勇士首节砍下41分 为本赛季球队首节最高分

直播吧
2021-05-15 10:26:07

美国对中国台湾地区什么态度?美国国务卿布林肯在公开采访中表态

王小东
2021-05-14 22:33:30

科学家发现地球正在变绿,原因就在中印,但印度的贡献却是零蛋!

星辰大海路上的种花家
2021-05-14 11:06:45

一觉醒来,世卫宣布大喜讯,14亿国人纷纷松口气,钟南山也表态了

前沿时刻
2021-05-14 20:06:51

千万记住:“请坐”不是“Sit down”!那超级没礼貌!

朗读君
2021-05-14 09:14:46

《霸王别姬》往事:要不是葛优,张国荣一个人就把内地演员衬没了

刘十三说娱乐
2021-04-27 18:26:59

“唐僧”老婆陈丽华立遗嘱,500亿资产分配被曝光,迟重瑞伤心了

八圈传播者
2021-05-14 18:08:21

社评:印媒竟诬“中国牟利” 他们的良心让狗吃了

环球网资讯
2021-05-15 10:29:24

因父母有“污点”,就剥夺孩子考公务员过政审资格,这很公平

羊驼妈妈
2021-05-14 16:41:49

名人堂大合影,科比18岁女儿代替曼巴站C位,瓦妮莎为她披上夹克

体育的点点滴滴
2021-05-15 11:03:59

派兵支援巴勒斯坦,号召全球反对以色列,土耳其这次跳的可真欢

铁血观世界
2021-05-14 16:34:03

中到大雨!暴雨:大暴雨!8-9级雷暴!天气大变脸?气象预警

树藤与海岛plus
2021-05-14 16:43:31

6岁男童拿玩具刮花奔驰车,车主索赔遭家长怒怼,家长:法律都约束不了我

记录之路
2021-05-15 07:53:29

为啥说韩国女艺人有浓浓的女人味?看完秋瓷炫的这几张照片就懂了

小司谈热点
2021-05-15 07:10:58

男子上火车脱鞋脱袜伸脚,女子:我穿的短裙,他脚就搭过来了

消费生活报
2021-05-13 16:55:42

“错换”新证人出现,杜新枝“偷换”真相被揭开,淮医意外助攻!

龙格秀曼
2021-05-15 10:13:26

周润发15亿豪宅曝光,因装修朴素低调,被网友嘲讽土得像乡下房子

娱人为乐
2021-05-15 00:08:51

西安出土李建成陵墓,墓室内刻有55个字,才知道李世民的为人

历史观天下X
2021-05-14 19:16:37
2021-05-15 13:29:07

科技要闻

骄傲!祝融号成功着陆 五星红旗闪耀火星

头条要闻

正式将手伸进台海?日本三步走 公开叫板中国

头条要闻

正式将手伸进台海?日本三步走 公开叫板中国

体育要闻

天赋!胖虎转型打控卫 首战数据就炸裂

娱乐要闻

金晨穿裸色抹胸裙秀天鹅颈 锁骨迷人

财经要闻

汽车要闻

将搭载两种动力 全新奔腾70S实车曝光

态度原创

数码
亲子
游戏
艺术
家居

数码要闻

华为Mate新品大爆发!不止一款,5月19日亮相

亲子要闻

胎儿在孕妈肚子可不是只顾着睡觉

PlayStation中国发布国行倒计时海报

艺术要闻

在没有“内卷”的艺术馆探索生活内核吧

家居要闻

港男月入过万只能带妻儿住7平蜗居 在洗衣机上做饭

×