“初雪”与“向量化”| StarRocks Hacker Meetup小记

企业动态
数据驱动的前提是能够快速、准确地获取和分析数据。为了满足业务日益增长的实时更新需求,StarRocks重新设计并开发了存储引擎

   StarRocks Hacker Meetup是StarRocks社区组织的面向开发者的线下活动,旨在通过面对面的交流帮助开发者深入了解StarRocks核心功能的实现原理,和开发者共同探讨数据库领域的前沿技术。

  第一季Hacker Meetup共4期,将持续2个月,每两周探讨一个StarRocks的核心功能。欢迎大家持续关注。第二期Hacker Meetup将在11月20日与大家见面!

  上周六,北京迎来了2021年的初雪。StarRocks社区也迎来了第一期Hacker Meetup:向量化编程的精髓。尽管雨雪交加,但开发者们热情不减,现场座无虚席。小伙伴们对这次的活动都感觉收获满满:

  

 

  干货回顾

  在本次Meeup上,康凯森同学深入浅出的从几个方面向大家介绍了数据库向量化编程的要点:

  ·How to build a fast database

  如何构建一个性能卓越的数据库?凯森分别从预处理VS现场处理、架构、数据流、系统资源4个角度进行了回答。

  ·The basics of CPU vectorization

  凯森用Top-down的性能分析方法介绍了影响CPU性能的关键点,然后介绍了CPU向量化的基本概念和6种向量化编程的方式。

  ·The key points of database vectorization

  数据库的向量化不仅仅是CPU指令的向量化,而是一个巨大的性能优化工程。凯森首先介绍了数据库向量化的关键点:数据组织方式、算子和表达式的向量化,SIMD如何加速Filter、Agg和Join,然后通过具体实例介绍了数据库单核CPU性能优化的几个关键点:数据结构和算法、自适应策略、SIMD优化、内存管理优化、C++Low Level优化和CPU Cache优化等,最后推荐了一些好用的性能优化工具。

  ·Thinking of StarRocks vectorization

  凯森介绍了StarRocks向量化工程的一些思考和总结。

  

 

  即使顶着风雪也要相见的开发者们,期待下次相聚!

  下期预告

  数据驱动的前提是能够快速、准确地获取和分析数据。为了满足业务日益增长的实时更新需求,StarRocks重新设计并开发了存储引擎,在保持查询性能不受影响的前提下支持实时更新,并在单表简单查询下获得了10倍以上的性能提升。

  下一期,将由StarRocks核心研发、Apache Kudu PMC常冰琳带来【列式存储中实时更新与查询性能如何兼得】。本次Meetup,冰琳会详细解读StarRocks 2.0版本中最新发布的实时更新引擎,一起来一探究竟吧!

  

 

  时间:2021年11月20日14:00-17:00

  地点:拓荒族三层(中关村创业大街10号楼)

  演讲嘉宾:常冰琳(StarRocks核心研发,Apache Kudu PMC)

  *受疫情影响的原因,本次Meetup入场券有限,先到先得。社区将会审核您的报名信息,StarRocks项目的Contributor拥有优先通过权,请以报名成功的短信通知为准。

  这个冬天,让StarRocks陪你尽数领略技术之美!

责任编辑:张诚 来源: 互联网
相关推荐

2017-08-24 10:54:29

Andrew NG深度学习操作

2022-12-05 08:00:00

数据库向量化数据库性能

2022-12-29 11:37:51

Python循环向量化

2017-08-24 09:35:06

深度学习向量化Hash Trick

2023-06-12 00:36:28

迭代向量化Pandas

2023-10-15 17:07:35

PandasPython库

2024-10-22 15:41:47

NumPyPython

2024-03-07 10:09:42

向量数据库

2024-02-22 13:52:51

Python循环代码

2024-04-02 11:43:08

向量化编程NEON

2024-05-09 08:11:04

OllamaGo训练文本

2021-12-06 20:39:34

AI

2024-08-19 02:35:00

模型量化深度学习

2023-08-02 18:40:42

2022-07-19 14:07:42

Kyligence开源Spark

2013-08-22 09:53:52

Hacker News排名算法算法

2024-09-13 16:47:06

模型量化AI

2024-12-09 08:27:02

2020-10-14 10:05:36

Hacker社会工程学网络安全

2024-07-12 11:40:13

点赞
收藏

51CTO技术栈公众号