此次Doris有幸得到中国信通院云大所、大数据技术标准推进委员会的支持,在中国信通院举行了0.11.0新版本预览线下沙龙。同时我们也有幸邀请到了来自一点资讯、京东、搜狐、百度智能云的技术大牛带来他们的应用实践和开发分享。
现场视频和嘉宾PPT会在近日放出,欢迎大家关注Apache Doris(incubating) 官方公众号。
Apache Doris (incubating) 0.11.0
此次Doris 主创团队的李超勇带来了0.11.0 版本的功能预览。
本次Doris带来了如下更新:
对Doris的存储引擎进行了重构与优化
打通Spark和Doris
SQL支持Grouping Sets语法
支持读取Parquet文件格式
新增空间几何函数
京东广告平台
来自京东的刘航源带来了本次618的捷报。大促刚过,在大家疯狂剁手的背后,Doris支撑了大促期间广告平台的报表业务,为每一位广告主带来了平稳的在线服务。
稳定、高效,是航源对Doris在618大促期间表现的概括。
一点资讯
来自一点资讯的王迎信是自媒体平台的资深研发,他不仅对选型进行了详细介绍,同时介绍了在Nebula框架下Doris的应用方式。
从数据的接入、汇总到分析,一点资讯自媒体基于Nebula搭建了数据平台,Doris也承载了其中的一部分。迎信提到,Doris出色的join查询表现,迅速的响应、较低的运维和学习成本,都成为一点资讯选择Doris的原因。
搜狐
来自搜狐的徐小冰是Doris的contributor,搜狐团队为Doris贡献了读取Parquet文件的功能,该功能将在0.11.0版本正式上线。
小冰详细介绍了读取Parquet文件的功能设计与实现,解决了Doris只支持CSV格式的痛点,大大提高了数据读取效率。
百度智能云
最后,来自百度智能云的朱良昌带来了Spark Streaming对接Doris的设计与实现。
良昌提到,由于业务需求驱动,有很多业务方希望可以通过spark streaming即structured streaming来读取上游例如kafka, hdfs, database的数据,实时导入Doris进行查询分析。
百度智能云流式计算团队为此专门开发了名为“Doris Sink”的组件来适配Doris。Doris Sink不仅实现了exactly-once语义,还封装并对用户屏蔽了与Doris的交互细节,用户只需要关注计算细节和用户逻辑,即可非常方便的将流式数据导入到Doris中。
精彩花絮
活动现场
惊喜大奖
精美茶歇
最后,全家福
祝愿Doris社区越来越繁荣,有更多新伙伴加入我们!
活动视频及嘉宾演讲PPT将陆续放出,欢迎关注Apache Doris (incubating) 官方公众号。
欢迎扫码关注:
Apache Doris(incubating)官方公众号
相关链接:
Apache Doris官方网站:
http://doris.incubator.apache.org
Apache Doris Github:
https://github.com/apache/incubator-doris
Apache Doris Wiki:
https://github.com/apache/incubator-doris/wiki
Apache Doris 开发者邮件组:
dev@doris.apache.org