jjzjj

云上数据变革:Databend Cloud 正式发布

Databend 2025-05-20 原文

2023 年 4 月 20 日,Databend Cloud 经历了近两年的打磨终于发布了!🎉

此次发布会由北京数变科技有限公司【Databend Labs】联合阿里云共同举办。Databend Cloud 借助于云原生数仓 Databend 实现了云简单易用的大数据分析场景。

以下内容来自 Databend 联合创始人-王吟、Databend Cloud 平台负责人-李亚舟以及阿里云智能资深产品运营专家-蔡亮伟,在本次发布会上的分享总结。

🙋 本次发布会分为三个部分:

第一部分:王吟,李亚舟分享:「 云上数据变革, Databend Cloud 发布 」

第二部分:蔡亮伟分享:「 阿里云对象存储 OSS, 构建企业级数据湖底座 」

第三部分:在阿里云平台上如何开通 Databend Cloud

 (上图: 王吟(左)蔡亮伟(右)共同见证 Databend Cloud 获得阿里云生态认证)

云上数据变革,Databend Cloud 发布

🙋 这部分的主题大纲

1. Databend Cloud 主要功能介绍

2. Databend Cloud 和传统数仓的区别,为什么要选择 Databend Cloud

3. Databend 登顶 ClickBench 测试介绍

4. Databend Cloud 未来定位

Databend Cloud 主要功能介绍

Databend 是一款使用 Rust 研发,完全面向云架构,基于对象存储构建的云原生数仓。

Databend Cloud 是基于 Databend 打造的弹性云数仓,由 3 层组成,底层基于对象存储,如阿里云 OSS,上层计算节点采用不同的规格,好比个人选购衣服,有小号,中号,大号等,同理计算节点也有小号 1x、中号 2x,大号 8x,根据自己计算的需求,选择不同的型号。最上层就是我们元数据和管理集群,实现多租户的隔离,保证用户的数据安全。

Databend Cloud 架构如下:

在 Databend Cloud 可以为用户提供:

  • 一站式数据分析和管理平台

  • 丰富的租户及组织管理能力

  • 按资源使用情况计费,零管理零运维

  • 多云解决方案

  • Databend 核心团队提供支撑

Databend性能如何呢?

ClickBench 是 ClickHouse 发起的分析型数据库性能测试排行榜,收录了Snowflake、ClickHouse 等 50 多个主流分析型数据库的测试结果,它采用一个公开的标准来衡量数据库的性能,我们的导入性能在三个机型下均为第一名,在 hot run 查询下,我们有一个机型是第一名,其他两个机型分别是第二第三名。

Databend Cloud 和自己搭建数仓的区别,为什么要选择 Databend Cloud

目前,很多用户在公有云中利用云主机自己部署数仓集群,通常采用传统数仓的存算一体架构,底层存储利用硬盘来构建。

Databend Cloud 底层采用对象存储使用多少用多少无需考虑空间容量,成本是云硬盘的 1/3 到 1/8 甚至更少,使用的计算资源也跟业务需求相关,如果是跑批类业务,只需要在指定时间使用。整体而言可以为企业节省 80% 以上成本。

Databend Cloud 和使用公有云数仓的区别

公有云中数仓主要还是存算一体架构,底层也是基于云硬盘来构建,相比于场景一,公有云厂商通常提供 PaaS 服务,一键可以安装整个集群到用户 VPC 中,但还需要用户时刻关注集群状态。

成本上,集群长期占用,费用甚至比第一种场景用户自己搭建还要高。所以整体而言,相对于 Databend Cloud 需要一定的运维成本,整体费用高出 4-10 倍以上。

相对公有云中数仓服务 Databend Cloud 是一家更加开放的公司,可以给你提供多云无锁定服务,同时 Databend Cloud 也是基于 Databend 研发,Databend 也可以在现在市场上所有的公有云上实现私有化部署, 可以让用户实现零担心被云锁定问题。

Databend Cloud 适用于以下业务场景

Databend Cloud 主要定位在云上大数据存储及分析,从现在实际用户使用场景来看 Databend Cloud 给用户提供了:

  • 基于存算分离,可以实现计算层的独立扩容及收缩

  • 基于对象存储,帮助用户实现结构化和半结构化的高压缩存储

  • 提多云上服务体验统一

  • 计算分析能力强,用户数据不只存储,同时拥有灵活的计算能力

  • 基于 AI 实现的问答应用,智能客服等

部分用户

阿里云对象存储如何帮助云原生数仓构建统一数据底座

阿里云对象存储已经为上万家客户提供了云上数据湖和数仓分析业务的支持,在此过程中,对象存储不断提升和演进数据湖存储能力,从 1.0 到 3.0 版本,其最终愿景是为上层分析的生态应用提供统一的、多协议接入的存储底座。

在过去的一年中,阿里云存储团队与云原生数仓 Databend Cloud 团队展开了深度合作,通过对象存储 OSS 支持 Databend 实现存算分离,一起迈向 Serverless 架构的未来。

在此过程中,双方在数据存储方面为客户带来了如下价值:

  • 稳定可靠: 采用多种高可靠技术,如校验,多可用区,跨 Region 复制实现数据不丢不错,保证数据的持续访问。

  • 安全可信: 通过多种数据加密技术,配合完善的权限管控能力,实现全链路的访问安全和存储安全。

  • 弹性伸缩: 以服务化的方式,按量付费,提供从零到上万亿对象和 EB 级存储空间的扩展性。

  • 极致性能: 可为客户提供 Tbps 级别吞吐带宽,优化海量小文件读写,单命名空间支持50 亿文件。

在阿里云平台如何开通 Databend Cloud

Databend Cloud 现在已经上架阿里云市场,现在阿里云用户开通 Databend 也比较方便,开通的方法可以看 B 站视频👇

Databend Cloud 在阿里云云市场中开通视频教程_哔哩哔哩_bilibili

另外也可以通过阿里云 OSS 控制台中开通:

关于 Databend Cloud

Databend Cloud 是基于 Databend 实现上的云原生数仓 SAAS 产品,提供的一站式SaaS 云数据平台,它具备:免安装、免运维,注册账号即可使用,按你的 SQL 查询按需按量付费,真正做到使用才付费,不查询不使用不付费的特点。它为用户提供了:

  • 存算分离,或是进一步算算分离: 资源弹性,按量付费

  • 同一份数据支持多个计算节点共同访问

  • 基于应用层做好数据加密

  • 多级存储,对用户透明

  • 支持数据 time travel ,可以让用户非常方便地访问数据任意时间点

  • 多云无锁定,统一用户体的大数据解决方案

Databend Cloud 正是基于以上的条件为用户定制一个多云,无锁定,高弹性,高性能,低成本的云上大数据解决方案。

👨‍💻‍ 海外官网: https://www.databend.com

💻 国内官网: https://www.databend.cn

📖 开源社区网站: https://databend.rs

✨ Github: GitHub - datafuselabs/databend: A modern cloud data warehouse focusing on reducing cost and complexity for your massive-scale analytics needs. Open source alternative to Snowflake. Also available in the cloud: https://app.databend.com

🎬 B 站: 搜 Databend,技术分享视频

有关云上数据变革:Databend Cloud 正式发布的更多相关文章

  1. ruby - 解析 RDFa、微数据等的最佳方式是什么,使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  2. ruby - Ruby 有 `Pair` 数据类型吗? - 2

    有时我需要处理键/值数据。我不喜欢使用数组,因为它们在大小上没有限制(很容易不小心添加超过2个项目,而且您最终需要稍后验证大小)。此外,0和1的索引变成了魔数(MagicNumber),并且在传达含义方面做得很差(“当我说0时,我的意思是head...”)。散列也不合适,因为可能会不小心添加额外的条目。我写了下面的类来解决这个问题:classPairattr_accessor:head,:taildefinitialize(h,t)@head,@tail=h,tendend它工作得很好并且解决了问题,但我很想知道:Ruby标准库是否已经带有这样一个类? 最佳

  3. ruby - 我如何添加二进制数据来遏制 POST - 2

    我正在尝试使用Curbgem执行以下POST以解析云curl-XPOST\-H"X-Parse-Application-Id:PARSE_APP_ID"\-H"X-Parse-REST-API-Key:PARSE_API_KEY"\-H"Content-Type:image/jpeg"\--data-binary'@myPicture.jpg'\https://api.parse.com/1/files/pic.jpg用这个:curl=Curl::Easy.new("https://api.parse.com/1/files/lion.jpg")curl.multipart_form_

  4. 世界前沿3D开发引擎HOOPS全面讲解——集3D数据读取、3D图形渲染、3D数据发布于一体的全新3D应用开发工具 - 2

    无论您是想搭建桌面端、WEB端或者移动端APP应用,HOOPSPlatform组件都可以为您提供弹性的3D集成架构,同时,由工业领域3D技术专家组成的HOOPS技术团队也能为您提供技术支持服务。如果您的客户期望有一种在多个平台(桌面/WEB/APP,而且某些客户端是“瘦”客户端)快速、方便地将数据接入到3D应用系统的解决方案,并且当访问数据时,在各个平台上的性能和用户体验保持一致,HOOPSPlatform将帮助您完成。利用HOOPSPlatform,您可以开发在任何环境下的3D基础应用架构。HOOPSPlatform可以帮您打造3D创新型产品,HOOPSSDK包含的技术有:快速且准确的CAD

  5. ruby-on-rails - 如何在发布新的 Ruby 或 Rails 版本时收到通知? - 2

    有人知道在发布新版本的Ruby和Rails时收到电子邮件的方法吗?他们有邮件列表,RubyonRails有一个推特,但我不想听到那些随之而来的喧嚣,我只想知道什么时候发布新版本,尤其是那些有安全修复的版本。 最佳答案 从therailsblog获取提要.http://weblog.rubyonrails.org/feed/atom.xml 关于ruby-on-rails-如何在发布新的Ruby或Rails版本时收到通知?,我们在StackOverflow上找到一个类似的问题:

  6. FOHEART H1数据手套驱动Optitrack光学动捕双手运动(Unity3D) - 2

    本教程将在Unity3D中混合Optitrack与数据手套的数据流,在人体运动的基础上,添加双手手指部分的运动。双手手背的角度仍由Optitrack提供,数据手套提供双手手指的角度。 01  客户端软件分别安装MotiveBody与MotionVenus并校准人体与数据手套。MotiveBodyMotionVenus数据手套使用、校准流程参照:https://gitee.com/foheart_1/foheart-h1-data-summary.git02  数据转发打开MotiveBody软件的Streaming,开始向Unity3D广播数据;MotionVenus中设置->选项选择Unit

  7. 使用canal同步MySQL数据到ES - 2

    文章目录一、概述简介原理模块二、配置Mysql使用版本环境要求1.操作系统2.mysql要求三、配置canal-server离线下载在线下载上传解压修改配置单机配置集群配置分库分表配置1.修改全局配置2.实例配置垂直分库水平分库3.修改group-instance.xml4.启动监听四、配置canal-adapter1修改启动配置2配置映射文件3启动ES数据同步查询所有订阅同步数据同步开关启动4.验证五、配置canal-admin一、概述简介canal是Alibaba旗下的一款开源项目,Java开发。基于数据库增量日志解析,提供增量数据订阅&消费。Git地址:https://github.co

  8. ruby-on-rails - 创建 ruby​​ 数据库时惰性符号绑定(bind)失败 - 2

    我正在尝试在Rails上安装ruby​​,到目前为止一切都已安装,但是当我尝试使用rakedb:create创建数据库时,我收到一个奇怪的错误:dyld:lazysymbolbindingfailed:Symbolnotfound:_mysql_get_client_infoReferencedfrom:/Library/Ruby/Gems/1.8/gems/mysql2-0.3.11/lib/mysql2/mysql2.bundleExpectedin:flatnamespacedyld:Symbolnotfound:_mysql_get_client_infoReferencedf

  9. STM32读取串口传感器数据(颗粒物传感器,主动上传) - 2

    文章目录1.开发板选择*用到的资源2.串口通信(个人理解)3.代码分析(注释比较详细)1.主函数2.串口1配置3.串口2配置以及中断函数4.注意问题5.源码链接1.开发板选择我用的是STM32F103RCT6的板子,不过代码大概在F103系列的板子上都可以运行,我试过在野火103的霸道板上也可以,主要看一下串口对应的引脚一不一样就行了,不一样的就更改一下。*用到的资源keil5软件这里用到了两个串口资源,采集数据一个,串口通信一个,板子对应引脚如下:串口1,TX:PA9,RX:PA10串口2,TX:PA2,RX:PA32.串口通信(个人理解)我就从串口采集传感器数据这个过程说一下我自己的理解,

  10. SPI接收数据异常问题总结 - 2

    SPI接收数据左移一位问题目录SPI接收数据左移一位问题一、问题描述二、问题分析三、探究原理四、经验总结最近在工作在学习调试SPI的过程中遇到一个问题——接收数据整体向左移了一位(1bit)。SPI数据收发是数据交换,因此接收数据时从第二个字节开始才是有效数据,也就是数据整体向右移一个字节(1byte)。请教前辈之后也没有得到解决,通过在网上查阅前人经验终于解决问题,所以写一个避坑经验总结。实际背景:MCU与一款芯片使用spi通信,MCU作为主机,芯片作为从机。这款芯片采用的是它规定的六线SPI,多了两根线:RDY和INT,这样从机就可以主动请求主机给主机发送数据了。一、问题描述根据从机芯片手

随机推荐