跳到主要内容

5 篇博文 含有标签「Databend 使用进阶」

Databend 使用进阶

查看所有标签

使用 OpenDAL 直接写对象存储

· 阅读需 2 分钟
wubx
Data AI

一般下载文件上传 S3 的实现流程为: 下载文件到本地盘,然后调用 s3 相关的 SDK 然后上传到 S3 中,这里的面的瓶颈很容易出现下载文件到本地盘时,出现本地盘成为瓶颈,这里使用给大家推荐 OpenDAL 可以直接写远程的 S3.

基于 Databend 实时计算实现

· 阅读需 7 分钟
wubx
Data AI

今天这篇文章和大家交流一下在 Databend 如何实现近实时计算这个能力。 该功能目前在客户应用场景:

  • 游戏用户的实时激励,玩游戏中的奖励
  • 游戏客户一场游戏结束后,下一场如何匹配队友
  • 游戏结束后,本场游戏的数值展示等场景
  • 数据实时推送到远端

基于 Databend 有实时计算,在实际客户落地的场景中替换大量的 flink 任务,大大简化了用户的流计算管理方面的开销。

基于 Databend 的实时数据汇聚平台建设

· 阅读需 21 分钟
wubx
Data AI

1 目标

本方案中基于 Databend 实现一个数据快速汇聚及实时去重,实现一份数据多种工作负载,把原来数据共享的推模式变成:增量订阅模式 + 抽取推送两种模式。从而让有后台开发经验或会 SQL 的人,也可以在 Databend 上实现海量数据平台的建设。