logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

pgdump低版本导出高版本数据库数据错误

有人在社区里经常会问到以下错误...

#数据库#mysql#大数据 +2
大数据产品研究 - Apache Doris简介

Apache Doris是百度技术团队贡献给Apache的开源产品,曾经的名字为PALO,贡献给Apache后更名为Apache Doris。说起Doris,这里面还有一个有意思的故事,Apache Doris和DorisDB,不是一个产品,但是他们颇有一些渊源,大家可以从网上搜搜。Apache Doris的产品定位如下:Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应

文章图片
#apache#数据分析#big data
大数据产品研究 - Presto简介

Presto是什么?Presto是一个开源的分布式SQL查询引擎,它以集群的方式运行,采用MPP架构,用在交互式分析查询场景下,可以将多种不同数据量级(从GB到PB)的数据源组合起来进行统一计算。Presto本身只是一个查询引擎,它通过connector的方式完成外部数据源的接入;也就是说通过使用Presto提供的ANSI标准SQL,可以完成多种数据源的标准化计算工作。以下是Presto在数据栈中

文章图片
#数据仓库#big data#hadoop
大数据产品研究 - Presto组成与概念

✨前言我在上篇文章中,对Presto是什么、能做什么做了简单的介绍,本篇文章,带大家一起来了解一下Presto的各个组件及其作用。这些组件贯穿于Presto整个使用文档中,所以要很好的理解和使用Presto,首先把他们分别是什么、用来做什么弄清楚,很重要。接下来会对这些组件进行一一介绍,包括什么是协调者,什么是工作者,什么是连接器等,当然为了遵从大家的理解习惯,有一些英文仍然会保留。✨服务角色类型

文章图片
#big data#大数据#java
Apache Iceberg 数据湖简介

昨天介绍了Apache Hudi,今天我们来看一下Apache Iceberg,不得不说,在数据湖这一块,竞争也是很激烈啊。下面放一张数据糊在数据栈中的位置图,可以明显的看到Hudi和Iceberg处于贴身肉搏的位置:Apache Iceberg是由 Netflix 开发并开源的、用于庞大分析数据集的开放表格式。 Iceberg在Presto和Spark中添加了使用高性能格式的表(Hudi也支持P

文章图片
#apache#spark#big data
git中通过rebase操作解决冲突并提交PR

我们通常通过 Github 进行协作工作,有时候在提交 PR 过程中,可能存在与别人已合并 PR 的冲突问题,此时便可以通过 rebase 操作解决这些问题并重新提交 PR,下面我们将这个过程简单描述记录一下。

#git#github#java
pgdump低版本导出高版本数据库数据错误

有人在社区里经常会问到以下错误...

#数据库#mysql#大数据 +2
Snowflake荣获DB-Engines 2021年度数据库

根据 DB-Engines 官方网站数据显示,Snowflake 荣获2021年度数据库。Snowflake在2021年DB-Engines排名中获得比其他383个被监测数据库系统更受欢迎的成绩。 因此,DB-Engines 官方宣布Snowflake为2021年的年度DBMS。为了确定年度DBMS,DB-Engines 从2022年1月的最新得分中减去了2021年1月的流行得分。使用这些数字的差

文章图片
#数据库#postgresql#database +1
Apache Iceberg 数据湖简介

昨天介绍了Apache Hudi,今天我们来看一下Apache Iceberg,不得不说,在数据湖这一块,竞争也是很激烈啊。下面放一张数据糊在数据栈中的位置图,可以明显的看到Hudi和Iceberg处于贴身肉搏的位置:Apache Iceberg是由 Netflix 开发并开源的、用于庞大分析数据集的开放表格式。 Iceberg在Presto和Spark中添加了使用高性能格式的表(Hudi也支持P

文章图片
#apache#spark#big data
clickhouse 测试数据集在线插入报错 Failed to read all the data from the reader, missing 10485760 bytes

主要关注错误信息:DB::Exception: Failed to read all the data from the reader, missing 10485760 bytes。预测可能是因为网络不稳定,数据下载波动导致的。

#clickhouse#前端#服务器
    共 25 条
  • 1
  • 2
  • 3
  • 请选择