编辑：诸葛子房来 源：大数据架构师（ID：bigdata_arch）彭友们好，我是老彭。之前抽空写了一篇《One ID中的核心技术ID-Mapping究竟是怎么实现的？》结果一大堆人追着...

这是彭文华的第142篇原创最近感觉选题进入平台期了，急需各位同学骚扰聊天，好激发我的灵感。啥问题都行，我不挑的，啥事都能聊。还好，昨天朋友老赵就问我一个问题，然后我给他说了半个小时，要不我...

这是我的第75篇原创这算是今年参加的第二场线下活动。最近活动略密集啊，之前报名的三个活动全赶一块了，只好选择最感兴趣的贝壳来看看。贝壳总算没有让我失望，全部都是我喜欢的内容。贝壳CTO线也...

这是我的第77篇原创昨天加班断更了一天。今天继续哈。是继续加班。正题开始，继续分享贝壳数据中台工程架构实践之二：OLAP平台。今天的主角是肖博士。请他出来镇个楼。从title上可以看出贝壳...

这是彭文华的第104篇原创今天带大家去看看字节跳动数据中台罗哲大佬的分享会。按照惯例，先放大佬介绍镇楼！话不多说，直接上干货~~~先放个目录了解一下大佬的思路。字节目前也处于数据平台向数据...

之前给大家介绍过单表超大的时候，需要分表，一般都是用主键进行hash，或者直接用雪花算法生成全局唯一id，然后按2^n取模，把一张超多数据的表，分成2^n个表。这个时候，问题来了：如果一个业务里有多个key，例如订单中心，有buyer_id、order_id、seller_id等，我们希望相关的业务都入到同一个库或者同一个表，这样能减少跨库、跨表操作，增加效率。这该怎么办呢？普通方案大数据工程师拍

编辑：彭文华来 源：大数据架构师彭友们好，我是老彭。最近遇到几个项目，都跟非结构化数据脱不开关系。老彭刚毕业的时候，做的是数据库的活儿，那都是结构化数据。后来有了hadoop技术，可以用来处理物联网、互联网的半结构化数据。真正做非结构化的场景还是比较少的，大多是在项目中选取一两个点给意思意思一下。但是现在已经发展这么多年了，大多数企业结构化数据多少有些基础了，非结构化数...

编辑：彭文华来 源：大数据架构师（ID：bigdata_arch）彭友萌好，我是老彭。昨天有一位老彭友在群里求一份资料，很着急的样子：我一看，哟，这不是《中国移动大数据安全管控分类分...

前言及摘要本文来自于哈佛商业评论，由Nahia Orduña撰写，陈晓峰编译，彭文华略有微调。根据世界经济论坛《2020年未来工作报告》，到2025年，将会有8500万个工作岗位可能因人类...

这是我的第26篇原创今天给大家分享一下大数据体系的职业，以及可能的发展路径。大数据体系全貌组织架构的原则是因事设岗，因岗定人。换句话说，有什么问题，决定了做什么事情，决定了需要什么样的组织...