一年一度由世界知名科技媒体 InfoWorld 评选的 Bossie Awards 于 9 月 26 日公布，本次 Bossie Awards 评选出了最佳数据库与数据分析平台奖、最佳软件开发工具奖、最佳机器学习项目奖等多个奖项。在最佳开源数据库与数据分析平台奖中，之前曾连续两年入选的 Kafka 意外滑铁卢落选，取而代之的是新兴项目 Pulsar。近一年发布了不少 Pulsar 的技术文章...

BAT企业大数据专业技术知识讲解1、kafka的message包括哪些信息一个Kafka的Message由一个固定长度的header和一个变长的消息体body组成header部分由一个字节的magic(文件格式)和四个字节的CRC32(用于判断body消息体是否正常)构成。当magic的值为1的时候，会在magic和crc32之间多一个字节的数据：attributes(保存一些相关属性...

今年，实时流计算技术开始步入主流，各大厂都在不遗余力地试用新的流计算框架，实时流计算引擎和 API 诸如 Spark Streaming、Kafka Streaming、Beam 和 Flink 持续火爆。阿里巴巴自 2015 年开始改进 Flink，并创建了内部分支 Blink，目前服务于阿里集团内部搜索、推荐、广告和蚂蚁等大量核心实时业务。12 月 20 日，由阿里巴巴承办的 Flink Fo

本文根据胡显波老师在2018年5月12日【第九届中国数据库技术大会(DTCC)】现场演讲内容整理而成。讲师简介：胡显波 ：快狗打车IT总部高级技术经理，2014年加入58到家，负责快狗打车后端整体业务和架构工作，专注智慧物流以及智能派单领域的探索和创新，有丰富的业务架构和团队管理经验。分享大纲：一、业务与系统架构简介二、大数据应用场景三、总结正文：一、 业务与系...