logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Flink 内容分享(三):Fink原理、实战与性能优化(三)

将 operators 链接成 task 是非常有效的优化:它能减少线程之间的切换,减少消息的序列化/反序列化,减少数据在缓冲区的交换,减少了延迟的同时提高整体的吞吐量。如果你已经有了一个运行Hadoop/YARN的大数据平台,选择这个模式可以方便地利用已有的资源,这是企业中用的比较多的方式。怎样实现算子并行呢?另外,Spark Streaming中的流计算其实是微批计算,实时性不如Flink,还

文章图片
#flink#大数据
DDD领域驱动设计内容分享(二十九):DDD架构在网易支付交易业务的落地与实践

通过使用DDD架构,可以更好地理解业务需求、优化系统架构、提高系统性能和可伸缩性,帮助设计出高内聚低耦合的复杂应用系统,并且能够更好地应对系统变化。但DDD并不是适用于所有场景的解决方案,它需要根据具体情况进行分析,根据业务需求和技术特点选择合适的架构模式,并结合实际情况进行设计和实现。

文章图片
#架构
架构设计内容分享(七十一):架构必备:10WQPS超高并发架构的10大思想

限流,也称流量控制。限流是指系统在面临高并发,或者大流量请求的情况下,限制新的请求对系统的访问,从而保证系统的稳定性。具体怎么做限流呢?可以使用。

文章图片
#架构
架构设计内容分享(一百零四):记录业务系统操作日志方案实践

说明:初始化请求Context,并解析request相关信息。4.2定义操作类型与注解,操作类型为便于搜索,注解用于标记需要追踪变更的 Controller 方法。说明:1.TrackingType 操作类型。2.moduleAlias 接口对应的模块名称,moduleClass接口对应的模块名称枚举类,如配置modelClass时,moduleAlias必为枚举类中的字段。主要为了方便模块名称的

文章图片
#架构#系统架构
架构设计内容分享(十一):40亿QQ号,给1G内存,怎么去重?

所谓位图(BitMap)其实就是一个bit数组,即每一个位置都是一个bit,其中的取值可以是0或者1位图(BitMap)思想:就是用一个bit来标记元素,bit是计算机中最小的单位,也就是我们常说的计算机中的0和1,这种就是用一个位来表示的。像上面的这个位图,可以用来记录三个数:1,4,6。为啥呢?第1位、第4位、第6位 三个位置为 1。如果不用位图的话,我们想要记录1,4,6 这三个整型的话,怎

文章图片
#算法#数据结构
Flink 内容分享(二):Fink原理、实战与性能优化(二)

Override自定义Source,从0开始计数,将数字发送到下游在主逻辑中调用这个Source。

文章图片
#flink#大数据
JAVA面试题分享三百二十一:Xxl-Job核心架构原理

最后我从官网捞了一张Xxl-Job架构图奈何作者不更新呐,导致这个图稍微有点老了,有点跟现有的架构对不上比如说图中的自研RPC(xxl-rpc)部分已经替换成了Http协议,这主要是拥抱生态,方便跨语言接入但是不要紧,大体还是符合现在的整个的架构从架构图中也可以看出来,本文除了日志部分的内容没有提到,其它的整个核心逻辑基本上都讲到了而日志部分其实是个辅助的作用,让你更方便查看任务的运行情况,对任务

文章图片
#java#架构#开发语言
Flink 内容分享(三):Fink原理、实战与性能优化(三)

将 operators 链接成 task 是非常有效的优化:它能减少线程之间的切换,减少消息的序列化/反序列化,减少数据在缓冲区的交换,减少了延迟的同时提高整体的吞吐量。如果你已经有了一个运行Hadoop/YARN的大数据平台,选择这个模式可以方便地利用已有的资源,这是企业中用的比较多的方式。怎样实现算子并行呢?另外,Spark Streaming中的流计算其实是微批计算,实时性不如Flink,还

文章图片
#flink#大数据
低代码内容分享(五):低代码数据集成平台 | DsLink 使用体验

Dslink,粉丝向我安利这个工具的时候表示,钉钉党必备神器。钉钉、企业微信、飞书,基本是办公必备三巨头了,那必须值得去体验一把啊!地址:https://dslink.com.cn/officialWeb第一步就是注册一个账号,没啥技术含量,就不多说什么了,基本和所有的网站注册都是一个样的。体验版的限制是这样的,对于想要学习一下的需求来说十分友好。操作的过程和之前体验过的连接器工具都很类似,在页面

文章图片
#低代码
DDD领域驱动设计内容分享(三十三):以DDD视角谈蚂蚁金融级云原生架构SOFA

通过前两步的抽象,形成了所谓的领域模型与领域服务。业务层业务层我想聊聊model到dto的转换,从领域层接收到的数据为model,然而我希望传给应用层的是dto。为何不能直接将领域对象用于数据传递?领域对象更注重领域,而DTO更注重数据。传输对象DTO本身并不是业务对象。数据传输对象是根据UI的需求进行设计的,而不是根据领域对象进行设计的。避免直接将领域对象的行为暴露给表现层。同时对外的DTO不应

文章图片
#金融#云原生#架构
    共 91 条
  • 1
  • 2
  • 3
  • 10
  • 请选择