logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hive 如何处理json字符串

hive处理json字符串以及json数组

文章图片
#hive#json#hadoop
python出现 exit code 132

我在运行某段代码的时候,python出现这个现象Process finished with exit code 132 (interrupted by signal 4:SIGILL),明明昨天就运行的是ok的,但是今天就不行了,去问了下DeepSeek,这个情况是什么样的,后来它给我的回答是执行了非法命令,还是和CPU相关的。一看,估计是mindnlp 有问题,然后我就卸载了这个包,安装了下更低

文章图片
#python#pandas
大数据Hive,Flink等面经

分布式快照参考的算法是Chandy-lamport的算法,其中最重要的一个机制就是checkpoint ,就是检查点,它就像一个守门员似的,当每批人经过它,它都会给大家插入一个编码,编码是递增的;就不用进行频繁的shuffle了,极大地提高了数据处理的速度;全称是Flink Complexible Event Processing, 就是复杂事件处理,它的流程就是设定一个源源不断的规则,对进来的事

文章图片
#大数据
到底了