logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

在ubuntu上部署安装ftp服务器

FTP 是File Transfer Protocol(文件传输协议)的英文简称,而中文简称为“文本传输协议”。用于Internet上的控制文件的双向传输。在FTP的使用当中,用户经常遇到两个概念:"下载"(Download)和"上传"(Upload)。"下载"文件就是从远程主机拷贝文件至自己的计算机上;"上传"文件就是将文件从自己的计算机中拷贝至远程主机上。用In...

涤生大数据教学集群的首次运维现场复现

基于以上wiki服务的报错,一开始怀疑是网络的问题,首先查看了阿里云的网络监控,再次查看了我们的vpn服务监控(因为我们在集群安全防护上,是将所有的主机服务都隐藏在阿里云内网的,学员的对教学环境资源的访问都是需要通过VPN认证登录)还有其他内部服务的访问也都是没有问题的,这足以说明网络上是健康的。),具体查看磁盘的存储文件,发现其他的日志文件也占据不小的存储空间,(简直就是看到了救命稻草),删除此

文章图片
#大数据#运维
数据人的职场护城河是啥?11年老数据人的思考

最近数据圈混职场的小伙伴肯定发现了:有的岗位火得快凉得也快,天天追着新技术跑;但那些扎扎实实干数据仓库的老司机,反而越来越吃香。这到底是为啥?你们公司技术部是不是也有这么两种人?一种开口闭口"大模型"、"特征工程",PPT上全是高大上的架构图;另一种平时闷不吭声,可一旦数仓出问题、报表出岔子,全公司都得喊他爸爸。前者像时尚圈博主,永远追着潮流跑;后者却像老中医,越老越值钱。为啥会这样?秘密就藏在"

文章图片
#数据仓库#职场和发展
数据人的职场护城河是啥?11年老数据人的思考

最近数据圈混职场的小伙伴肯定发现了:有的岗位火得快凉得也快,天天追着新技术跑;但那些扎扎实实干数据仓库的老司机,反而越来越吃香。这到底是为啥?你们公司技术部是不是也有这么两种人?一种开口闭口"大模型"、"特征工程",PPT上全是高大上的架构图;另一种平时闷不吭声,可一旦数仓出问题、报表出岔子,全公司都得喊他爸爸。前者像时尚圈博主,永远追着潮流跑;后者却像老中医,越老越值钱。为啥会这样?秘密就藏在"

文章图片
#数据仓库#职场和发展
4月份30+同学拿到大数据offer,他们都是啥条件?

卷,是这个时代的特征和主题,只要你是个人,你就逃不过。普通人卷工作、卷能力、卷人脉关系,连pdd抢单都得卷网络卷手速。如果卷不死就朝死里卷,要么卷别人,要么被别人卷,现在的大环境一言难尽个,互联网行情也是江河日下。整体岗位变少,其他行业高学历的人才还在不断涌入,市场在逐步淘汰学历差并且能力差的人。

文章图片
#大数据
企业大数据可视化案例专题分享-入门

本文介绍了什么是企业级的数据可视化场景,同时进行了举例。

文章图片
#大数据
一本院校大三萌妹子须臾:我的大数据之路

大家好啊!这里是须臾,正就读于一所普通的一本院校,是新兴专业“数据科学与大数据技术”的大三学生,马上要大四秋招了,压力好大哇,捂脸。

文章图片
#大数据#数据仓库
大数据运维:datanode启动后挂了Initialization failed for Block pool <registering>

1.案发现场还原datanode节点因为坏盘,机器卡死掉线,datanode退役。把坏盘目录去掉后,重启datanode后出现一会dn自动挂掉的情况。查看日志报错如下:1月 8, 上午10点26:12.689WARNorg.apache.hadoop.hdfs.server.common.StorageFailed to analyze storage directories for block

文章图片
#大数据#hadoop
Apache Spark 4.0:将大数据分析提升到新的水平

Apache Spark 4.0 带来了 PySpark 画图、多态 UDTF、改进的 SQL 脚本和 Python API 更新,以增强实时分析和可用性。 Apache Spark 4.0 于 2025 年发布,它通过增强性能、可访问性和开发者生产力的创新,重新定义了大数据处理。在 Databricks、Apple 和 NVIDIA 等机构的 400 多位开发者的贡献下,Spark 4.0 解决

文章图片
#apache#spark#数据分析
涤生大数据教学集群的首次运维现场复现

基于以上wiki服务的报错,一开始怀疑是网络的问题,首先查看了阿里云的网络监控,再次查看了我们的vpn服务监控(因为我们在集群安全防护上,是将所有的主机服务都隐藏在阿里云内网的,学员的对教学环境资源的访问都是需要通过VPN认证登录)还有其他内部服务的访问也都是没有问题的,这足以说明网络上是健康的。),具体查看磁盘的存储文件,发现其他的日志文件也占据不小的存储空间,(简直就是看到了救命稻草),删除此

文章图片
#大数据#运维
    共 102 条
  • 1
  • 2
  • 3
  • 11
  • 请选择