logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据HDFS-------HDFS文件块大小

HDFS在物理上存储文件分块存储(block),块大小可以通过配置参数(dfs.blocksize)来规定,默认文件块HADOOP2.X/3.X版本大小为128M,HADOOP1.X版本文件块为64M.

文章图片
#大数据#hdfs#hadoop
面试数据分析师和大数据开发标准

综上所述,好的数据分析师需要强大的数据分析和沟通能力,而好的大数据开发者则需要深厚的技术知识和编程技能,以及对大数据处理流程的全面了解。精通统计学和数据分析技术,包括假设检验、回归分析、聚类分析等,以便提供深入的洞察和决策支持。具备良好的数据采集和数据清洗技能,能够处理缺失值、异常值和重复数据。能够理解复杂的数据集,并能够将数据的含义和趋势解释给非技术人员。能够设计合理的数据架构,以支持数据的存储

文章图片
#大数据
面试数据分析师和大数据开发标准

综上所述,好的数据分析师需要强大的数据分析和沟通能力,而好的大数据开发者则需要深厚的技术知识和编程技能,以及对大数据处理流程的全面了解。精通统计学和数据分析技术,包括假设检验、回归分析、聚类分析等,以便提供深入的洞察和决策支持。具备良好的数据采集和数据清洗技能,能够处理缺失值、异常值和重复数据。能够理解复杂的数据集,并能够将数据的含义和趋势解释给非技术人员。能够设计合理的数据架构,以支持数据的存储

文章图片
#大数据
anaconda之jupyter lab打不开

进入anaconda界面点击jupyter lab下面的launch,显示再打开jupyterlab,但是启动不了chrome,试过的方法:一、步骤1需要生成配置文件在cmd或者Anaconda Prompt中输入以下指令jupyter notebook --generate-config出现了如下的问题(1)参考了很多博客发现这类问题出现的原因大都是对应的软件位置没有加入路径。一般需要添加三个路

文章图片
#jupyter#python
到底了