logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

数据挖掘知识集锦

(原创作者:陈玓玏)       关于数据挖掘的定义七七八八的,但是总的来说,数据挖掘是从海量数据中挖掘有用的行为模式等信息,帮助智能化的决策。       关于数据挖掘的步骤,也有很多划分,这里作者且大胆地按照自己的理解划分一下吧,分为需求理解、结果定义、数据收集、数据清洗、数据划分、特征提取、特征选择、...

#数据挖掘
Linux下设置当前用户享有root权限

(作者:陈玓玏)一、给用户开sudo权限在部署hadoop的时候,通过./sbin/start-dfs.sh自动启动datanode那些一直不成功,总是叫我输密码,虽然我自己觉得可能是我免密登录设置不成功,但网上有小哥哥/小姐姐说是因为权限问题,因为没给我的用户开root权限,于是在/etc/sudoers文件中为我自己添加权限如下,也就是给这个DZG0370用户添加所有的root权限,但是是..

Linux中Python和pip的安装及“AttributeError:module 'pip.__main__' has no attribute '_main'错误”

(作者:陈玓玏)最近开始倒腾Linux了,安装好Linux之后的第一步就是安装Python了。不过Linux系统在这方面特别友好,因为它是自带了Python的,

spark错误记录:Container on host: was preempted(没有彻底解决,只是理解这个问题)

(作者:陈玓玏 data-master)spark-sql任务跑着跑着,碰到一个bug:Containeron host:was preempted又是一个新鲜的bug呢!!一通查资料,得出一个初步结论:因为我的任务,其中有task占用的内存太大,而我们的yarn又是使用的公平调度机制,当有新任务来的时候,我的task对应的容器就会被别的任务抢占。于是就简单了解下yarn的公平调度机制。yarn有

#spark
使用Docker来运行WebApp

(作者:陈玓玏)1、加载镜像到容器并运行webapp脚本先进入管理员模式:su root然后使用已有的webapp镜像来练习在docker上运行webapp需要先把镜像下载到docker中;docker pull training/webapp加载完成之后,我们需要把webapp的端口设置成本机的开放端口,如果是直接运行脚本和设置端口一次性完成,方法如下:docker ...

Linux中修改docker镜像源的方法及原因

(作者:陈玓玏)1、给我一个必须修改镜像的理由安装好docker后,意欲试用一下docker,于是输入sudo docker run hello-world,结果提示:Unable to find image 'hello-world:latest' locallydocker: Error response from daemon: Get https://registry-1.d...

Tensorflow安装后,import时出现错误:ImportError: DLL load failed: 找不到指定的模块

(作者:陈玓玏)tensorflow可以通过pip安装,也可以通过anaconda安装,但安装好之后,在python脚本中运行import tensorflow as tf时,却报错:ImportError: DLL load failed: 找不到指定的模块。尝试了三种解决方案:1) 一说是除了tensorflow,还要安装tensorflow-gpu后来了解到,安装tensorf...

#python#tensorflow
Linux下设置当前用户享有root权限

(作者:陈玓玏)一、给用户开sudo权限在部署hadoop的时候,通过./sbin/start-dfs.sh自动启动datanode那些一直不成功,总是叫我输密码,虽然我自己觉得可能是我免密登录设置不成功,但网上有小哥哥/小姐姐说是因为权限问题,因为没给我的用户开root权限,于是在/etc/sudoers文件中为我自己添加权限如下,也就是给这个DZG0370用户添加所有的root权限,但是是..

influxdb2使用

influxdb2是不支持sql的,在web界面可以看到具体的使用命令,比如写入数据,可以直接用influx write命令来写,下面我们尝试把一个csv文件写入数据库,再查询。在页面上,data-bucket-submit可以查看,但是看不太懂那个图,再用官方示例数据试试。先在k8sdashboard找到influx的pod,点击执行,即可进入命令行界面。influxdb2首次使用时,通过k8s

文章图片
#kubernetes#容器#云原生
k8s部署InfluxDB

pv和pvc都创建成功,但dp显示no such file or directory,说明读取不到主机路径,修改了rancher的配置,加入了/home目录,就可以了。主机看到的和实际pv挂载的路径不一致,实际默认根目录是/data.根据配置文件创建configmap。

文章图片
#kubernetes#容器#云原生
    共 21 条
  • 1
  • 2
  • 3
  • 请选择