logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

phoenix进不去sqlline.py,一直卡住并且不报错

这种方法是不可取的,删除之后也无法正常使用,并且会导致原先的集群出现问题,甚至造成数据丢失,切不可盲目使用那种方法,这里推荐的方法是先保存。zookeeper元数据出现错误,进而导致一直卡在客户端连接当中。在网上搜了都说用去zookeeper。这里可能会由于之前修改过备用。集群中的数据表,然后重装。

文章图片
#hbase#大数据#java +1
解决secureCRT连接本地服务器速度慢的问题

最近在更换网络环境后,从前通过secureCRT连接本地虚拟机时很慢,有时甚至连接不上。最终发现是密钥交换的问题。key exchange栏中所有的选项都取消,只选中一个diffie-hellman即可。进入session options。

文章图片
#hadoop#分布式#linux
解决hive通过sqoop传输数据到mysql上后,已排序的数据变混乱的问题

但是在传数据到MySQL后,数据出现了乱序。由于已解决,问题不再 就无法截图了。今晚我在hive建表时已通过order by对数据进行了排序。在MySQL表中设置主键即可解决该问题。

#hive#mysql#sqoop
pycharm连接虚拟机编写程序

这一步是设置本地文件夹和虚拟机中文件夹的映射关系,即你在本地对文件夹进行修改,虚拟机中对于路径下的内容也会发生相同变化。然后就可以通过pycharm直接编写虚拟机的python程序了。创建完成后还需要进行一步操作。做好上面的操作后点击创建。添加虚拟机环境的解释器。

文章图片
#pycharm#ide#python +1
远程服务器无管理员权限需下载应用并添加个人用户环境变量操作流程

/dev/null && echo "文件夹存在" || echo "文件夹不存在")否则创建mkdir -p ~/.local/bin。进入到应用路径并复制应用的可执行文件到刚创建的~/.local/bin文件夹下。查看是否存在命令(ls -d ~/.local/bin。确保个人目录下有~/.local/bin文件夹。官网下载对应应用压缩包并解压。临时生效(当前终端)

#服务器#chrome#运维
基于Hadoop集群实现数据处理及可视化展示

后续会将文章写出来,我这个项目的主题是疫情(虽然疫情快结束了,主要是分享思路,祝大家身体健康),数据来源于百度疫情(世界和我国各城市相关疫情数据)和一个私人的疫情网站(我国近十天的历史疫情数据),页面比较简陋,因为本人前端的功底比较薄弱。在以上基础上,可设置Linux的定时程序组合命令,实现实时爬取监控。1.部署爬虫到虚拟机(先在虚拟机中配置python环境)6.上传springboot项目到服务

文章图片
#hadoop#大数据#分布式 +2
虚拟机JDK的安装

JDK是java的开发工具包,hadoop是用java开发的,所以需要安装jdk直接去网上下载一个Linux用的jdk包就可以,这里使用的是1.8版本的jdk通过lrzsz命令上传包,没有此命令需要安装解压此包到servers下tar -xzvf jdk-8u161-linux-x64.tar.gz -C ../servers之后配置环境变量vi /etc/profile在文件的最下方添加如下内容

#java#开发语言#linux
SecureCRT远程连接虚拟机

所有远程连接工具连接虚拟机都是通过ssh2协议进行连接的,ssh是secure shell的简称,它相对于早期的telnet和rsh的明文传输,提供了加密、校验和压缩,使得我们可以很安全的远程操作。使用该软件最好通过正规渠道购买,仅作学习用途也可以pj,教程这里不再赘述,网上有很多。说一下破解注意事项:在安装好软件之后不要立即启动,将压缩包下的keygen.exe拷贝到软件根目录下,然后用管理员身

#ssh#服务器#运维
虚拟机上MySQL的安装及远程连接

使用wget命令下载mysql的yum源在此之前要先安装wget命令之后执行使用上面的命令就直接下载了安装用的Yum Repository然后用下面的命令更新升级GPG(可选)之后安装yum源即可然后再安装MySQL服务器(有可能会耗时比较长,耐心等待,或者去官网直接下载再拷贝)安装完毕之后启动mysql服务器即可启动成功! 然后我们去修改mysql的密码先获取临时密码这里我们拿着临时密码去登录m

#mysql#数据库#服务器
    共 12 条
  • 1
  • 2
  • 请选择