logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

windows 客户端使用IDEA远程调试Linux中 spark 代码

Remote连接在进行完一下操作之后,就可以连接到Linux的spark步骤:Run -> Edit Configurations... -> Remote -> spark -> Host(虚拟机的ip地址) Post(10000端口)SFTP连接SFTP连接的作用就是可以在IDEA中查看和操作Linux中的文件步骤: Tools -> Deployment -&g

#linux#hadoop#spark +1
IDEA 连接linux虚拟机的hive

https://blog.csdn.net/qq_44065303/article/details/105820435

#linux#hive#idea
解决虚拟机不能上网ifconfig只显示127.0.0.1的问题

问题输入ifconfig时显示:root@CrackerPark:~# ifconfiglo: flags=73<UP,LOOPBACK,RUNNING>mtu 65536inet 127.0.0.1netmask 255.0.0.0inet6 ::1prefixlen 128scopeid 0x10<host>looptxqueuelen 1000(Local Loopb

#安全#linux
Linux中快速查找文件

根据名称查找/目录下的filename.txt文件find / -name filename.txt递归查找所有的xml文件find . -name “*.xml”递归查找所有文件内容中包含hello world的xml文件find . -name “*.xml” |xargs grep “hello world”查找所以有的包含spring的xml文件grep -H ‘spring’ *.xml

#linux#服务器#运维 +1
Linux上传文件

安装工具包:yum install -y lrzsz命令:rz

#linux#运维#安全 +1
启动、关闭、重启Docker

启动:systemctl start docker关闭:systemctl enable docker重启:systemctl restart docker

#docker
c#中快速解析和提取json字符串

dynamic stuff1 = Newtonsoft.Json.JsonConvert.DeserializeObject("json字符串");string Text = stuff1["image"]["xxx"]["xxx"];//["xxx"]表示后面嵌套更深一层,还可以继续嵌套,["xxx"]数量为0个以上

#c#
TensorFlow中过拟合

什么是过拟合过拟合是指在模型参数拟合过程中的问题,由于训练包含抽样误差。训练时,复杂的模型将抽样误差也考虑在内,将抽样误差也进行了很好的拟合。过拟合的原因1.数据量少2.使用模型比较复杂解决过拟合问题1.增加训练数据量2.选择合适的模型3.正则化(L1、L2)4.Bagging5.Boosting6.Dropout...

#深度学习#tensorflow#神经网络
对于CSV、JSON、XML数据的导入

导入数据在导入数据方面,我们将介绍CSV、JSON、和XML数据的导入以及相应方法的使用。CSV数据打开csv文件,并且读取:import csvcsvfile = open('data/data-text.csv', 'rb')reader = csv.reader(csvfile)for row in reader:...

#数据挖掘
tensorflow错误解决:“tensorflow.python.framework.errors_impl.ResourceExhaustedError”

tensorflow错误解决:“tensorflow.python.framework.errors_impl.ResourceExhaustedError”解决方法:减少批处理Batch 的大小降低全连接层的维度增加池化 层缩小输入图片大小总之呢,就是显卡内存不能满足此次训练,所以就是要降低所需内存要求。...

#tensorflow#深度学习#机器学习 +1
    共 26 条
  • 1
  • 2
  • 3
  • 请选择