logo
publist
写文章

简介

长期从事机器学习与深度学习的研究教学与工作。

擅长的技术栈

机器学习算法及应用 深度学习算法及应用

可提供的服务

《机器学习与深度学习》系列课程学习及其应用项目开发。

大数据技术--实验07-Storm的安装与使用【实测可行】

比如,你向一个运行中的集群增加了节点。再平衡命令将会停用拓扑,然后在相应超时时间之后重分配worker,并重启拓扑。它会以一种安全的方式销毁一个拓扑,首先停用拓扑,在等待拓扑消息的时间段内允许拓扑完成当前的数据流。我们能够挂起或停用运行中的拓扑。当停用拓扑时,所有已分发的元组都会得到处理,但是。#配置storm UI(为了避免与spark的8080瑞口冲突,改为8089)#配置supervisor

文章图片
#大数据#storm
大数据技术--实验02-HDFS实践【实测可行】

接上个实验01,启动hadoop集群,启动结束后使用jps命令列出守护进程验证安装是否成功。拷贝02-上机实验/ds.txt到客户端机器,运行下面的命令和结果对照。5)复制/移动/删除文件。# slave2 节点。没有启动,所以需要执行。2)查看文件夹权限。

文章图片
#大数据#hdfs
大数据技术--实验04-Hive的安装与使用【实测可行】

1)在Hive的官网http://mirrors.cnnic.cn/apache/hive/ 下载Hive,其文件为:apache-hive-1.2.1-bin.tar.gz。这里可以看到表中是有数据的,同时数据存储在指定的/user/root/hivedemo中,并没有存储在默认的/user/hive/warehouse中;visits_data.txt数据一共包含6列,分别对应名字,姓,访问时

文章图片
#大数据#hive#mysql
大数据技术--实验01-Hadoop的安装与使用【实测可行】

使用下面表中的软件版本进行配置:准备好后,按照下面的步骤进行配置。在VMWare主界面,点击“编辑”>“虚拟网络编辑”菜单进入虚拟网卡参数设置界面。选择VMnet8条目,点击“NAT设置”按钮后可以看到我们的VMWare Workstation为NAT连接的虚拟机设定的默认网关,此处为192.168.222.2,以及子网掩码,此处为255.255.255.0。

文章图片
#大数据#hadoop#分布式
大数据技术-实验05-MapReduce实践【实测可行】

2)拷贝hadoop的安装目录的MapReduce Example的jar包到/opt目录下。1)拷贝02-上机实验/user.csv到客户端机器/opt目录下,并上传至HDFS。1)拷贝02-上机实验/ds.txt到客户端机器/opt目录下。这样的路径,可以避免这一问题,也可以设置环境变量来解决。3)运行MapReduce任务,导入数据。4)查看HBase 中user表的数据。下,解决的办法很简

文章图片
#大数据#mapreduce
一种基于MEMS的新型压电多模态振动能量收集器概念来供电物联网(IoT)应用中的自主遥感节点

因此,与仅在基本谐振模式(窄带器件)附近高效发电的经典悬臂式EH不同,FLC可以在谐振时达到几W的功率水平,在种模式之间的频率跨度上可以达到几百nW的功率水平。第一个FLCEH-MEMS制造样品进行了实验测试,ANSYS WorkbenchTM模型预测的耦合场行为(机械和压电)经过测量验证,显示了建模方法的良好准确性并证明了设备的多模态。设计概念讨论得到了仿真和实验测量的证实,验证了其性能,进而支

文章图片
#物联网
利用联合学习改进基于深度学习的磁共振图像重建的多机构合作

快速准确的磁共振重建来自欠采样数据的(MR)图像在许多临床应用中都很重要。近年来,基于深度学习的方法已被证明可以在MR图像重建上产生卓越的性能。然而,这些方法需要大量的数据,由于获取成本高和医疗数据隐私法规的原因,这些数据难以收集和共享。为了克服这一挑战,我们提出了一种基于联邦学习(FL)的解决方案,在该解决方案中,我们利用了不同机构可用的MR数据,同时保护了患者的隐私。

文章图片
#学习#深度学习#人工智能
BigEarthNet MM:一个用于遥感图像分类和检索的大规模、多模式、多标签基准档案

该文章介绍了多模式BigEarthNet(BigEarthNet-MM)基准存档,包括590,326对Sentinel-1和Sentinel-2图像补丁,用于支持多模态、多标签遥感(RS)图像检索和分类中的深度学习(DL)研究。BigEarthNet-MM中的每一对补丁都使用2018年CORINE土地覆盖(CLC)地图提供的多标签进行注释,该地图基于其主题上最详细的3级类别命名法。我们的初步研究表

文章图片
#分类#数据挖掘#人工智能
利用联合学习改进基于深度学习的磁共振图像重建的多机构合作

快速准确的磁共振重建来自欠采样数据的(MR)图像在许多临床应用中都很重要。近年来,基于深度学习的方法已被证明可以在MR图像重建上产生卓越的性能。然而,这些方法需要大量的数据,由于获取成本高和医疗数据隐私法规的原因,这些数据难以收集和共享。为了克服这一挑战,我们提出了一种基于联邦学习(FL)的解决方案,在该解决方案中,我们利用了不同机构可用的MR数据,同时保护了患者的隐私。

文章图片
#学习#深度学习#人工智能
BigEarthNet MM:一个用于遥感图像分类和检索的大规模、多模式、多标签基准档案

该文章介绍了多模式BigEarthNet(BigEarthNet-MM)基准存档,包括590,326对Sentinel-1和Sentinel-2图像补丁,用于支持多模态、多标签遥感(RS)图像检索和分类中的深度学习(DL)研究。BigEarthNet-MM中的每一对补丁都使用2018年CORINE土地覆盖(CLC)地图提供的多标签进行注释,该地图基于其主题上最详细的3级类别命名法。我们的初步研究表

文章图片
#分类#数据挖掘#人工智能
    共 12 条
  • 1
  • 2
  • 请选择