logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

基于Docker一键部署整个大数据平台及其他微服务架构

随着大数据平台型产品方向的深入应用实践和Docker开源社区的逐渐成熟,业界有不少的大数据研发团队开始拥抱Docker。简单来说,Docker会让Hadoop平台部署更加简单快捷、让研发和测试团队集成交付更加敏捷高效、让产线环境的运维更加有质量保障。基于 Docker 可以实现 CaaS(Containers as a Service)微服务架构,一般一个应用程序会提供多个服务,包括内部服务和..

#big data#docker#微服务
深度学习热点|超直观无公式图解Contrastive Predictive Coding从脸盲说起

点击上方,选择星标或置顶,每天给你送上干货作者 | 得未曾有出品 | 对白的算法屋编者寄语:通过对比学习来区分李沁和孙怡。Contrastive Learning (对比学习) 是这两年深度学习非常热的话题,可以说是刷新了很多人对无监督学习对认知。最初谷歌写的Representation Learning with Contrastive Predictive Coding (

文章图片
#深度学习#机器学习#算法
NLPer福利!清华推出Prompt-tuning开源工具包,取代传统的微调fine-tuning

大家好,我是对白。今天要给大家推荐一下我校计算机系NLP实验室的最新成果:OpenPrompt开源工具包。有了它,初学者也可轻松部署Prompt-learning框架来利用预训练模型解决各种NLP问题,下面就让我们一起来看看吧。如何高效地使用大规模预训练语言模型(Pre-trained Language Models, PLMs)是近年NLP领域中的核心问题之一。一直以来,传统的微调(fine-t

文章图片
#自然语言处理#深度学习#python
详细解读大数据分析引擎Pig&PigLatin语句

欢迎关注大数据和人工智能技术文章发布的微信公众号:清研学堂,在这里你可以学到夜白(作者笔名)精心整理的笔记,让我们每天进步一点点,让优秀成为一种习惯!详细解读大数据分析引擎Pig&PigLatin语句Pig一、Pig的介绍:Pig由Yahoo开发,主要应用于数据分析,Twitter公司大量使用Pig处理海量数据,Pig之所以是数据分析引擎,是因为Pig相当于一个翻译器,将P...

详细解读大数据分析引擎Pig&PigLatin语句

详细解读大数据分析引擎Pig&PigLatin语句Pig一、Pig的介绍:Pig由Yahoo开发,主要应用于数据分析,Twitter公司大量使用Pig处理海量数据,Pig之所以是数据分析引擎,是因为Pig相当于一个翻译器,将PigLatin语句翻译成MapReduce程序(只有在执行dump和store命令时才会翻译成MapR...

虚拟机上不能使用CUDA

虚拟机上不能使用CUDA虚拟机的显卡是虚拟的,不能使用CUDA(至少很难),搞了一天才晃过神来:lspci 查找目前主机的硬件配备用 grep -i 进行大小写无关的搜索posted @ 2018-03-27 17:16 予你心安 阅读(...) 评论(...)编辑 收藏...

搭建Hadoop集群的HA高可用架构(超详细步骤+已验证)

一、集群的规划Zookeeper集群:192.168.182.12 (bigdata12)192.168.182.13 (bigdata13)192.168.182.14 (bigdata14)Hadoop集群:192.168.182.12 (bigdata12)NameNode1主节点ResourceManager1主节点Journa...

Docker中查看Mysql数据库中的各环境参数

Docker中查看Mysql数据库中的各环境参数通过官方的文档可以看到运行MySQL容器的命令是:docker run --name some-mysql -e MYSQL_ROOT_PASSWORD=mypwd -d mysql:tag如:docker run --name mysqldb -e MYSQL_ROOT_PASSWOR...

解决docker加载新的镜像后repository和tag名称都为none

可以使用命令:docker tag [image id] [name]:[版本]例如:docker tag f2a91732366c ubuntu:14.04

docker load导入镜像报错:open /var/lib/docker/tmp/docker-import-970689518/bin/json: no such file or directo...

docker load导入镜像报错:open /var/lib/docker/tmp/docker-import-970689518/bin/json: no such file or directory今天将之前打包好的mysql5.7.19的tar包通过docker load命令导入到Docker环境中却报出了如下错误:[root@h...

到底了