logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

fasttext 加载模型 内存分配失败

model_path="demo.model.bin"word="csdn"import fasttextmodel= fasttext.load_model(model_path)python 使用fasttext 加载 已经训练好的模型,结果出现异常,代码如上“Exception: fastText: Cannot load demo.model.bin

ubuntu gpu显卡内存 一直被占,nvidia-smi 看不到进程

使用 fuser 命令 查看 显卡进程信息,注意调整参数,可能你的显卡 是nvidia1,或nvidia6fuser -v /dev/nvidia0如果 fuser 命令 找不到,如图fuser: command not found安装fuser shell命令apt-get installpsmisc查找到 ID 后 kill -9 $pid最后 nvidia-smi 查看 进程占用最后推荐使用

#机器学习
jieba 分词如何控制分词粒度

本文主要内容是分词力度的应用场景jieba分词如何实现分词的粒度分词粒度的概念我最喜欢的篮球明星是勒布朗·詹姆斯,一般我们直接称呼他为詹姆斯以该句话为例,最好的分词结果是 “勒布朗·詹姆斯” 和 “詹姆斯”都能分离出来。这就涉及到了分词粒度的控制,即如何保证长的词语不会被分开。常用分词工具,ansj 直接提供分词粒度的控制和词性的自定义校正 而 python 版本的jieb...

sympy 求导,并带入值进行计算

python 中的sympy 包能实现 表达式的求导。本文主要包含内容为:scipy 求导数sympy  表达式求导sympy 带入值计算scipy求导scipy 能够直接对函数求导,缺点是需要无法保存导数的表达式,每次带入值计算,需要重复求导。import numpy as npfrom scipy.misc import derivativedef f(x)...

#python
linux普通用户配置自己的python环境

linux服务器上默认安装了python2.7,打算在自己的用户下面安装python3的环境。主要包括安装python和安装pip等,具体流程如下:在 https://www.anaconda.com/download/#linux  下获得下载链接2.wget   https://repo.anaconda.com/archive/Anaconda3-5.3.0-Linux-x86_64...

python json 数据解析失败:json.decoder.JSONDecodeError: Expecting property name enclosed in double quotes

s ="[{u'\u62bd\u5956': 1.0}]"s = "{u'lat': 61.190495, u'lng': -149.86884}"在使用json解析字符串上述类型的字符串时,json.loads()总是解析失败,错误如下:json.decoder.JSONDecodeError: Expecting property name enclos

docker 安装 基于python3.6 的 tensorflow-gpu

dockerhub 上 如图,官方提供了很多tensorflow的镜像,可根据自己的驱动,cuda版本使用对应的镜像,具体使用方式参考tensorflow 官方docker安装文档https://www.tensorflow.org/install/docker?hl=zh-cn但是这些镜像存在一些不足,例如镜像 的系统环境是ubuntu,python 版本是3.5等等,为了解决这些问...

python 使用 kafka 中 assert has_snappy(), 'Snappy decompression unsupported'的错误解决

任务场景 ,初次安装 kafka ,出现错误 主要是依赖package 未安装,conda安装 snappy 即可,命令如下:conda install python-snappy直接使用 “pip install python-snappy”安装 可能由于gcc 安装问题出现如下错误,需要首先解决gcc 问题,建议直接使用第一种安装方式即可解决问题...

#python#kafka
python transformers 查看默认下载地址

查看本地 huggingface 代码库。

文章图片
#人工智能
hadoop-streaming 需要的python版本打包

在使用python写mapper-reduce的时候,集群的python 环境往往不能满足开发的需求,需要自己重新打包python,以下是自己打包python 的主要过程:下载pythonwget https://www.python.org/ftp/python/3.6.8/Python-3.6.8.tgz# 解压tar -xzvf Python-3.6.8.tg#指定pyth.........

#mr
到底了