logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

文件上传,服务器文件名中文乱码文件上传,服务器文件名中文乱码

有些镜像进去以后,可以先执行locale-a,查看当前容器是否有zh_CN.utf8,如果没有,好像C.UTF-8也可以,如果不想用,可以安装一下zh_CN.utf8,在Dockerfile中添加一行。问题,在windows本地调用文件上传接口时,中文名显示没问题,但是一旦文件上传到Linux服务器之后,就会出现中文乱码问题,如中文名变成?.docker镜像中编码,进入镜像命令kubectlexe

#服务器#运维
python使用kafka生产和消费案例

// confluent_kafka 使用案例import jsonfrom confluent-kafka import Producertopic_name = ""conf = {// 集群,或者服务器名"bootstrap.servers":"",// 安全隧道"security.protocol":"sasl_plaintext",//加密方式"sasl.mechanism":"SCRA

#kafka#big data#分布式
grep时排除指定的文件和目录

由于工作要求在linux环境下进行C++开发,接触linux时间尚浅,没有遇到一款功能较为齐全且较为顺手的IDE,因此查看源代码时很多功能需要手动在bash下完成,比如常常需要。在当前目录下查找所有“abcdefg”的字符串,但不在以“build_”开头的目录、“kernel”和“dirvers”中查找,同时忽略所有以“out”为后缀的文件。所以,要排除目录,还得用“–exclude-dir”的确

#svn#linux#服务器
git使用_当本地文件存在上传git

git使用本地文件存在上传git仓库本地文件创建git版本库查看本地文件状态并提交文件到仓库关联远程分支注意事项本地文件创建git版本库在文件目录下执行如下命令,将文件变成可管理的版本库git init查看本地文件状态并提交文件到仓库使用status命令查看状态,使用add命令将文件保存到版本中,使用commit命令将版本保存到仓库中git statusgit add .git commit -m

人工智能系列之基本框架梳理

人工智能三个框架神经网络模型前馈神经网络卷积神经网络图网络记忆网络循环网络记忆增强网路概率图模型模型有向图无向图推断精确推断近似推断学习EM算法机器学习类型无监督学习密度估计玻尔兹曼机深度信念网络生成对抗网络变分自编码器自编码聚类强化学习监督学习分类回归结构化学习要素模型线性模型非线性模型优化算法随机梯度下降学习准则结构风险最小化

hive脚本执行(python,shell)

python执行hive脚本#!/usr/bin/python#-*-coding:utf-8 -*-import subprocessimport tracebacksql = """select * from dim_table.tests_table where day="2021-10-12" limit 500"""cmd = 'hive -e """'+sql.replace('"',

#hive#python#hadoop
人工智能系列之一人工智能基本流程

人工智能基本流程基本流程解决的问题基本流程1.获取数据2.数据处理3.特征工程4.机器学习5.模型评估5.1 结果达到预期要求使用5.2 结果没达到预期要求重新调整参数训练解决的问题1.分类问题1.1 准备带标签的数据1.2 训练并检验1.3 分类(离散)2.回归问题2.1 准备带标签的数据2.2 训练并检验2.3 回归(连续)3.聚类问题3.1 准备不带标签的数据3.2 聚类...

#人工智能
flink批量读取es

Flink实时消费kafka数据,数据经过处理,富化、清洗等操作,写入ES。在流式计算中,此场景十分常见。本文采用ES的批量操作BulkProcessor方式,此方式使用的是TransportClient,基于Tcp协议;而rest方式采用的是restClient,基于http协议,并不能保证结果的准确性。......

#elasticsearch#flink#java
Flink处理kafka中复杂json数据、自定义get_json_object函数实现打印数据

闲话少续,直接上代码,参考官方和咨询钉钉实现

#flink#kafka#json
到底了