logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

webInspect SprinBoot2.x安全整改

都是基于Springboot2.x整改一.Insecure Transport: Weak SSL CipherInsecure Transport: Weak SSL Cipher(11285)Insecure Transport: Weak SSL Protocol(11516)Insecure Transport: Weak SSL Protocol(11395)需要进行两步操作:...

数据预处理pandas pd.json_normalize占用内存过大优化

从ES下载数据,数据格式为json,然后由pandas进行解析,json中的嵌套字段会进行展开作为列名(由于维度初期无法预测,所以根据数据有啥列就使用啥列,这是最方便的点),变成表格,方面了后续的处理,但在使用过程却发现原本6.xG的数据量在解析,预处理时候会变成60多G,甚至80G的内存占用,资源难以满足。

#pandas
keras 可视化模型结果,f1_score,recall,acc,acc_valid,checkpoint

'''Created on 2018年8月8日'''import kerasfrom keras.models import Sequentialfrom keras.layers import Denseimport numpy as npimport tflearnimport tflearn.datasets.mnist as mnistfrom keras.callb...

#keras
彻底解决Tensorflow2.0 使用tensorflow_datasets出现unbalanced parenthesis错误

安装tensorflow2.0和安装tensorflow_datasetspip install tensorflow==2.0.0-alpha0pip install tensorflow_datasets运行以下代码会发生错误:import tensorflow_datasets as tfdsimport tensorflow as tfdataset, info = tf...

#tensorflow
sklearn 使用GridSearchCV实现自动调参,选出最优参数

from sklearn.grid_search import GridSearchCVfrom sklearn.svm import SVCimport tflearnimport tflearn.datasets.mnist as mnist#加载数据x_train, y_train, x_test, y_test = mnist.load_data(one_hot=False)#...

#sklearn#机器学习
通俗易懂了解大语言模型LLM发展历程

2方面,1方面是面向生命科学,了解和学习人最自然的知识和本性;另一方面是面向行业,例如下面是天猫精灵团队为了让回复更加先得有温度,请了社会,心理专家面对敏感问题打的标签。

#语言模型#人工智能#自然语言处理
keras 两种训练模型方式fit和fit_generator(节省内存)

第一种,fitimport kerasfrom keras.models import Sequentialfrom keras.layers import Denseimport numpy as npfrom sklearn.preprocessing import LabelEncoderfrom sklearn.preprocessing import OneHotEncoder

#keras#机器学习#人工智能
推荐系统的发展历程

1.协同过滤算法(Collaborative Filtering,CF)对于协同过滤的研究可以追溯到1992年,Xerox的研究中心开发了一种基于协同过滤的邮件筛选系统,用以过滤一些用户不感兴趣的无用邮件。协同过滤在互联网大放异彩源于互联网电商巨头Amazon,2003年,Amazon发表论文Amazon.com Recimmenders Item-to-Item Collaborative Fi

#推荐算法#机器学习#数据挖掘
通俗易懂了解大语言模型LLM发展历程

2方面,1方面是面向生命科学,了解和学习人最自然的知识和本性;另一方面是面向行业,例如下面是天猫精灵团队为了让回复更加先得有温度,请了社会,心理专家面对敏感问题打的标签。

#语言模型#人工智能#自然语言处理
使用LocalDateTime解析带有微秒,纳秒时间格式yyyy-MM-dd'T'HH:mm:ss.SSSSSSZ

1.使用SimpleDateFormat解析带有微秒,纳秒格式的时间会出现多几分钟的现象,因为SimpleDateFormat只能解析到毫秒,会将微秒等当做毫秒来解析2.使用LocalDateTime来正确解析,JDK1.8后加入package javaTEST;import java.math.BigDecimal;import java.text.SimpleDateFormat;...

    共 18 条
  • 1
  • 2
  • 请选择