logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据-209 数据挖掘 机器学习理论 - 梯度下降 梯度下降算法调优

上节我们完成了如下的内容:分类技术是机器学习和数据挖掘应用中的重要组成部分,在数据学科中,约70%的问题属于分类问题。解决分类的算法也有很多,如:KNN,使距离计算来实现分类;决策树,通过构建直观易懂的树来实现分类。这里我们要展开的是Logistic回归,它是一种很常见的用来解决二元分类问题的回归方法,它主要是通过寻找最优参数来正确的分类原始数据。逻辑回归(Logistic Regression

文章图片
#大数据#数据挖掘#机器学习 +3
Jenkins持续集成GitLab项目 GitLab提交分支后触发Jenkis任务 持续集成 CI/CD 超级详细 超多图

项目开发过程中 通常会使用Git来管理项目尤其是多人项目 一起开发时 Git就更加重要了因为项目比较私密 不能公开 所以项目组使用的是GitLab的私服大家在开发分支上开发(偶尔需要独立分支)开发完毕后 先自己测试 如果基础问题没有的话 便提交至测试分支。

文章图片
#jenkins#gitlab#ci/cd
LangChain-09 Query SQL DB With RUN GPT 查询数据库 并 执行SQL 返回结果

【代码】LangChain-09 Query SQL DB With RUN GPT 查询数据库 并 执行SQL 返回结果。结合 上一节,根据我们的需求,生成SQL后,执行返回结果。

文章图片
#sql#python
Hadoop-15-Hive 元数据管理与存储 Metadata 内嵌模式 本地模式 远程模式 集群规划配置 启动服务 3节点云服务器实测

上一节完成了Hive的HQL基本操作,本节学习Metadata,并且部署远程模式,学习内嵌模式和本地模式,三台云节点服务器实际搭建测试。这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。

文章图片
#hadoop#hive#服务器 +4
Hadoop-22 Sqoop 数据MySQL到HDFS(全量) SQL生成数据 HDFS集群 Sqoop import jdbc ETL MapReduce

上节完成了Sqoop介绍和环境配置,本节使用Sqoop 从 MySQL将数据导入到 HDFS集群中,通过MapReduce任务进行转换。这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。2C4G 编号 h1212C4G 编号 h1222C2G 编号 h

文章图片
#hadoop#sqoop#mysql +4
Hadoop-12-Hive 基本介绍 下载安装配置 MariaDB安装 3台云服务Hadoop集群 架构图 对比SQL HQL

上节完成了MapReduce JOIN连表操作,本节配置Hive开启新的学习旅程!!!这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。

文章图片
#hadoop#hive#mariadb +4
大数据-38 Redis 高并发下的分布式缓存 Redis简介 缓存场景 读写模式 旁路模式 穿透模式 缓存模式 基本概念等

上节完成了HBase的JavaAPI增删改查列族等操作,本节开始看Redis、读写模式、缓存模式等基本概念。Redis(Remote Dictionary Server)远程字典服务。是用C语言开发的。这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。

文章图片
#分布式#缓存#hadoop +4
大数据-03-Hadoop集群 免密登录 超详细 3节点云 分发脚本 踩坑笔记 SSH免密 集群搭建

这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。注意,如果你和我一样,打算用公网部署,那一定要做好防火墙策略,避免不必要的麻烦!!!请大家都以学习为目的,也请不要对我的服务进行嗅探或者攻击!!!但是有一台公网服务器我还运行着别的服务,比如前几天发的:

文章图片
#hadoop#大数据#java +3
Hadoop-36 HBase 3节点云服务器集群 HBase Shell 增删改查 全程多图详细 列族 row key value filter

上节完成了:HBase的集群启动测试,HBaseShell的简单测试。本节开始学习Shell的增删改查方法,对列族、RowKey的操作等内容。这里是三台公网云服务器,每台 2C4G,搭建一个Hadoop的学习环境,供我学习。之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。

文章图片
#hadoop#hbase#服务器 +4
大数据-41 Redis 类型集合(2) bitmap位操作 geohash空间计算 stream持久化消息队列 Z阶曲线 Base32编码

上节完成了Redis的类型集合,string list set sortedset zset hash类型,本节继续Redis集合类型:bitmap位操作、geohash空间计算、Stream消息队列持久化。这里是三台公网云服务器,每台 2C4G,搭建一个大数据的学习环境,供我学习。之前已经在 VM 虚拟机上搭建过一次,但是没留下笔记,这次趁着前几天薅羊毛的3台机器,赶紧尝试在公网上搭建体验一下。

文章图片
#大数据#redis#hadoop +3
    共 68 条
  • 1
  • 2
  • 3
  • 7
  • 请选择