logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

0005 - 机器学习-从零彻底搞懂「线性回归」算法

在杂乱无章的数据中,寻找一条规律(一条直线或一个高维平面),以此来预测未来的未知数据。定义目标(假设 𝑌 = 𝑋𝑤 + 𝑏)衡量差距(定义 MSE 损失函数)优化求解(利用导数,通过正规方程或梯度下降找最优解)模型评估(使用 RMSE 等指标打分)这套标准流程,正是今天所有前沿 AI、大语言模型(如 ChatGPT)运行的底层逻辑骨架。弄懂了线性回归,你就真正夯实了进入人工智能世界的地基。

#机器学习#近邻算法#人工智能
集群技术(008)nginx1.8 -- nginx+lvs(ip欺骗)实现上下行分离

一、前言:现实中,我们使用nginx作为负载均衡,所有上行数据也要经过nginx传送至客户端。那么就存在nginx负载过大的问题。理想状态下,我们希望nginx只接受客户端传来的下行数据,上行数据的传输交给实际分流的各个服务器去完成。但这明显违反了三次握手协议,因此,我们使用lvs实现ip欺骗以达到目的。如下图所示。二、lvs概念三、

大数据(066)Storm【Storm计算模型】

一、Storm计算模型简介DAG计算模型,一个阶段接另一个阶段再接另一个阶段,在这个有向无环图里面可以灵活的组合,DAG是由Spout和bolt组合起来的,它们都是节点,边就是stream数据流,数据流里面的数据单元就是Tuple,而grouping呢就是数据流里面的数据如何做分发。二、DAG模型介绍上图所示为DAG模型图,我们可以看到,每一个水龙...

大数据(062)Scala【Akka框架】

一、什么是AkkaAkka 是一个用 Scala 编写的库,用于简化编写容错的、高可伸缩性的 Java 和 Scala 的 Actor 模型应用。二、Akka特性1.更加简单的并发策略Simpler Concurrency,通过ActorsSTM & Transactors能够简化编写可靠的并行计算。2.EDA架构Event-driven Archit...

大数据(051)Impala【Impala介绍 & CDH重点Impala】

一、什么是Impala• Cloudera公司推出,提供对HDFS、Hbase数据的高性能、低延迟的交互式SQL查询功能。• 基于Hive使用内存计算,兼顾数据仓库、具有实时、批处理、多并发等优点• 是CDH平台首选的PB级大数据实时查询分析引擎二、Impala特点• 1、基于内存进行计算,能够对PB级数据进行交互式实时查询、分析• 2、无需转换为MR,直接读取HDFS数据• ...

大数据(041)机器学习【多元线性回归实例】

一、前言保险公司对个人投保时或根据历史数据生成的模型来计算个人保费,那么本次我们就以这个模型的求解过程为例来实践下多元线性回归。二、数据&简单分析我们已经获取到了一些数据(模拟数据),文件名为insurance.csv,文件内容如下。我们可以看出数据中共有六个维度:age(年龄),sex(性别),bmi(肥胖指数),child...

大数据(029)HBASE【Hbase 环境安装 -- 单机版standalone】

一、拷贝安装包将安装包方至node4的/opt/sxt/soft目录下二、解压解压目录 tar -zxvf hbase-1.1.3-bin.tar.gz三、配置1、配置HBase的JAVA_HOME首先查看服务器JAVA_HOME的配置【vi /etc/profile】然后执行命令vi /o

大数据(033)HBASE【Phoenix】

一、Phoenix是什么二、Phoenix安装三、

大数据 (024)Hive【Hive 正则匹配】

说在前面的话  hive的正则表达式,是非常重要!作为大数据开发人员,用好hive,正则表达式,是必须品!Hive中的正则表达式还是很强大的。数据工作者平时也离不开正则表达式。对此,特意做了个hive正则表达式的小结。所有代码都经过亲测,正常运行。1.regexp语法: A REGEXP B操作类型: strings描述: 功能与RLIKE相同sele

大数据(032)HBASE【Hbase JavaAPI访问HBase】

这里介绍使用java api来访问和操作HBase,例如create、delete、select、update等操作。1.HBase配置配置HBase使用的zookeeper集群地址和端口。private static Configuration configuration;static {configuration = HBaseConfiguration.cr

    共 22 条
  • 1
  • 2
  • 3
  • 请选择