计算机视觉与深度学习（线性分类器、全连接神经网络）鲁鹏学习笔记

一，安装环境安装Anaconda,打开Anaconda prompt创建python=3.7版本的环境，取名叫py36conda create -n DP python=3.7激活环境conda activate DP(conda4之前的版本是：source activate py36 )退出环境conda deactivate下载如下包：xlwd,xlrd 1.2.0transformers 4

spark单机启动 spark-shell集群启动/usr/local/spark-2.4.5-bin-hadoop2.7/sbin/start-all.sh提交任务1.打包python环境:whereis python# /usr/local/python3/zip -r py_env.zip py_env2.spark提交参考：pyspark打包依赖包&使用python虚拟环境hado

前言机器学习（machine learning，ML）是强大的可以从经验中学习的技术。 通常采用观测数据或与环境交互的形式，机器学习算法会积累更多的经验，其性能也会逐步提高。 相反，对比电子商务平台等，一直执行相同的业务逻辑，无论积累多少经验，都不会自动提高（直到开发人员认识到并更新软件）。 在这本书中，将带你开启机器学习之旅，并特别关注深度学习（deep learning）的基础知识。 这是一套

一、基于MLlib的机器学习MLlib是Spark中提供机器学习函数的库，该库专为集群上并行运行的情况而设计MLlib设计理念：把数据以RDD形式表示，然后在分布式数据集上调用各种算法。归根结底，MLlib就是RDD上一系列可调用的函数的集合。注意:MLlib只包含能够在集群上运行良好的并行算法，包括分布式随机森林算法，K-means,交替最小二乘法等，如果用小规模数据集，单节点用scikit_l

旋转图片两种方法

下载浏览器下载链接：https://ftp.mozilla.org/pub/firefox/releases/79.0为版本号，可以替换https://download-installer.cdn.mozilla.net/pub/firefox/releases/79.0/win64/zh-CN/Firefox%20Setup%2079.0.exe设置不更新：https://jingyan.bai