##################################################################### !/usr/bin/env python3# -*- coding:utf-8 -*-####################################################################import loggingimpor

数据可以是重复数据、未观测数据和异常数据（离群值），可以有不存在的地址、错误的电话号码、区号，不准确的地理坐标、错误的日期，不正确的标签、大小写字母混乱、尾随空格以及许多其它更小的问题。数据工程师的工作就是清理数据，这样才能建立一个统计或者学习的机器学习的模型检查重复数据、未观测数据和异常数据（离群值）重复数据重复数据是在数据集中出现在不同行，但是仔细检查后是相同的观测数据。如果你的数据是...

Pytorch：深度学习基础及数学原理监督学习和无监督学习常见机器学习方法：监督学习：通过已有的训练样本（即已知数据及对应的输出）去训练得到一个最优模型，再利用这个模型将所有的输入映射为相应的输出无监督学习：没有已训练样本，需要对数据进行建模半监督学习：在训练阶段结合大量未标记的数据和少量的标签数据。使用训练集训练的模型在训练时更为准确强化学习：设定一个回报函数，通过这个函数来确认是...

docker的swarm集群已经支持多主机的overlay网络，而且目前测试下来发现安装及配置非常方便，跟k8s相比，安装及配置要轻松好多。测试环境使用2台虚拟机来测试，操作系统为ubuntu 16.04.04，系统自带内核为4.2，注意overlay需要3.16以上的内核版本。主机名IP备注ubuntu1192.168.12.121mangerubuntu2192.168...

拉取镜像docker Pulling library/postgres运行Postgres(映射一个端口)：docker run --name postgres1 -e POSTGRES_PASSWORD=password -d -p 5432:5432 postgres将容器的端口5432映射到服务器端口5432。 -p< host_port>：< cont...

docker: Error response from daemon: Get https://registry-1.docker.io/v2/: net/http: request canceled (Client.Timeout exceeded while awaiting headers).解决方案：1.vim /etc/docker/daemon.json{"regis...

Linux ubuntu-18.04 root用户登录教程一、打开终端 输入指令，sudo passwd root1、输入当前用户密码2、设置root用户密码3、确认root用户密码二、切换root用户权限，代码如下su - root1、输入设置好的root 密码三、修改文件,命令cd /usr/share/lightdm/lightdm.conf.d/1、输入 ls...

docker的swarm集群已经支持多主机的overlay网络，而且目前测试下来发现安装及配置非常方便，跟k8s相比，安装及配置要轻松好多。测试环境使用2台虚拟机来测试，操作系统为ubuntu 16.04.04，系统自带内核为4.2，注意overlay需要3.16以上的内核版本。主机名IP备注ubuntu1192.168.12.121mangerubuntu2192.168...

shell#!/bin/bashstart_date="20210917"end_date="20211116"while [ "$start_date" -le "$end_date" ];dostat_date=`date -d "$start_date" +%Y-%m-%d`echo $stat_datestart_date=$(date -d "$start_date+1days" +%Y

PGsql循环删除库中表CREATE OR REPLACE FUNCTION public.del_table()RETURNS voidLANGUAGE plpgsqlAS $function$DECLAREtmp VARCHAR(512);DECLARE names CURSOR FORselect tablename from pg_tables where schemaname='publ