logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据-玩转数据-数据同步工具datax

一、dataX概览1.1 DataXDataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。1.2 FeaturesDataX本身作为数据同步框架,将不同数据源的同步抽象为从源头数据源读取数据的Reader插件,以及向目标

#big data#hbase#hive
Python-玩转数据-地图可视化

一、导读Python地图可视化库有大家熟知的pyecharts、plotly、folium,其他还有稍低调的bokeh、basemap、geopandas,也是地图可视化的利器。二、pyecharts1、中国地图链式调用# -*- coding: utf-8 -*-from pyecharts.charts import Map,Geofrom pyecharts import options a

#python#开发语言#后端
大数据-玩转数据-Spark-RDD编程基础-RDD创建(python版)

大数据-玩转数据-Spark-RDD编程基础-RDD创建(python版)本章为hadoop+spark+yarn 的pyspark交互式环境。[root@hadoop1]# cd /home/hadoop/spark/bin[root@hadoop1 bin]# pyspark默认本地启动pyspark一、RDD创建Spark采用textFile()方法从文件系统中加载数据创建RDD1、从文件系

#spark#python#big data
大数据-玩转数据-Hbase的安装和基本使用

大数据-玩转数据-Hbase的安装和基本使用Hbase安装安装环境三台虚拟机:hadoop1、hadoop2、hadoop3,hadoop4已经安装好Hadoop环境和zookeeper下载Hbase安装包[root@hadoop1 ~]# wgethttp://archive.apache.org/dist/hbase/hbase-1.4.12/hbase-1.4.12-bin.tar.gz也可

#hbase#hadoop#big data
大数据-玩转数据-Oracle GoldenGate(OGG)

前言Oracle GoldenGate,简称OGG,是一种基于日志的结构化数据复制备份软件,它通过解析源数据库在线日志或归档日志获得数据的增量变化,再将这些变化应用到目标数据库,从而实现源数据库与目标数据库同步。Oracle GoldenGate可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制,从而在可以在应急系统、在线报表、实时数据仓库供应、

#kafka#etl工程师#mysql +2
大数据-玩转数据-Spark-RDD编程基础-RDD创建(python版)

大数据-玩转数据-Spark-RDD编程基础-RDD创建(python版)本章为hadoop+spark+yarn 的pyspark交互式环境。[root@hadoop1]# cd /home/hadoop/spark/bin[root@hadoop1 bin]# pyspark默认本地启动pyspark一、RDD创建Spark采用textFile()方法从文件系统中加载数据创建RDD1、从文件系

#spark#python#big data
大数据-玩转数据-Oracle GoldenGate(OGG)

前言Oracle GoldenGate,简称OGG,是一种基于日志的结构化数据复制备份软件,它通过解析源数据库在线日志或归档日志获得数据的增量变化,再将这些变化应用到目标数据库,从而实现源数据库与目标数据库同步。Oracle GoldenGate可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制,从而在可以在应急系统、在线报表、实时数据仓库供应、

#kafka#etl工程师#mysql +2
大数据-玩转数据-数据同步工具datax

一、dataX概览1.1 DataXDataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各种异构数据源之间高效的数据同步功能。1.2 FeaturesDataX本身作为数据同步框架,将不同数据源的同步抽象为从源头数据源读取数据的Reader插件,以及向目标

#big data#hbase#hive
大数据-玩转数据-Flink 自定义Sink(Mysql)

如果Flink没有提供给我们可以直接使用的连接器,那我们如果想将数据存储到我们自己的存储设备中,mysql 的安装使用请参考。

文章图片
#大数据#flink#mysql
引言-知识技能树(数据分析相关)

一、数据分析步骤二、数据分析知识库三、数据分析师能力体系

#数据分析#数据挖掘
    共 15 条
  • 1
  • 2
  • 请选择