logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

大数据——SparkSQL练习题

现有学生成绩表、学生信息表、老师信息表和课程信息表,根据要求得到相应的结果import java.io.{FileWriter, PrintWriter}import org.apache.spark.SparkConfimport org.apache.spark.rdd.RDDimport org.apache.spark.sql.{DataFrame, Dataset, Row, Spark

#spark#大数据
大数据——Kafka生产者与消费者代码

导入依赖<properties><kafka.version>2.0.0</kafka.version></properties><dependency><groupId>org.apache.kafka</groupId><artifactId>kafka_2.12</artifactId&gt

#kafka#大数据
大数据——Flink Maven工程依赖

<inceptionYear>2008</inceptionYear><properties><scala.version>2.7.0</scala.version><scala.version>2.12.10</scala.version><scala.binary.version>2.12</

#flink#大数据#maven
大数据——Scala算子练习题

package cn.kgc.praitceimport java.io.Fileimport scala.collection.mutableimport scala.io.Sourceobject Test {def main(args: Array[String]): Unit = {//各表数据val course = Source.fromFile(new File("file/cour

#scala#大数据
大数据—— 使用 Durid 进行 JDBC 连接

目录一、Druid简介二、Druid的优点三、使用 Durid 进行 JDBC MySQL 的连接3.1 添加 Druid 的依赖、数据库驱动3.2 创建 JDBC 工具类3.3 添加配置参数3.4 测试代码一、Druid简介Druid是阿里开源的数据库连接池,作为后起之秀,性能比dbcp、c3p0更高,使用也越来越广泛。当然Druid不仅仅是一个连接池,还有很多其他的功能。二、Druid的优点高

#数据库#大数据#big data
大数据——利用shell脚本生成时间维度表

#!/bin/bash# 接收两个参数date1="$1"date2="$2"# 定义日期变量tempdate=`date -d "$date1" +%F`# 定义起始时间戳和终止时间戳,用来计算起始日期和终止日期中间的天数startdateSec=`date -d "$date1" +%s`enddateSec=`date -d "$date2" +%s`min=1# 计算起始日期和终止日期中间

#大数据
大数据——Spark连接数据库

导入log4j相关依赖<!--log--><dependency><groupId>org.slf4j</groupId><artifactId>slf4j-api</artifactId><version>1.7.30</version></dependency><depen

#spark#大数据
Linux网络配置

Linux网络配置二、主机名配置二、防火墙配置三、network配置1.配置network前先禁用网络管理服务2. 配置network3.在Windows下查看是否能够ping通配置的虚拟机4.查看虚拟机IP地址方法二、主机名配置#查看主机名hostname#修改主机名HOSTNAMEhostnamectl set-hostname HOSTNAME示例:默认主机名为localhost.local

#linux
Linux网络配置

Linux网络配置二、主机名配置二、防火墙配置三、network配置1.配置network前先禁用网络管理服务2. 配置network3.在Windows下查看是否能够ping通配置的虚拟机4.查看虚拟机IP地址方法二、主机名配置#查看主机名hostname#修改主机名HOSTNAMEhostnamectl set-hostname HOSTNAME示例:默认主机名为localhost.local

#linux
HBase编程(表结构创建和删除、单条和批量插入数据)

1.创建一个Maven工程JDK版本1.8Hadoop版本3.1.3Zookeeper版本3.5.7HBase版本2.3.5导入依赖<dependency><groupId>org.apache.hbase</groupId><artifactId>hbase-client</artifactId><version>2.3.5

#hbase#大数据#java
    共 17 条
  • 1
  • 2
  • 请选择