logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

CDH运维常见问题-cloudera-scm-agent 已死,但 pid 文件存在

问题描述解决方案在CDH安装目录下的run目录下有两个目录,分别是cloudera-scm-agent和cloudera-scm-server,哪个服务死了就进哪个目录,然后删掉对应的pid文件。再查看状态就是已停止,再启动就行。...

#linux#大数据
IDEA开发SparkSQL报错:org.apache.spark.SparkException: A master URL must be set in your configuration

Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties20/08/06 10:33:42 INFO SparkContext: Running Spark version 2.4.420/08/06 10:33:42 ERROR SparkContext: Error initializing

#spark
大数据SQL经典面试题系列(3) -网易严选/考拉数据分析SQL题

查询每个用户第一单的消费金额现在数据库中有一张用户交易表order,其中有userid(用户ID)、amount(消费金额)、paytime(支付时间),请写出对应的SQL语句,查出每个用户第一单的消费金额。select a.userid,a.amountfrom(select * ,rank() over(partition by userid order by paytime) as payt

#数据库#sql
大数据SQL经典面试题系列(3) -网易严选/考拉数据分析SQL题

查询每个用户第一单的消费金额现在数据库中有一张用户交易表order,其中有userid(用户ID)、amount(消费金额)、paytime(支付时间),请写出对应的SQL语句,查出每个用户第一单的消费金额。select a.userid,a.amountfrom(select * ,rank() over(partition by userid order by paytime) as payt

#数据库#sql
大数据SQL经典面试题系列(4) - 鹅厂校招SQL硬性考察题目

目:有一张用户签到表【t_user_attendence】,标记每天用户是否签到(说明:该表包含所有用户所有工作日的出勤记录) ,包含三个字段:日期【fdate】,用户id【fuser_id】,用户当天是否签到【fis_sign_in:0否1是】;问题1:请计算截至当前每个用户已经连续签到的天数(输出表仅包含当天签到的所有用户,计算其连续签到天数)输出表【t_user_consecutive_da

#sql
大数据SQL经典面试题系列(1) - 连续3天登录用户

SELECTuser_id,count( 1 ) cntFROM( SELECTuser_id,login_date,row_number() over ( PARTITION BY user_id ORDER BY login_date ) rnFROMsqllx.tmp_last_3_day) tGROUP BYuser_id,data_sub ( login_date, t.rn )HAVI

#sql#数据仓库
大数据SQL经典面试题系列(3) -网易严选/考拉数据分析SQL题

查询每个用户第一单的消费金额现在数据库中有一张用户交易表order,其中有userid(用户ID)、amount(消费金额)、paytime(支付时间),请写出对应的SQL语句,查出每个用户第一单的消费金额。select a.userid,a.amountfrom(select * ,rank() over(partition by userid order by paytime) as payt

#数据库#sql
VS Code 自动生成get-set方法

在文档空白处右击,选择源代码操作。选择Generate Getters and Setters选择要生成get-set方法的属性,点击确定。生成成功。

#java#python
使用IDEA创建一个Scala项目

VS Code社区对Scala的支持还不是很成熟(组件安装繁琐,不支持关键词提示,不支持直接运行),为了更好的进行学习,Scala还是使用IDEA进行开发合适。1.配置Scala开发环境下载地址:https://www.scala-lang.org/download/all.html随便选一个版本,不过提前看看你使用的spark的版本号对应的scala版本。然后安装,配置环境变量。略注:scala

#scala#大数据
了解数据的发展历程--大数据简史

数据技术的发展历史就是人类追求美好生活过程最真实的写照。大数据分析的历史与未来展望最早的数字不是阿拉伯人发明的,数字的起源如同文字起源一样古老。结绳记事《易九家言》中记载“事大,大结其绳;事小,小结其绳,之多少,随物众寡”,即根据事件的性质、规模或所涉及数量的不同结系出不同的绳结。人们最早可以使用各种颜色,各种材质,粗细不同等绳子构建出数百个绳结词汇,以此来记载进行完整的有效记载。记...

#大数据#数据分析
    共 12 条
  • 1
  • 2
  • 请选择