logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hive 分区表添加,修改,删除字段的坑

hive在修改表的字段类型时使用语法:ALTER TABLE table_name PARTITION partition_spec]CHANGE COLUMN] col_old_name col_new_name column_type COMMENT col_comment]FIRST|AFTER column_name] CASCADE|RESTRICT];--新增字段...

#hive#大数据
-bash: ulimit: open files: 无法修改 limit 值: 不允许的操作bash: ulimit: open files: cannot modify limit: 不允许的操作

[oracle@localhost ~]$ source ~/.bash_profile-bash: ulimit: open files: 无法修改 limit 值: 不允许的操作这是因为:linux对用户有默认的ulimit限制,/etc/sysconfig/limits.conf 文件可以配置用户的硬配置和软配置,硬配置是个上限。当超出上限的修改就会出“不允许的操作”这样的错误。...

#oracle
hive的元数据

 简介:hive是建立在hadoop之上的数据仓库,一般用于对大型数据集的读写和管理,存在hive里的数据实际上就是存在HDFS上,都是以文件的形式存在,不能进行读写操作,所以我们需要元数据或者说叫schem来对hdfs上的数据进行管理。那元数据表之间有没有什么关联呢?答案是肯定的。hive默认元数据表是存储在derby中的,但是derby是单session的,所以我们一般会...

#数据库#hive#大数据
分布式存储与分布式计算

总结很不错,就转过来了,原博文:http://blog.csdn.net/recommender_system/article/details/42024205一、高性能计算目前自己知道的高性能计算工具,如下所示:Hadoop:Hadoop的框架最核心的设计就是:HD...

#hadoop#大数据#机器学习
Linux vi 模式下查找命令

使用vi编辑器编辑长文件时,有时需要根据某个字符,快速定位到某一行,这里就需要使用使用类似查找的命令;在vi 模式下,直接输入“/” 斜杠;再输入要查找的字符串,然后回车即可;方法如下:1、命令模式下输入“/字符串”,例如“/hive.sit”2、如果查找下一个,按“n”即可一般模式常用命令:ctrl+b 屏幕往后移动一页ctrl+f 屏幕往前移动一页n+空格 ...

#linux#vim
Oracle 按照指定分割符拆分一行数据为多行

Oracle 按照指定分割符拆分一行数据为多行需求:将一行数据 'ADAMS,FORD,JONES,SCOTT,SMITH'; 拆分为一行一个名字的形式测试代码:regexp_substr(s.total_ename, '[^,]+',1,level)connect by level <= length(regexp_replace(s.total_ename,'[^,]+',''))+1

#正则表达式#oracle#数据分析
Oracle 分区表中本地索引(local)与全局索引(global)的适用场景

【背景】分区表创建好了之后,如果需要最大化分区表的性能就需要结合索引的使用,分区表有两种索引:本地索引和全局索引。既然存在着两种的索引类型,相信存在即合理。既然存在就会有存在的原因,也就是在特定的场景中就更能发挥出索引的性能的;本文档通过测试,总结出两种索引的适合的场景;...

#oracle#数据库
Oracle 正则表达式 REGEXP_LIKE

测试数据:create or replace view v asselect '123' as data from dual union allselect 'abc' from dual union allselect '123abc' from dual union allselect 'abc123' from dual union allselect '1a2b3c' from dual

#oracle#正则表达式#数据库
如何利用Intellij Idea搭建python编译运行环境

喜欢用IDE做开发的程序员必然不会错过JetBrains家族的IDE。JB出品,必属精品,任何一款产品都是IDE中的神兵利器。在它们中间,最为著名的当属Intellij Idea。它原是Java语言开发的集成环境,但是它的旗舰版,经过改造以后可以成为当今世界绝大多数语言的理想IDE。现在我们来谈谈如何利用它来构建python的IDE。题...

#python#人工智能#编程语言
nodejs 执行失败报错 “JavaScript heap out of memory“

报错信息很直观地指出是内存溢出了。是什么导致了内存溢出呢?其根本原因在于 nodejs 默认限制了最大可使用的内存大小。nodejs V8 引擎在 64 位机器上默认限制使用内存最大不超过 1.7GB,超过这个限制官方建议尝试优化为多线程方式。解决办法可以是增加 nodejs 可使用的最大内存大小,也可以从降低程序内存消耗的角度入手。解决办法一: 设置 nodejs 配置项 配置项 max_old

#java
    共 15 条
  • 1
  • 2
  • 请选择