logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

mysql 导入大数据文件

1. 切割文件, 把文件按照每200W行拆分一个文件split -l2000000 -d all.csv part_ --verbose2. 逐个文件导入load data infile '/var/lib/mysql-files/mg/part_00' ignore into TABLE yourTablefields TERMINATED by ',' ENCLOSED BY '...

dock 下安装ruby搭建rails 服务

如果仅仅是在ubuntu下安装ruby ,那么参考第4,5 步即可1. 启动容器:   sudo docker run -t -i ubuntu/12.04_2:latest /bin/bash2. 进行系统更新:   apt-get update3. 安装必要依赖:   apt-get install curl4. 安装rvm: 

#ruby#docker
Flume TailDir 基本流程

taildir 工作流程

spark 源码分析

spark 整体架构spark 四块最重要的:sparkSqlspark流处理机器学习图计算spark 2.0 源码结构spark最核心的代码:https://github.com/apache/spark分析源码的方法从bin 文件夹开始,我们同常会打开一个spark-shell, 提交任务spark-sbumit,加入我们执行spark-submit, 那么打开

#spark
spark 源码分析

spark 整体架构spark 四块最重要的:sparkSqlspark流处理机器学习图计算spark 2.0 源码结构spark最核心的代码:https://github.com/apache/spark分析源码的方法从bin 文件夹开始,我们同常会打开一个spark-shell, 提交任务spark-sbumit,加入我们执行spark-submit, 那么打开

#spark
spark 源码分析

spark 整体架构spark 四块最重要的:sparkSqlspark流处理机器学习图计算spark 2.0 源码结构spark最核心的代码:https://github.com/apache/spark分析源码的方法从bin 文件夹开始,我们同常会打开一个spark-shell, 提交任务spark-sbumit,加入我们执行spark-submit, 那么打开

#spark
到底了