logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

pandas.DataFrame.to_json按行转json

最近需要将csv文件转成DataFrame并以json的形式展示到前台,故需要用到Dataframe的to_json方法to_json方法默认以列名为键,列内容为值,形成{col1:[v11,v21,v31…],col2:[v12,v22,v32],…}这种格式,但有时我们需要按行来转为json,形如这种格式[row1:{col1:v11,col2:v12,col3:v13…},row2:{

#pandas#json
Echarts最新json地图文件

ECharts 之前提供下载的矢量地图数据来自第三方,由于部分数据不符合国家《测绘法》规定,目前暂时停止下载服务。如上面的引用所示,echarts无法下载最新的地图数据了,最近在做北京地图数据,发现下载的beijing.json文件总是带着宣武区和崇文区,而2010年两个区分别被合并到西城区和东城区了,而网上下载的beijing.json文件依旧存在,所以费了一些力气找到了最新版的地图数据,...

#echarts
wget: unable to resolve host address解决方法

利用wget下载东西时,比如输入指令wget www.baidu.com提示报错“wget: unable to resolve host address …”wget:无法解析主机地址。这就能看出是DNS解析的问题解决办法:修改/etc/resolv.conf文件,添加nameserver即可,下面给出两个通用的谷歌域名服务器,如果有自己解析服务器也可以换成自己的vim /etc/...

RDD之aggregate

定义定义可参考RDD的APIaggregate[U](zeroValue: U)(seqOp: (U, T) ⇒ U, combOp: (U, U) ⇒ U)(implicit arg0: ClassTag[U]): UAggregate the elements of each partition, and then the results for all the partition

#spark
RDD之flatMap与Map对比

定义首先我们列出flatMap与Map的定义,可参考RDD APIdef map[U](f: (T) ⇒ U)(implicit arg0: ClassTag[U]): RDD[U]Return a new RDD by applying a function to all elements of this RDD.def flatMap[U](f: (T) ⇒ Trave

bootstrap-select多选传递到后台以及后台传递到前台绑定

bootstrap-select多选传递到后台以及后台传递到前台绑定bootstrap-select介绍bootstrap-select多选传递数据到后台bootstrap-select多选后台传递数据到前台绑定bootstrap-select介绍bootstrap-select是最近常用的简洁方便的下拉列表,开源地址:https://github.com/silviomoreto/boots..

解决java.net.UnknownHostException: 主机名: 主机名: 未知的名称或服务

问题场景:使用maven调试构建spark开发环境,于本地执行spark程序,报java.net.UnknownHostException:主机名:主机名:未知的名称或服务错误解决方式:修改本地的hosts文件,添加[127.0.0.1 主机名]的映射,比如我的主机名为HaSpark,如下图所示:修改etc/hosts文件前后对比如下:修改前:修改后:最终运

#spark
到底了