logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

【spark使用】2.向Spark算子中传递函数方式

介绍filter的例子例1:Python 版本筛选的例子lines = sc.textFile("README.md")pythonLines = lines.filter(lambda line: "Python" in line)例2:Scala 版本筛选的例子val lines = sc.textFile("README.md") // 创建一个叫lines的RDDval pythonLin

#spark#scala#大数据
【THREE.ShaderMaterial】THREE脉冲圈实现(shader借鉴shadertoy)

THREE脉冲圈实现(shader借鉴shadertoy)1.shadertoy中具体glsl2.THREE中glsl3 不同的地方3.13.2效果预览:1.shadertoy中具体glslshadertoy传送地址vec3 hsb2rgb(in vec3 c){vec3 rgb = clamp(abs(mod(c.x*6.0+vec3(0.0,4.0,2.0),6.0)-3.0)-1.0,0.0

#webgl
glsl版本

WebGL 基于 OpenGL ES,WebGL 1.0 是 OpenGL ES 2.0 的实现,而 WebGL 2.0 则基于 OpenGL ES 3.0。OpenGL ES 2.0 基于OpenGL 2.0,OpenGL ES 3.0 基于OpenGL 3.3,

【GLSL】glsl常用函数

1.smoothstep(float edgo0,float edge1, float x);其中的 edge0 是样条线插值的下界,edge1 是样条线插值的下界,当 x 小于下界返回 0,当 x 大于上界返回 1,介于上界下界之间返回一个平滑的曲线2.mix(x,y,a)返回一个线性组合 x(1-a)+ya3.step(edge,x)如果x < edge,返回0.0,否则返回1.04.

【spark使用】3.转换算子

mapString转为Tuple2<String, Integer>public class test {public static void main(String[] args) {SparkConf conf = new SparkConf().setAppName("jiangtao_demo").setMaster("local");JavaSparkContext jsc

#scala#spark#java
已知某点经纬度计算所在瓦片行列号

具体步骤与计算方法:1.经纬度转投影坐标(原点是赤道和中央经线的交点)https://www.jianshu.com/p/778fc3e9f8892.上一步投影坐标转像素坐标(原点换到左上角)2.1=》墨卡托投影坐标到世界平面点坐标(先转到原点为左上角,范围为0-1,mapbox中也是如此转换的)具体看我博客关于mapbox墨卡托坐标转换流程(https://blog.csdn.net/qq_22

#spark#大数据#big data
到底了