logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

deepseek 技巧整理

请帮我列出减肥期间可以吃的水果,并分析该水果含有的营养元素,以表格的形式星现。1.要以html的方式输出 2.要可以直接运行 3.页面要提供可以直接下载word和excel功能。

#人工智能#AIGC
深度学习与计算机视觉-6章 Python-OpenCV

给深度学习入门者的Python快速教程 - 番外篇之Python-OpenCVhttps://blog.csdn.net/a119258/article/details/78225351的番外篇,因为严格来说不是在讲Python而是讲在Python下使用OpenCV。本篇将介绍和深度学习数据处理阶段最相关的基础使用,并完成4个有趣实用的小例子:- 延时摄影小程序- 视频中截屏采样的...

spark 在yarn执行job时一直抱0.0.0.0:8030错误

近日新写完的spark任务放到yarn上面执行时,在yarn的slave节点中一直看到报错日志:连接不到0.0.0.0:8030 。1 The logs are as below:2 2014-08-11 20:10:59,795 INFO [main] org.apache.hadoop.yarn.client.RMProxy: Connecting to ResourceManager at.

聊聊mysql jdbc的queryTimeout及next方法

序本文主要介绍一下mysql jdbc statement的queryTimeout及resultSet的next方法executeQuery()mysql-connector-java-5.1.43-sources.jar!/com/mysql/jdbc/PreparedStatement.java/*** A Prepared SQL query is executed and i...

hadoop之failed task和killed task

failed task可理解为自杀,也就是task本身出了问题而自杀;killed task可理解为是他杀,也就是jobtracker认为这个任务的执行是多余的,所以把任务直接杀掉。failed task再次调度时不会在那些曾经失败的节点上运行,而killed task则可能被再次调度到任何一个节点上(包括曾经失败多的节点).起初用hadoop的时候经常在一个complete的job中看到...

spark 写 gp/tpg 效率优化:写入 237w 行数据耗时从 77 分钟到 34 秒

请原谅我标题党了,这年代不标题党没法混啊。。。 T .T其实事情很简单,先介绍一下背景,背景是我们 lz 或者 tesla 上跑 spark 任务,一通计算之后,结果总要落地,一般落地到 tdw/tpg,而具体到我们这次的场景中,我们用的是 gp,gp 全称是 greenplum,是一个 mpp 版本的 postgresql,可以参考这个简介《Pivotal开源基于PostgreS

spark机器学习库指南[Spark 1.3.1版]——决策树(decision trees)

spark机器学习库指南[Spark 1.3.1版]——决策树(decision trees)fuqingchuan 机器学习 2015-03-22  3,477次浏览 GINI, spark, 决策树, 熵 spark机器学习库指南[Spark1.3.1版]——决策树(decision trees)已关闭评论下面是章节决策树的目录(其他内容参见全文目录)

这才是真正的物流大数据挖掘思路

这才是真正的物流大数据挖掘思路!2015-8-17 09:00| 发布者:admin| 查看: 108| 评论: 0|来自: PPV课大数据摘要: 物流大数据主要包括运单信息的数据和车辆信息的数据,然而关于运单信息往往涉及商业机密,并且信息分布于不同行业企业内部,不宜公开。因此当前现实的数据条件来看,实业界和学术界的物流大数据主要是关于货运车辆信 ...

kafka2.9.2的分布式集群安装和demo(java api)测试

问题导读1、什么是kafka?2、kafka的官方网站在哪里?3、在哪里下载?需要哪些组件的支持?4、如何安装?  一、什么是kafka?  kafka是LinkedIn开发并开源的一个分布式MQ系统,现在是Apache的一个孵化项目。在它的主页描述kafka为一个高吞吐量的分布式(能将消息分散到不同的节点上)MQ。Kafka仅仅由7000行Scal

spark 集群模式读写mysql 问题的处理

时间:20150313现象:使用local 模式提交正常,但是调整为集群模式出现空指针异常。使用./bin/spark-submit --master spark://jt-host-kvm-17:7077 --classparkMysql.ParkInCountMysql --executor-memory 300m    /httx/work/work.jar local--driver

    共 387 条
  • 1
  • 2
  • 3
  • 39
  • 请选择