logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

Spark 的一些典型应用场景及具体示例

Apache Spark 是一个高性能的分布式计算框架,广泛应用于大数据处理、机器学习、实时分析等领域。

#spark#大数据#分布式
量化工具-

实时行情(价格、成交量、盘口订单)、历史数据、财务数据(财报、ROE等)、另类数据(社交媒体情绪、卫星图像、供应链数据等)。基于统计学、机器学习(如随机森林、LSTM)或传统技术分析,编写交易规则(例如:“5日均线上穿20日均线时买入”)。提取技术指标(均线、MACD)、基本面因子(市盈率、现金流)、统计因子(波动率、相关性)等,供策略回测使用。拆分大单为小单(TWAP、VWAP)、隐藏订单(冰山

#人工智能
训练一个大模型的捷径——deepseek

现有的大模型通常已经经过大规模的数据训练,并且能在多种任务上进行零-shot推理(即在没有显式训练数据的情况下进行推理)。通过与模型的交互,不断优化目标任务的完成质量,强化学习可以帮助模型逐步提升在特定任务上的表现。总体而言,尽管计算资源有限,利用现有的强大模型仍然可以达到较高的效果,并且通过一些技术如知识蒸馏、强化学习等,可以进一步提高模型的性能。是的,从现有的大模型中通过一问一答的方式“学习”

文章图片
#人工智能
Rust 编程语言的官方源码仓库

是的官方源码仓库,包含了编译器、标准库、核心工具链等所有核心组件的实现。

#rust#算法#开发语言
OSPF网络协议

属于IGP(内部网关协议),用于在单一自治系统(AS)内动态分发路由信息。:每个路由器收集相邻路由器的链路状态(如带宽、延迟),并泛洪(Flooding)LSA到整个区域,最终所有路由器构建一致的。:通过划分区域(Area)减少计算开销,Area 0是骨干区域,其他区域必须与之直接相连。:在多路访问网络(如以太网)中选举DR,负责与其他路由器同步LSDB,减少泛洪开销。通过理解OSPF的链路状态机

文章图片
#网络协议#网络
docker的文件系统Overlay2

│├── diff# 该层的实际文件内容(相当于 Lower Dir)由于多个容器可能共享相同的镜像层(Lower Dir),但每个容器有自己的 Upper Dir,因此。│├── lower# 指向父层的引用(如 `l/ABC123`)├── merged/# 合并后的文件系统(容器看到的视图),用于管理容器镜像的分层存储和容器运行时文件系统的合并。├── upper/# 可写层(Upper D

#docker#容器#运维
讲解一下 mailcow-dockerized 这个项目

mailcow-dockerized 本身不是一个从零写的邮件服务器软件,而是一个极其成功的“集成和编排”项目。它精选了业界最优秀的开源组件(Postfix, Dovecot, Rspamd 等)。它用作为粘合剂,将这些组件优雅地组合在一起,解决了部署和依赖的难题。它提供了一个强大的 Web UI,将底层的复杂配置转换成了简单的图形化操作,极大地降低了使用门槛。

#python
Kubernetes 集群到 Jumpserver

curl -k -H "Authorization: Bearer <粘贴Token>" https://<k8s-api-server>:6443/api/v1/namespaces/default/pods。重新生成 Token(ServiceAccount 的 Token 默认永久有效,但 Secret 可能被删除)。:在 Jumpserver 集群配置中上传 k8s 的 CA 证书(路径通

文章图片
#kubernetes#容器#云原生
使用 Zabbix 官方 Nginx 模板的详细指南

Nginx: Version has changed (信息级别)Nginx: Process is not running (高优先级)Nginx: Failed to fetch stub status page (警告级别)Nginx: High connections drop rate (警告级别)Nginx: Service is down (一般级别)Nginx: Service r

#zabbix#nginx#java
Kube-Prometheus-Stack (KPS) 是一个非常强大且全面的 Kubernetes 监控解决方案

Kubernetes / Compute Resources / Node (Pods):深入到每个节点的资源使用情况,包括节点自身的 CPU、内存、磁盘、网络,以及运行在该节点上的 Pods 的资源消耗。查看 Pod 重启次数: kube_pod_container_status_restarts_total{namespace="your-namespace", pod="your-pod-n

#prometheus#kubernetes#容器
    共 45 条
  • 1
  • 2
  • 3
  • 4
  • 5
  • 请选择