logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

K8s 与 Service Mesh 协同:多维度强化微服务治理能力的实践路径

K8s与服务网格的协同本质是控制平面与数据平面的分层演进。通过将服务发现、流量管理等能力下沉至基础设施层,开发者可聚焦业务创新。实践表明,该架构使故障定位效率提升40%,版本发布周期缩短60%,为微服务架构提供坚实的治理基座。

#kubernetes#service_mesh#微服务
LLaMA-Factory 快速入门(一):Mac 下为个人学习微调部署大模型的流程

确保 Mac 系统版本为 macOS 10.13 或更高,并安装 Python 3.8 及以上版本。推荐使用 Miniconda 管理 Python 环境,避免依赖冲突。通过以上流程,可在 Mac 环境下完成大模型的微调与部署,适用于个人学习与研究场景。从 Hugging Face 下载适合个人学习的预训练模型(如。目录下的模型文件部署为本地 API,或集成到其他应用中。训练过程中可通过日志监控进

制造业流水线K8s代理部署经验

基于Horizontal Pod Autoscaler(HPA)设置动态扩缩容规则,例如当CPU利用率超过70%时自动增加Pod副本。通过容器化技术,生产环境与测试环境的一致性得到保障,同时支持灰度发布和快速回滚,降低停机风险。为高IO需求的服务(如质检图像处理)配置Local PV或高性能存储类(如SSD-backed StorageClass)。若跨节点通信延迟高,可启用Topology Aw

#kubernetes#容器#云原生
大模型微调实战:LoRA 微调 LLaMA 2 实现行业专属模型

LoRA 的核心思想是冻结原始模型的权重,只训练少量额外的参数。具体来说,对于原始权重矩阵 $W \in \mathbb{R}^{m \times n}$,LoRA 引入两个低秩矩阵 $B \in \mathbb{R}^{m \times r}$ 和 $A \in \mathbb{R}^{r \times n}$,其中 $r \ll \min(m, n)$ 是秩(rank)。

#python#深度学习
AIGC 模型容器化:Docker 封装 LLaMA 3+Stable Diffusion 多服务集成方案

在人工智能生成内容(AIGC)领域,LLaMA 3(大型语言模型)和Stable Diffusion(文本到图像生成模型)是核心工具。通过Docker容器化,可以将这些模型封装为独立、可移植的服务,实现高效部署和集成。本方案基于Docker和Docker Compose,提供多服务集成方案,支持GPU加速(如NVIDIA GPU),确保服务可扩展和易维护。容器化AIGC模型的主要优势包括:整体架构

#AIGC#docker
数据质量监控系统:Great Expectations 集成 Spark 实现数据校验规则开发

基础规则示例ge_df.expect_column_to_exist("user_id") # 字段存在性ge_df.expect_column_values_to_be_between("amount", 0, 10000) # 数值范围# 高级规则(统计分布)

#spark#大数据#分布式
MinIO 对象存储云原生化:在 K8s 部署 MinIO 集群并对接应用存储文件

在 K8s 上部署 MinIO 集群实现了云原生化存储,提供 S3 兼容接口,易于对接应用。高可用:分布式架构防止单点故障。可扩展:通过 Helm 轻松扩展节点。成本效益:使用标准 PVC,降低存储成本。开发友好:SDK 简化文件操作。部署后,应用可高效存储文件(如图片、日志)。建议参考MinIO 官方文档获取更新细节。如有问题,提供更多上下文,我进一步优化!

#云原生#kubernetes#容器
AWS Aurora MySQL 读写分离:配置 Reader 实例权重实现 SQL 流量按比例分发

可实现读请求的按比例分发。权重值决定各 Reader 实例接收读流量的相对比例(例如权重 70 和 30 表示 7:3 的流量分配)。首次配置时按 1:1 设置权重,通过 CloudWatch 观察负载后逐步调整。对于计算密集型查询,可分配更高权重到高性能实例。在 Aurora MySQL 中,通过设置。

#aws#mysql#sql
MinIO 2024.4 分布式对象存储:开源项目图片 / 视频存储(兼容 S3 协议)搭建

MinIO 是高性能、开源的分布式对象存储系统,完全兼容 Amazon S3 协议,适合存储图片/视频等非结构化数据。:分布式部署需确保所有节点时间同步(

#分布式#开源
深度解析:K8s 中 Service 与 Ingress 的转发机制及跨命名空间访问配置

Kubernetes(K8s)是一个强大的容器编排系统,其网络模型依赖于 Service 和 Ingress 来处理流量路由。(如 Nginx、Traefik)配合工作,后者是独立部署的组件,负责实现路由规则。Service 是 Kubernetes 的核心抽象,用于将流量路由到一组 Pod(后端实例)。组件,该组件在集群节点上运行,实现流量转发规则(如通过 iptables 或 IPVS)。In

#kubernetes#容器#云原生
    共 40 条
  • 1
  • 2
  • 3
  • 4
  • 请选择