
简介
该用户还未填写简介
擅长的技术栈
可提供的服务
暂无可提供的服务
Dagster是一款云原生数据管道编排工具,旨在解决数据工程中的开发与生产环境割裂问题。通过"数据资产"概念,用户可用Python函数声明数据集和流程,自动管理依赖关系,无需手动维护DAG配置。其特点包括:提供完整的开发平台和生产级调度引擎;支持多工具集成(如Spark、dbt等);集中管理元数据和数据血缘;内置质量检验机制。Dagster采用Apache 2.0许可证,拥有活跃社区和丰富学习资源
它能从互联网获取瓦片地图,作为底图叠加到你的 matplotlib 图表上,让地图看起来更直观。你先用 geopandas 或其他库画好基础地图,然后调用 contextily 的 add_basemap 函数,底图就会自动对齐到正确的位置。对于需要做报告、写论文、或者日常做地理数据探索的人来说,contextily 能省去手动下载和处理底图的时间。contextily 的定位很明确,它不是完整的
Headroom是一个用于AI Agent的上下文压缩工具,能在数据到达LLM前进行高效压缩,显著降低token消耗(60-90%)。它支持多种数据格式(JSON、代码、文本等)和接入方式(库模式、代理模式、Agent包装等),并提供跨Agent记忆共享功能。实际测试显示,压缩后性能保持不变甚至提升,同时还能优化模型输出减少冗余。安装简单,支持Python和TypeScript,适用于各类AI应用
家里或公司的服务器处于内网环境,外部网络无法直接访问。frp 的思路是:在一台有公网 IP 的服务器上部署服务端(frps),在内网机器上部署客户端(frpc),通过两者之间的连接把内网端口映射到公网。常见的使用场景包括:远程访问家中电脑、把本地开发环境暴露给同事测试、为没有公网 IP 的服务器搭建 Web 服务入口、跨网络访问数据库或管理面板等。配置中还可以通过插件机制扩展功能,比如把 Unix
cattrs 是一个 Python 数据结构化与校验工具,支持非结构化数据与结构化对象之间的双向转换。它主要配合 attrs 和 Python 标准库的 dataclasses 使用,通过类型注解进行校验,无需在模型中混入序列化逻辑。cattrs 提供 structure() 和 unstructure() 函数实现数据与实例的相互转换,支持嵌套类型自动处理,并覆盖 Optional、list、d







