MemcachedMemcached是一个免费开源的、高性能的、具有分布式内存对象的缓存系统，它通过减轻数据库负载加速动态Web应用。特性：1，本质上就是一个内存key-value缓存；2，协议简单，使用的是基于文本行的协议；3，不支持数据的持久化，服务器关闭之后数据全部丢失；4，Memcached简洁而强大，便于快速开发，上手较为容易；5，互不通信的Memcached之间...

Nginx简介ApacheApache仍然是时长占用量最高的web服务器，据最新数据统计，市场占有率目前是50%左右。主要优势在于一个是比较早出现的一个Http静态资源服务器，同时又是开源的。所以在技术上的支持以及市面上的各种解决方案都比较成熟。Apache支持的模块非常丰富。NginxNginx是俄罗斯人编写的一款高性能的HTTP和反向代理服务器，在高连接并发的情况下，它能够支持高达50...

问题在往docker容器中直接使用rz上传文件时，速度很慢，所以考虑使用从本地上传至容器拿到容器IDdocker ps -a将本地文件上传到容器的指定目录中docker cp 本地文件路径 ID全称:容器路径...

无论您是数据领域的专业人员，还是其他领域的非专业人士，也许都曾遇到过数据不完整、数据过时、数据不一致、数据不准确等问题。这些低质量的数据不仅没能解决最初的疑问，甚至还可能衍生出了其他问题。质量低劣的数据会影响数据分析结果，误导业务决策，造成经济或其他方面的损失，损害使用者的信心。因此，为了避免这类问题，组织机构有必要把控数据质量。数据质量也是的重要一环。。但从广义的层面而言，数据质量还可以包括定义

数据治理中的一个重要基础工作是分析组织中数据的血缘关系。有了完整的数据血缘关系，我们可以用它进行数据溯源、表和字段变更的影响分析、数据合规性的证明、数据质量的检查等。分析数据血缘的方法主要分为四类自动解析系统跟踪机器学习人工收集自动解析主要是利用工具解析 SQL 语句、存储过程和 ETL等文件。本文以 Oracle 为例，来说明如何分析 SQL 和存储过程中的数据血缘。产生数据血缘的 SQL 语句

注册 访客只能进行用户注册、查看用户隐私政策以及向马哈鱼官方反馈意见或建议，其他功能不可使用。所以，首次接触马哈鱼，无论你是初学者或者是专业的数据分析师，都需要先进行马哈鱼用户注册，才能进行下一步学习或工作活动。 针对不同的使用场景，马哈鱼血缘分析器提供多种账户类型，在注册前可以根据自己实际情况进行身份匹配，避免反复切换用户类型影响工作效率，具体的场景介绍及适配账户类型参考下图： 马哈鱼用户分类

数据治理中的一个重要基础工作是分析组织中数据的血缘关系。有了完整的数据血缘关系，我们可以用它进行数据溯源、表和字段变更的影响分析、数据合规性的证明、数据质量的检查等。 分析数据血缘的方法主要分为四类 自动解析 系统跟踪 机器学习 人工收集 自动解析主要是利用工具解析 SQL 语句、存储过程和 ETL等文件。本文以 Oracle 为例，来说明如何分析 SQL 和存储过程中的数据血缘。 产生数据血缘的

马哈鱼数据血缘分析器是一个分析数据血缘关系的平台，可以在线直接递交 SQL 语句进行分析，也可以选择连接指定数据库获取 metadata、从本地上传文件目录、或从指定 git 仓库获取脚本进行分析。 本文介绍如果利用马哈鱼来分析SQL的case-when语句中字段依赖关系。 一个简单的Case 考虑如下SQL: select case when a.kamut=1 and b.teur IS nu

最近发现一款功能非常强大的解析SQL语句的引擎，GSP（全称General SQL Parser）。这是一款专业的SQL引擎，适用于市面上流行的各种数据库，同时他也支持了马哈鱼分析器对SQL的分析。这是他的官网： https://www.sqlparser.com/ 我们可以使用他对SQL的语法解析，格式化，提取关键字属性，获取数据库metadata等，下面用一些case来介绍下GSP的其中一个功

一、SQLFlow--数据治理专家的一把利器 数据血缘属于数据治理中的一个概念，是在数据溯源的过程中找到相关数据之间的联系，它是一个逻辑概念。数据治理里经常提到的一个词就是血缘分析，血缘分析是保证数据融合的一个手段，通过血缘分析实现数据融合处理的可追溯。大数据治理分析师常常需要对各种复杂场景下的SQL语句进行溯源分析，而限于环境因素，往往只能提供SQL语句给SQLFlow进行分析处理，SQL语句的