java.net.BindException: Address already in use: Service 'SparkUI' failed after 16 retries!at sun.nio.ch.Net.bind0(Native Method)at sun.nio.ch.Net.bind(Net.java:444)at sun.nio.ch.Net.bind(Net.java:4...

今天部署一个jar包的时候遇到一个问题：Exception in thread “main” org.springframework.beans.factory.xml.XmlBeanDefinitionStoreException: Line 10 in XML document from class path resource [app-config.xml] is invalid; ne

ref：https://www.datacouncil.ai/hubfs/DataEngConf/Data%20Council/Slides%20SF%2019/Amundsen%20-%20A%20Data%20Discovery%20Platform%20from%20Lyft.pdf

背景和范围当前大数据团队没有一个统一的操作权限控制和管理平台，对于分析师在服务器上的权限，目前都是给予对应分析节点的EC2机器账号，且为了方便操作和管理都是给予的管理员权限，因此安全性风险较大；对于数据开发者，主要通过分配IAM控制AWS的操作权限；对于team的所有人都是通过分配aws的ak,sk在本地进行操作赋权；随着数据平台的不断的丰富和完善，需要在各组件之上做认证，鉴权和审计等管理，数..

目前正在公司了做均价预测这一模块的算法，中间用到了一个简单的预测模型，那就是通过拟合得到有效的数据均价。      问题的提出：假设有一批有效数据，这批数据是有均价的，但是还有一部分是没有均价的，如何去通过有均价的数据去预测未知数据的均价呢？举个例子，你跟你朋友说你到商场里买

1. 下载及安装 MSI installerhttps://s3.amazonaws.com/aws-cli/AWSCLI64.msi2.安装Python。  CLI是基于python开发的，故需安装pythonhttps://www.python.org/download/我这里选择的是2.7版本的安装python后，需要配置下path打开cmd命