目前，从bert的应用来看，已经在对话系统、机器阅读理解、搜索、文本分类等几乎大多数 NLP 应用领域快速应用，并在部分应用领域取得了突破性的效果提升。1. BERTBERT基于一种相对较新的神经网络结构——Transformers，使用一种叫做“Self-attention”的机制来捕捉单词之间的关系。Transformers中没有卷积(如CNNs)或递归操作(如RNNs)(“Attenti..

文章目录1. 概率分布是什么2. 正态分布意味着什么2.1 中心极限定理2.2 重要性3. 正态分布的变量有哪些4.python来检验数据的分布5.特别注意1. 概率分布是什么我们可以投10000次骰子，每次都有6种可能的取值，我们可以将类别数设为6，然后我们就可以开始对每一类出现的次数进行计数了。我们可以画出上述结果的曲线，该曲线就是概率分布曲线。目标变量每个取值的可能性就由其概率分布决定。..

文章目录1. spark基本概念2. 数据倾斜优化2.1 数据倾斜是什么?2.2 如何定位数据倾斜?2.3 数据倾斜的几种典型情况2.4 缓解数据倾斜-避免数据源的数据倾斜2.5 缓解数据倾斜-调整并行度2.6 缓解数据倾斜-自定义Partitioner2.7 缓解数据倾斜- Reduce side Join转变为Map side Join2.8 缓解数据倾斜-两阶段聚合(局部聚合+全局聚合)2.

文章目录1. Spark GraphX2.Spark GraphX的抽象3.Spark GraphX图的构建4. Spark GraphX图的计算模式4.1 Spark GraphX 图的转换操作4.2 转换操作4.2 结构操作4.3 关联操作4.4 聚合操作5.GraphX实例1. Spark GraphXSpark GraphX是Spark的一个模块，主要用于进行以图为核心的计算还有分布...

1. 业务沟通与业务确认（1）哪些数据（2）想做什么事情（3）之前是怎么做的（4）之前有什么不满意的地方（5）能不能用机器学习方法来做（6）如何转换机器学习问题以及优先级（*）（7）训练出来的模型怎么用（8）期望达到什么样的效果（确定业务目标）2. 业务问题转换机器学习问题（1）是否可以用机器学习方法来做（2）如何设计开发节奏（3）最终产品的检...

情绪识别，其实就是多分类。 构造特征工程。混淆矩阵来分析分类错误数据。