基于Seq2Seq模型的机器翻译引入Attention的Seq2Seq模型-机器翻译Transformer首先，可以思考为什么会需要Transformer？大部分的机器翻译等序列生成任务都是基于Encoder-Decoder的模式，而Encoder和Decoder一般是由RNN、LSTM、GRU其中一种，它们的特点就是：每个时刻的输出是根据上一时刻隐藏层state和当前时刻的输入，由这样的方式来实

安装jdk首先，需要安装jdk环境，因为hadoop是由Java编写。rpm -ivh jdk-8u91-linux-x64.rpm默认安装到这个位置：/usr/java/jdk1.8.0_91安装hadoop将你的hadoop进行解压tar –xvf hadoop-2.7.3.tar.gz接着，要告诉hadoop java的位置。进入你hadoop的目录，cd /usr/lo...

搭建Linux系统首先，肯定需要一个Linux系统来搭建你的Hadoop环境，一般是通过虚拟机搭建Linux服务器环境，在这里就不讲述了，之后我可能会再写一篇博客来说怎么搭建Linux虚拟机。配置网关因为大多数情况下，我们是通过远程连接去操作Linux服务器的，所以，我们得确保我们的Windows机器与Linux服务器处在同一个网段上，才能成功远程连接。...

一、anaconda创建python环境anaconda创建python环境在这篇博客中，已经很清楚地描述了如何通过anaconda来创建你需要的python环境：即合适的python版本和包含你需要的依赖包。二、打包python环境假设我们的python环境名称为py_env，那么在anaconda的安装目录下，envs/py_env在Windows下，直接将使用压缩软件，将其压缩为zip文件；

直接看代码例子，有详细注释！！import tensorflow as tfimport numpy as npd = np.arange(0,60).reshape([6, 10])# 将array转化为tensordata = tf.data.Dataset.from_tensor_slices(d)# 从data数据集中按顺序抽取buffer_size个样本放在buffe...

estimator是tensorflow高度封装的一个类，里面有一些可以直接使用的分类和回归模型，例如tf.estimator.DNNClassifier，但这不是这篇博客的主题，而是怎么使用estimator来实现我们自定义模型的训练。它的步骤主要分为以下几个部分：构建model_fn，在这个方法里面定义自己的模型以及训练和测试过程要做的事情；构建input_fn，在这个方法数据的来源和喂...

前言先介绍TensorRT、Triton的关系和区别：TensorRT：为inference（推理）为生，是NVIDIA研发的一款针对深度学习模型在GPU上的计算，显著提高GPU上的模型推理性能。即一种专门针对高性能推理的模型框架，也可以解析其他框架的模型如tensorflow、torch。主要优化手段如下：Triton：类似于TensorFlow Serving，但triton包括server和

在推荐系统中，向量的最邻近检索是极为关键的一步，特别是在召回流程中。一般常用的如Annoy、faiss都可以满足大部分的需求，今天再来介绍另外一个：MilvusMilvusMilvus不同于Annoy、faiss这类型的向量检索工具，它更是一款开源向量数据库，赋能 AI 应用和向量相似度搜索。涉及的术语Filed：类似表字段，可以是结构化数据，当然还可以是向量；Entity：一组Filed，类似表

常见的监督学习包括：回归：预测值为连续值，如销售额；二分类：预测值为离散值，且只有两种取值，如性别，要么是男，要么是女；多分类：预测值为离散值，且多于两种取值，如动物分类，可能有猫、狗、狮子等等；还有另外一种，也是本文的主角：多任务学习（Multi Task Learning）。MTL介绍首先，介绍什么是多任务学习，例如之前文章提到的微信视频场景，同时包含多个学习目标（task）：是否转发、是否点

什么是扩展程序首先，你要知道油猴是什么的话，那你就必须知道谷歌浏览器的扩展程序是什么？点解浏览器右上角–>更多工具–>扩展程序，进入我们的扩展程序界面，在这里可以看到我们已经安装的扩展程序。那么扩展程序可以做什么呢？举个例子，像我安装的Infinity新标签页，就可以实现以下功能，将浏览器原本的新标签页样式变成这个样子那么油猴是干什么的呢其实，油猴就是属于我们上面说的扩...