1、FLUE数据集GLUE包含九项自然语言理解任务(NLU)数据集，均为英语。数据集TrainTest简介CoLA8.5k1k单句子分类任务，二分类，判断句子是否合法。SST-267k1.8k单句子分类任务，二分类，判断句子情感极性。MRPC3.7k1.7k每个样例是两个句子，判断句子对是否是相同意思，二分类。STSB7k1.4k判断句子对相似性，分数为1~5。QQP364k391k判定句子对是否

蒙特卡罗树搜索（MCTS）蒙特卡罗树搜索，即 Monte Carlo tree search（MCTS）是一种启发式搜索算法。现在我们来考虑下围棋这个游戏，我们用经典的Minmax搜索会碰到两个问题：每一步可能有很多中走法，这就导致搜索树太广。要走很多步游戏才结束，也就是说搜索树特别深。这时，蒙特卡罗树搜索就能发挥作用，它不遍历整个搜索树，也即找到的不是最优解，但是是一个解决该问题的方...

绪论在统计学中，极大似然估计（Maximum Likelihood Estimation）是用来估计模型参数的一种方法，就是利用已知样本的结果信息，反推出最有可能导致这样结果的模型参数值。一般情况下，我们用 θ\thetaθ 来表示模型的参数，所以解决问题的本质就是求θ\thetaθ。举例1现在假设有一枚不均匀的硬币，然后我们做了100次实验，一共60次正面，40次反面；我们设 θ\thet...

前言论文地址：https://openreview.net/forum?id=r1xMH1BtvB代码地址：https://github.com/google-research/electraAbstract就跟题目里说的一样，它将目标放在了 Discriminator 上了，换句话说，它跟 GAN 的结构相似，但是判别器是语言模型，然后最终用的也是判别器。1、Introduction像 Bert

蒙特卡罗树搜索（MCTS）蒙特卡罗树搜索，即 Monte Carlo tree search（MCTS）是一种启发式搜索算法。现在我们来考虑下围棋这个游戏，我们用经典的Minmax搜索会碰到两个问题：每一步可能有很多中走法，这就导致搜索树太广。要走很多步游戏才结束，也就是说搜索树特别深。这时，蒙特卡罗树搜索就能发挥作用，它不遍历整个搜索树，也即找到的不是最优解，但是是一个解决该问题的方...

判断是否有 nantorch.any(torch.isnan(a))利用 torch.where() 函数替换所有 nanwhere() 函数有三个输入值，第一个是判断条件，第二个是符合条件的设置值，第三个是不满足条件的设置值。a = torch.Tensor([[1, 2, np.nan], [2, np.nan, 4], [3, 4, 5]])a = torch.where(torch.isn