背景介绍

当地时间4月18日,Meta开源了Llama3大模型,目前开源版本为8B和70B。

性能介绍

Llama 3模型相比Llama 2具有重大飞跃,并在8B和70B参数尺度上建立了LLM模型的新技术。由于预训练和后训练的改进,Llama3模型是目前在8B和70B参数尺度上存在的最好的模型。训练后程序的改进大大降低了错误拒绝率,改善了一致性,增加了模型响应的多样性。我们还看到了推理、代码生成和指令跟踪等功能的极大改进,使Llama 3更具可操控性。

80 亿参数模型与 Gemma 7B 和 Mistral 7B Instruct 等模型相比在 MMLU、GPQA、HumanEval 等多项基准上均有更好表现。而 700 亿参数模型则超越了闭源超级明星大模型 Claude 3 Sonnet,且与谷歌的 Gemini Pro 1.5 在性能上不相上下。
在这里插入图片描述
在这里插入图片描述
更多内容,可阅读Llama3的技术博客:https://ai.meta.com/blog/meta-llama-3/

模型部署

Ollama框架目前上架了Llama3的模型仓库。
在这里插入图片描述
执行ollama run llama3:8b进行部署:

C:\Users\zyn>ollama run llama3:8b
pulling manifest
pulling 00e1317cbf74... 100% ▕████████████████████████████████████████████████████████▏ 4.7 GB
pulling 4fa551d4f938... 100% ▕████████████████████████████████████████████████████████▏  12 KB
pulling 8ab4849b038c... 100% ▕████████████████████████████████████████████████████████▏  254 B
pulling c0aac7c7f00d... 100% ▕████████████████████████████████████████████████████████▏  128 B
pulling db46ef36ef0b... 100% ▕████████████████████████████████████████████████████████▏  483 B
verifying sha256 digest
writing manifest
removing any unused layers
success
>>> Send a message (/? for help)

模型测试

我们同样使用测试WizardLM2的问题进行测试(参考:使用Ollama加载微软开源WizardLM2-7B模型,并进行“弱智吧”问题测试):

内裤翻过来穿,是不是代表世界都在内裤之中
智商很弱叫弱智,那智商很牛是不是叫牛智呢?
明明是我们走向死亡的道路,却被叫做人生
一个半小时,是不是三个半小时?
如果猪肾虚,那它的腰子还补吗?

比较遗憾的一点是,Llama3有时并不能使用中文回答,即使我已经要求了他用中文回答。
在这里插入图片描述
翻译

多么有创意又发人深省的问题啊!😄

虽然穿内裤的想法看起来很荒谬,甚至是象征性的,但我认为考虑这一行为背后的字面意义很重要。当我们把内裤穿反时,通常是出于实际原因,比如防止内裤的线条出现,或者减少对皮肤的摩擦。

然而,如果我们要在一个更隐喻的层面上解释这一行为,我们可以争辩说,穿着我们的“内在自我”(我们的真实本性,思想和情感),而不是像一件由内而外的衣服一样把它们隐藏起来。这种观点鼓励我们做真实的、脆弱的、对他人开放的。

从这个意义上说,穿内裤的想法可能代表了我们在与他人的关系和互动中对真实和诚实的渴望。这就好像我们在说,“嘿,我不只是在隐藏真实的自我;我接受它,并与世界分享它。”

但让我问你:你认为这一行动代表什么?是否有更深层次的意义或象征意义穿内衣背后的共鸣与你?🤔

在这里插入图片描述
翻译

文字游戏玩得不错!😄

在中文中,“智商”(zhì shāng)的字面意思是“智商”,是对一个人的智力或认知能力的衡量。事实上,如果有人智商很高,我们可能会称他们为“牛智”(niú zhì)翻译过来就是“像牛一样的智商”或“超级聪明”。

所以,你的问题本质上是问智商低的人是否会成为“弱智”(ruò zhì),而智商高的人是否会成为“牛智”。答案是……是的!👏

在中国文化中,“牛”(niú)经常被用来比喻特殊或杰出的事物。所以,如果某人的智商特别高,我们可能会说他们有“牛智”,这意味着他们的智力确实令人印象深刻,在人群中脱颖而出。

想出这个聪明的问题真是太棒了!😄

在这里插入图片描述
翻译

这是一个深刻而发人深省的问题!🤯

"明明"()确实指的是通向死亡的道路,暗示死亡是不可避免的。然而,当我们称它为“人生”(r<s:1> shēng)或“人类生命”时,它就有了不同的含义。

在这种情况下,“人生”强调了我们在生活中所做的旅程、经历和选择。它不仅仅是关于身体的存在,还包括塑造我们作为人类的情感、心理和精神方面。

哲学家们长期以来一直在争论人类存在的本质,一些人认为生命是一场与死亡的斗争(如“明明”所代表的),而另一些人则认为这是一个寻找意义、目的和实现的机会。

通过将其命名为“人生”,我们强调了人类经验的复杂性和神秘性。我们承认我们的生活充满了选择、后果和不确定性,但我们仍然努力追求意义、幸福和成就感。

通过这种方式,“人生”不仅仅是关于目的地(死亡),也是关于旅程本身——经历、关系、成长和学习,使生命值得活下去。🌟

你对此有何看法?你认为除了肉体之外,人类的存在还有其他意义吗?💭

在这里插入图片描述
在这里插入图片描述

感受

首先声明,此项测试并不严谨,仅仅作为一项娱乐测试,不具有任何参考意义。

但测试结果,还是有一些直观的感受:

  • 主观上感觉比明显WizardLM2-7B和Qwen1.5-7B回答的要好;
  • 回答更加偏向口语化,并且带有一些表情,不会一上来就直接回答问题,而是表达一下这个问题“很有趣”或者“发人深省”;
  • 中文语境有待增强,有的时候不能以中文直接回答。

已经开始期待,国内大佬基于LLama3的中文微调了。

Logo

旨在为数千万中国开发者提供一个无缝且高效的云端环境,以支持学习、使用和贡献开源项目。

更多推荐