如何在本地运行 Meta AI 的 Llama 3

Meta 的最新语言模型 Llama 3 现已免费推出。虽然您可以使用运行相同 LLM 的 Meta AI,但也可以选择下载模型并在您的系统上本地运行它。以下是在本地运行 Meta AI 的 Llama 3 所需了解的所有信息。

如何在本地运行 Meta AI 的 Llama 3

虽然 Meta AI 仅在特定国家/地区可用,但无论您身在哪个地区,您都可以在 PC 上本地下载并运行 Llama 3。请按照以下步骤在本地运行 Meta AI 的 Llama 3。

第 1 步:安装 LM Studio

首先,让我们安装一个框架来运行 Llama 3。如果您的系统上已经有另一个此类应用程序,则可以跳到下一步。对于其他人,以下是获得 LM 工作室的方法:

  1. 使用上面的链接,然后单击 LM Studio for Windows 进行下载。
    meta-llama-3-locally-1-1
  2. 下载后,运行安装程序并让 LM Studio 安装。
    meta-llama-3-locally-3-1

第 2 步:在本地下载 Meta 的 Llama 3

一旦你有了你的 LLM 框架,就该将 Meta 的 Llama 3 下载到你的 PC 上了。有几种方法可以做到这一点。

  1. 打开 Llama.Meta.com,然后单击下载模型
    meta-llama-3-locally-4
  2. 输入您的详细信息,并请求下载 LLM。
    meta-llama-3-locally-5

如果上述方法不起作用,请不要担心。您也可以使用 LLM 框架下载 LLM。

  1. 只需在 LM Studio 的搜索字段中搜索 Meta Llama。
    meta-llama-3-locally-7
  2. 在这里,您可以找到各种量化的 LLM。
    meta-llama-3-locally-8
  3. 在右侧,选择您的首选版本。单击它旁边的下载
    meta-llama-3-locally-9
  4. 等待下载完成。
  5. 完成后,单击左侧的“我的模型”。
    meta-llama-3-locally-11
  6. 并检查下载是否完成。
    meta-llama-3-locally-12

第 3 步:加载下载的模型

  1. 下载完成后,单击左侧的 AI 聊天
    meta-llama-3-locally-13
  2. 单击“选择要加载的模型”。
    meta-llama-3-locally-14
  3. 并选择下载的 Meta Llama 3。
    meta-llama-3-locally-15
  4. 等待模型加载。
    meta-llama-3-locally-16
  5. 加载后,您可以将整个模型卸载到 GPU。为此,请单击“设置”下的“高级配置”。
    meta-llama-3-locally-17
  6. 单击 Max 将整个模型卸载到 GPU。
    meta-llama-3-locally-18
  7. 单击“重新加载模型”以应用配置
    meta-llama-3-locally-19

第 4 步:运行 Llama 3(并使用提示进行测试)

模型加载后,您可以开始在本地与 Llama 3 聊天。不,由于 LLM 存储在您的本地计算机上,因此您不需要互联网连接即可这样做。因此,让我们对 Llama 3 进行测试,看看它的能力。

测试抗审查性

meta-llama-3-locally-24

测试对复杂主题的理解

meta-llama-3-locally-22

幻觉检测

meta-llama-3-locally-20

测试创造力和理解
meta-llama-3-locally-23

根据大多数人的说法,Llama 3 是一个非常可靠的大型语言模型。除了上面提到的测试提示外,即使在一些更复杂的主题和提示上,它也表现出色。

原创文章,作者:校长,如若转载,请注明出处:https://www.yundongfang.com/Yun295056.html

(0)
打赏 微信扫一扫不于多少! 微信扫一扫不于多少! 支付宝扫一扫礼轻情意重 支付宝扫一扫礼轻情意重
上一篇 2024年4月7日 下午6:49
下一篇 2024年5月20日 下午12:44

相关推荐

  • 如何修复iPhone App Store上的更新下载缓慢

    App Store 是 Apple 的独家在线市场,用于在 iPhone 或 iPad 上安装和更新应用程序。有时,在 App Store 上下载应用程序更新可能会变得非常缓慢。 …

    2024年6月13日 苹果Apple
  • 来电未显示在iPhone屏幕上:修复

    您的 iPhone 上没有收到任何来电通知?通常,每当您接到电话时,iPhone屏幕都会亮起。使用电话的主要原因是通信。那么,如果您无法在 iPhone 上接听任何来电,那它有什么…

    2024年6月12日 苹果Apple
  • 如何在Windows PC上安装Spicetify

    如何在 Windows 上安装 Spicetify 作为命令行工具,您无需下载任何文件。只需运行 PowerShell 命令即可。 但是,请确保安装在PC上的Spotify客户端是…

    2024年5月28日 Win 11
  • 如何删除书籍并释放 Kindle 上的空间

    对于电子书占用的空间量,Kindle 的存储空间对大多数人来说绰绰有余。但对于那些左右吞噬书籍的人来说,随着时间的推移,存储空间可能会成为一个问题。在这种情况下,您别无选择,只能放…

    2024年5月20日 技术教程
  • iPhone没有收到短信:如何修复

    在iPhone上没有收到任何短信?您的手机没有收到任何短信有几个原因。通常,在没有 Wi-Fi 网络的情况下,短信依赖于运营商网络。因此,如果您外出远足或徒步旅行,由于网络接收能力…

    2024年5月10日 苹果Apple
  • iPhone卡在请勿打扰模式:如何修复

    您的iPhone是否卡在“请勿打扰”模式下?如果您无法切换“请勿打扰”模式,可能会很麻烦。您根本不会收到任何警报。在iPhone上修复此免打扰问题不会花费太多精力。因此,无需再浪费…

    2024年5月3日 苹果Apple
  • 指南针在iPhone中不起作用:这是修复

    每部 iPhone 都配备了内置的 Compass 应用程序。但是,如果 Compass 应用程序不能正确显示方向,它有什么用呢?您可以按照这些解决方案在 iPhone 上修复或校…

    2024年5月3日 工具软件
  • 如何在Kindle上清除“最远的页面阅读”并停止“最近的页面阅读”

    在 Kindle 设备上阅读非常方便,尤其是考虑到在设备之间切换并同步到最远的页面阅读以从那里继续阅读是多么容易。但是,如果你想重读一本书,你读得最远的一页就变成了书的结尾。知道 …

    2024年5月3日 工具软件
  • 如何在 Android 上本地运行 LLM

    您可以在 PC 上本地运行各种 LLM。但是当涉及到智能手机时,选择略有限制。你必须运行一个小型语言模型,或者有一个具有足够处理能力的高级设备来处理 LLM。 无论哪种方式,都可以…

    2024年5月3日 工具软件
  • 如何在 Android 上免费获取 YouTube Music Premium

    对于那些没有高级会员资格的人来说,在 YouTube Music 上听音乐就像踩在广告矿上一样。如果 YouTube 对暂停广告的实验值得一试,您很快就会在 YouTube 上看到…

    2024年5月3日 工具软件
  • 如何在Windows本地运行Microsoft Phi-3 AI

    Microsoft 的 Phi-3 系列语言模型终于来了。就它们的尺寸而言,它们绝对是一个级别的差异,并且已经证明在许多方面比其他最近发布的型号(如 Llama 3 和 Mistr…

    2024年4月29日 Win 11
  • FaceTime在iPhone设置中显示为灰色:修复

    FaceTime 在您的 iPhone 设置中是否显示为灰色?如果 FaceTime 显示为灰色,您将无法与他人进行 FaceTime 通话。与iPhone上的其他问题一样,这也可…

    2024年4月26日 Win 11
  • 如何自定义有声播放器控件

    Audible 有几个设置,可帮助您控制在应用程序上收听有声读物的方式。在播放控件所在的 Audible Player 上,暂停/播放、向前/向后跳过、速度和计时器等默认选项完成了…

    2024年4月25日 工具软件
  • 如何在Google云端硬盘上打开深色模式

    从黑暗的网页到浅色的网页可能会导致非常粗鲁的觉醒。幸运的是,Google Drive 允许您为网络配置其外观以及适用于 Android 的应用程序。以下是为 Google 云端硬盘…

    2024年4月25日 谷歌Google
  • 如何在WhatsApp聊天中固定和取消固定消息

    在聊天中固定消息是 WhatsApp 更重要的功能之一。这是突出显示地址和群聊规则等关键信息的好方法,因此用户只需轻轻一按即可将其定向到它。由于最近的更新,您最多可以在 Whats…

    2024年4月25日 工具软件
  • iCloud存储已满通知:如何修复

    每当您下载某些文件或空投某些内容时,您的iPhone是否显示“iCloud存储空间已满”?iCloud 储存空间的免费套餐限制为仅 5GB。因此,您应该检查的第一件事是手机上iCl…

    2024年4月24日 苹果Apple
  • iPhone上的通话不断掉线:如何修复

    您的 iPhone 上的所有电话都不断掉线吗?通话中断在iPhone上并不是什么新鲜事,偶尔也会在任何其他移动设备上发生。但是突然所有通话都开始自动断开连接,手机上的通话设置一定有…

    2024年4月23日 苹果Apple
  • 已解决:帐户图片错误此图片无法保存

    帐户头像错误。当您尝试在 Windows 上为用户帐户设置个人资料图片时,屏幕上出现此图片无法保存错误消息,任何人都可能发生此图片。 除了基本身份识别外,设置个人资料图片还可以帮助…

    2024年4月19日 工具软件
  • Safari无法在iPhone上下载文件:如何修复

    无法在 Safari 浏览器上下载任何内容?不用担心。使用Safari下载文件通常很容易,下载过程取决于几个与网络相关的参数。有时下载过程会失败,您所要做的就是重试下载文件。但是,…

    2024年4月19日 苹果Apple
  • iPhone通话直接进入语音信箱:修复

    您的电话是否直接转到语音信箱而不是拨打电话?语音邮件可以节省您的一天,同时记录您无法接听的电话中的重要消息。但是,如果所有电话都没有响铃并直接进入语音信箱,那么这是一个真正的问题,…

    2024年4月19日
  • 如何与Google相册共享

    Google 相册提供了多种分享照片、视频和相册的方式。有些允许与您的 Google 联系人共享,有些允许您普遍共享,而另一些则仍邀请协作或自动共享。以下是在 Google 相册中…

    2024年4月18日 谷歌Google
  • 无法检查iPhone中的更新错误:修复

    在iPhone上检查更新时,您是否收到此错误消息“无法检查更新”消息?通常,当您在手机脱机时手动搜索更新时,会出现此消息。因此,我们建议您启用 Wi-Fi/蜂窝数据并再次执行相同的…

    2024年4月17日 苹果Apple
  • 在iMovie中导出时出错:修复

    尝试在iMovie中编辑假期剪辑,但在导出最终输出时不断出现错误?您会松一口气,因为您不是唯一一个在iMovie中遇到此类问题的人。在iMovie中,编辑素材的导出过程可能会变得棘…

    2024年4月17日 工具软件
  • iPhone屏幕不断返回主屏幕

    每次打开特定应用程序时,您的 iPhone 屏幕是否一直返回主屏幕?这是一种异常行为,您返回主屏幕的原因是应用程序由于某种原因而崩溃。如果按照这些说明集进行故障排除,则可以更轻松地…

    2024年4月16日 苹果Apple
  • Google相册共享不起作用?这里有 9 种修复方法

    对于其所有备份和共享功能,Google相册并非没有问题。无论是与合作伙伴共享时出现的问题,共享原始质量的照片,还是通常与他人共享照片和视频,Google相册都会时不时地出现不足。幸…

    2024年4月16日 谷歌Google