想要站在AI领域的前沿,掌握构建智能体的神秘技能吗?NVIDIA诚邀您参加AI-AGENT线上训练营!在这里,您将踏上一段为期四天的系统性学习之旅,深入探索NVIDIA NIM(NVIDIA Inference Microservices)平台的魅力,学习如何基于该平台构建LLM-RAG和多模态智能体。
构建RAG和多模态智能体的重要性日益凸显。RAG技术通过结合大语言模型和动态检索机制,能够实时连接外部数据源,显著提升模型的输出质量和准确性,为用户提供更加个性化和智能化的体验。而多模态智能体则进一步扩展了AI的应用边界,将文字、语音、图像、视频等多种形式的数据融合处理,使AI系统具备更强的理解和生成能力。
在训练营中,您将有机会聆听NVIDIA和Microsoft资深工程师的精彩讲解,他们将系统地介绍NIM平台的独特功能、Phi3系列模型的新特性,并详细指导您如何在平台上利用AI模型实现智能体的构建。您将学习到LLM、RAG以及AI-Agent三大模块的知识,并通过丰富的线上实验环节,掌握使用NIM构建多样化、多功能智能体的技能。
本次训练营的最终目标是增强您对AI程序设计的信心。为此,我们将建立一个专门的学习微信群,邀请AI专家在线解答您的疑问,并辅导您进行实验操作。让您在学习的道路上不再孤单,与志同道合的伙伴们共同成长。
训练营为期四天,时间紧凑而充实。每天您都将沉浸在AI知识的海洋中,不断挑战自我,提升技能。不要错过这次难得的学习机会,赶快加入我们吧!
课程亮点:
★ NVIDIA NIM 平台的应用实务:全面了解 NVIDIA NIM 平台的功能和优势。
★ 一站式快速入门 LLM、RAG、Multi-modal、Ai-Agent:从基础到高级,全面覆盖 LLM、RAG、Multi-modal、Ai-Agent 等模块的学习。
★ 多样化平台工具结合:学习如何将 NIM、Langchain、Llama-index、Jetson、Gradio 等工具结合使用。
★ 多种AI模型学习与使用:掌握 Nemotron4、Phi3、llama3、Llava、Neva 等多种 AI 模型的实际应用。
★ 实验课+练习:通过实际操作和代码练习,深入理解 AI 原理和应用方法。
›› 课 程 安 排 ‹‹
DAY1:
8月15日 14:00-16:00
开营致辞: Jina AI 联合创始人兼首席技术官 王楠
王楠 | Jina AI 联合创始人兼首席技术官
深耕 AI 技术在搜索领域的应用,曾在德国头部电商 Zalando 和腾讯担任高级算法工程师,负责搜索和推荐业务。作为 LF AI&DATA TAC成员,他积极参与 AI 开源,领导团队开发开源神经搜索框架 JINA,推动 DocArray 从 LF AI&DATA 毕业,并主持开发多个开源模型,全球下载量超过 1000万。2023年,荣获中国开源先锋33人称号。
李奕澎 | NVIDIA 企业开发者社区经理
拥有多年数据分析建模、人工智能自然语言处理开发经验。在对话式人工智能与大模型技术领域有丰富的实战经验与见解。曾开发法律、金融、保险文档中基于实体抽取的智能问答系统,曾主导开发基于 NLP 知识抽取,KG 知识图谱的建立的科研文档智能检索系统。加入NVIDIA 开发者社区以来完成过上百场培训,帮助上万个开发者了解人工智能。
▶ 介绍活动安排与目标
▶ NVIDIA Jetson 开发环境介绍: 深入了解 Jetson 平台的开发环境,探索其强大的计算能力。
▶ NVIDIA NIM 平台介绍: 探索 NVIDIA 的 NIM 平台,了解其在 AI 开发中的重要角色。
▶ LLM-RAG 工作流程与原理: 学习大语言模型与检索增强生成(RAG)的工作流程与基础原理。
▶ Langchain 结合 NIM 实现 RAG 检索应用 (代码 demo+练习): 通过实际操作通过实际操作和代码演示,掌握 Langchain 与 NIM 平台结合的实现方法,实现 LLM-RAG 检索应用。
DAY2:
8月16日 14:00-16:00
卢建晖(Kinfey Lo) | 微软高级云技术布道师
专注在人工智能及大数据领域,具备 15 年以上的电信,教育,金融服务行业经验。是微软 Build / Ignite / Teched 大会讲师,GitHub Copilot Workshop 讲师,Qcon 讲师,现负责生成式人工智能应用架构及 Microsoft Phi-3 小模型在行业中的应用落地工作。
▶ Phi-3 + NIM 使用介紹: 全方位了解微软 Phi3 系列模型的新特性
▶ 在边缘设备下使用 NIM 构建 Phi-3 Vision 的解决方案: 基于Jetson平台实现多模态的应用
▶ Whisper 结合 NIM 构建 RAG 的语音平台: 将 Speech AI 与 LLM-RAG 有效结合
▶ 代码实战+练习: 通过实际操作和代码演示,掌握 Whisper 语音识别模型与 Phi3 小模型在 NIM 平台中结合的实现方法。
DAY3:
8月17日 14:00-16:00
何琨 (Ken He)| NVIDIA 企业开发者社区经理
拥有多年的 GPU 和人工智能开发经验。自 2017 年加入 NVIDIA 开发者社区以来,完成过上百场培训,帮助上万个开发者了解人工智能和 GPU 编程开发。在计算机视觉,高性能计算领域完成过多个独立项目。并且在机器人和无人机领域有过丰富的研发经验。对于图像识别,目标的检测与跟踪完成过多种解决方案。
▶ 利用 NVIDIA 推理平台加速视觉内容生成: 学习如何利用 NVIDIA 的推理平台提升视觉内容生成的效率。
▶ 多模态模型基于 NIM 的调用方式: 探索多模态模型在 NIM 平台上的调用与应用。
▶ 基于 NIM 接口实现 Phi-3-Vision 的推理实践: 通过 NIM 接口,实践 Phi-3 - Vision 的推理应用。
▶ 基于 NIM 建构多模态 AI-Agent (代码 demo+练习): 掌握构建多模态 AI-Agent 的方法与技术。
▶ 基于 Gradio 框架建立前端互动界面: 学习如何使用 Gradio 框架创建用户友好的前端互动界面。
DAY4:
8月18日
★ 结业考核(10:00-16:00 ): 通过测验考核您的学习成果。(完成 DLI 指定课程 + 项目报告书)
★ 获得证书: 成功完成训练营并通过测验,您将获得由 NVIDIA 颁发的证书,认证您的专业技能。
QA
★ 训练营课程有回放么?
考虑到很多开发者可能白天要上班,无法观看直播,我们会每天录制好课程,在每天课程结束后提供回放!
★参加训练营对本地机有什么要求?
本次训练营对硬件没有特别高的要求。
★我们如何配置自己的实验环境?
我们会在开营前提供详细配置教程,实验代码也会全部提供。有配置上面的问题,可以在群里提问。
★对参加者有什么要求?
还是希望您能会Python语言。
★参加旁听班也能拿到证书么?
是的,只要完成通关任务,旁听班也可以拿到证书,以及精美礼品。