Agent开发的一小步,大模型应用的一大步

2023-08-03 15:19:50 来源: 商业新知网

Chat GPT带起飞的大模型无疑是上半年最火热的赛道,随着GPT-4的发布,各大互联网巨头、科技公司等纷纷入局。而在国内市场,过去几个月间大模型就已密集“涌现”。

不得不说,ChatGPT是大模型发展的重要里程碑,它将 AI 重新推向了时代中心,成为了新一轮数字技术竞争的制高点。


(资料图片仅供参考)

在“百模大战”愈演愈烈的同时,OpenAI创始成员Andrej Karpathy却将目光转向了另一端——Agent

每当有新的Agent论文出来的时候,团队都会很兴奋并且认真地讨论。

你们(开发者们)都正站在Agent开发的最前沿,这个领域OpenAI也没什么积累。

OpenAI创始成员Andrej Karpathy就在黑客马拉松演讲中表示,相比大模型训练,OpenAI内部目前更关注Agent领域。

什么是Agent?

在大模型语境下,可以理解成能自主理解、规划、执行复杂任务的系统。

以AutoGPT和BabyAGI为代表的技术演示型项目,今年4月短暂的火了一阵,但离真正应用到业务中还有一段距离。

现在,Agent第二轮爆发正在酝酿中,标志就是新一轮应用与场景结合更紧密了。

不出意外,先行动起来的又是编程开发行业。

最近的热门开源项目Sweep,直接与GitHub的Issue和Pull Request场景整合,自动“清扫”bug报告和功能请求,直接完成对应代码。

创业公司中,也有OpenAI支持的Cursor代码编辑器,把生成代码抬到了一句话生成整个项目框架的高度。

接下来,Agent也将成为新的起点,

成为各行各业构建新一代AI应用必不可少的组成部分。

对此,初创公司Seednapse AI创始人提出构建AI应用的五层基石理论,受到业界关注。

★Models,也就是我们熟悉的调用大模型API。

★Prompt Templates,在提示词中引入变量以适应用户输入的提示模版。

★Chains,对模型的链式调用,以上一个输出为下一个输入的一部分。

★Agent,能自主执行链式调用,以及访问外部工具。

★Multi-Agent,多个Agent共享一部分记忆,自主分工相互协作。

创业先锋之外,

连AI基础设施的巨头也已经开始在Agent上发力。

比如亚马逊云科技纽约峰会上宣布的Amazon Bedrock Agents新功能,便是这种趋势最有代表性的体现。

Amazon Bedrock Agents在全托管基础模型服务的基础上,又把开发、部署和管理多个Agent的能力打包集成在一起。

如果按照前面的五层基石理论,这类服务相当于直接从第五层开始,大大降低开发门槛。

正如亚马逊云科技在发布会上所形容:

☞只用几次点击,搞定能执行任务的生成式AI应用。

可以预见的是,降低了门槛的Agent应用也将在各行各业全面爆发。

Agent,AI应用新时代的起点

怎样才算一个Agent应用?OpenAI华人科学家翁丽莲给出直观的“配方”:

☞Agent = 大模型+记忆+主动规划+工具使用

以亚马逊云科技平台为例,开发Agent应用首先要根据具体任务场景给Agent选择合适的基础模型。

Amazon Bedrock上除了自家的Amazon Titan大模型,还集结了擅长安全可控的Anthropic、擅长检索汇总信息的Cohere、以及专攻文生图的stability.ai等各家模型。

选好后,把要执行的任务指令直接用文字描述出来,让Agent明白要扮演的角色和要完成的目标。

指令可以是包括一系列“问题-思考步骤-行动步骤-示例”的结构化提示词,在ReAct(协同推理和行动)技术支持下,基础模型可以通过推理和决策找出相应的解决方案。

接下来的重头戏便是Add Action Group(添加动作组)。

Agent要完成的具体任务,以及能使用的工具如企业系统API、Lambda函数等都是在这里设置。

官方演示中是一个保险索赔管理场景,Agent通过提取未结索赔的列表、确定每个索赔的未完成文书工作并向保单持有人发送提醒来管理保险索赔。

所有动作组设置好后,创建Agent和部署都是几次点击就能完成。

部署完成后,在测试中就可以看到Agent理解用户请求、将任务分解为多个步骤(收集未结保险索赔、查找索赔ID、发送提醒)并执行相应的操作。

Amazon Bedrock通过向导式交互界面,减少了配置基础模型所需的编码工作量。

动作组提供调用API实现特定功能,以及使用自己的数据构建差异化应用程序,又让基础模型能够完成更复杂的实际业务任务。

在整个流程中,还可以配合亚马逊云科技平台上的各种安全服务。比如使用PrivateLin建立基础模型和本地网络之间的私有连接,所有流量都不会暴露给互联网。

又通过提供完全托管的服务,让开发者不需要管理底层系统就能发挥基础模型的能力。

最终缩短从基础模型到实际应用的周期,加速基础模型为业务创造的价值。

加速大模型应用,还应关注什么

有了Amazon Bedrock的Agent能力,我们得以快速将大模型投入实际业务,为企业实现降本增效或创新。

但要真正利用生成式AI的全部价值、发挥全部潜力,并与其他竞争对手拉开潜力,私有数据才是其中根本。

换言之,大模型应用落地的关键,是企业自己宝贵的行业数据。

如何集成这些丰富的资源到我们的Agent之中,保证我们的大模型应用在执行任务时能够高效访问到正确的信息——是当下每一个企业都要面对的问题。

当然,这一切都必须以保证隐私为前提。

除了私有数据的集成和调用,在大模型应用落地的路上,最为底层的支撑,算力,也始终是一个百说不厌的话题。

众所周知,当下的显卡资源异常稀缺,且价格不菲。

譬如有调查就发现,像英伟达的H100,今年4月中旬在海外电商平台就已炒到超4万美元,甚至标价6.5万美元的也不算罕见。

无论是购买还是租用,这都成了全球各企业在探索生成式AI应用上的一大笔支出。

如何让这一笔花销更为经济实惠?这也是每个企业的思虑所在。

值得关注的是,以马逊云科技为代表的领先供应商,正在针对生成式AI落地过程中的这些挑战和痛点提供系统性的解决方案,对上述问题一一破解。

针对个性化数据问题,亚马逊云科技宣布为三款数据服务提供向量引擎,用来助力生成式AI应用与业务整合。

我们知道,在生成式AI爆发之后,向量数据库也实在火爆不已。因为相比传统的关系数据库,它能给予与模型上下文更相关的响应(如下图所示)。

亚马逊云科技这一最新服务,就是将我们的私有数据存储到具有向量引擎的数据库中,在进行生成式AI应用时,通过简单的API调用就能方便地查询企业内部的数据。

而根据当前数据存储位置、对数据库技术的熟悉程度、向量维度的扩展、Embeddings的数量和性能需求等不同需求,亚马逊云科技提供了3个选项来满足:

-Amazon Aurora PostgreSQL兼容版关系型数据库,支持pgvector开源向量相似性搜索插件;

-分布式搜索和分析服务 Amazon OpenSearch,带有k-NN(k最近邻)插件和适用于Amazon OpenSearch Serverless的向量引擎;-兼容 PostgreSQL的Amazon RDS(Amazon Relational Database Service)关系型数据库,支持pgvector插件。

当然,最值得说道的是这次最新推出的Amazon OpenSearch Serverless服务,它最大的优点就是让企业只关心向量数据的存储和检索,而不用背上任何底层运维的负担。

解决完数据集成问题,在底层支撑上,亚马逊云科技这次也直接推出H100支持的全新Amazon EC2 P5实例,这一曾经对于大多数企业都相当难得的算力资源,现在也变得“唾手可得”了。

据了解,该实例包含8个英伟达H100 Tensor Core GPU,640GB高带宽GPU内存,同时提供第三代AMD EPYC处理器、2TB 系统内存和30TB本地NVMe存储,以及3200Gbps的聚合网络带宽和GPUDirect RDMA支持,可实现更低延迟和高效的横向扩展性能。

相比上一代基于GPU的实例,Amazon EC2 P5可以让训练时间最多可缩短6倍(从几天缩短到几小时),降低高达40%的训练成本。

再加上亚马逊云科技之前基于自研芯片发布的Amazon EC2 Inf2和Amazon EC2 Trn1n等性能也表现不错的实例,我们在算力需求这一问题上,可以说是有了非常多的按需选择空间。

除了以上这些基础支持,各种开箱即用的AI服务也不“缺席”:

如针对开发环节的AI编程助手Amazon CodeWhisperer,现在它与Amazon Glue实现集成,将AI代码生成的场景又扩展到一个新人群:数据工程师,只需自然语言(比如“利用json文件中的内容创建一个Spark DataFrame”),这些开发人员即可搞定各种任务;

再如针对商业智能(BI)的Amazon QuickSight,也能够让业务分析师们使用自然语言执行日常任务,在几秒钟内创建各种数据可视化图表;

还有Amazon HealthScribe,可以用于医疗行业生成临床文档,节省医生时间。

这些工具都是主打让企业专注于核心业务,提高生产效率。

最后,简单总结,我们能够发现:

从今年4月起,亚马逊云科技就结合自身定位并基于真实用户需求出发,正式宣布进军生成式AI市场,为一切想要利用生成式AI技术加速或创新业务的企业提供服务。

在短短的4个月期间,亚马逊云科技已推出了各类底座资源,从基础模型到算力支撑,从私人数据存储到高效开发工具,应用尽有。

而这次在纽约峰会释出的最新动向,则是继续加码生成式AI应用开发所需的一切。

从Amazon EC2 P5实例代表的算力层、到Amazon OpenSearch Serverless向量引擎、Amazon Bedrock Agents代表的工具层、再到Amazon QuickSight等代表的应用层,一项端到端的解决方案已然形成。

在这之中,亚马逊云科技不断降低生成式AI的门槛,无论是初创企业还是传统行业,无论是处于生成式AI进程的哪一层,都能在这里找到合适的工具,无需耗费太多精力在底层逻辑之上,便可快速投入实际业务。

如亚马逊云科技数据库、数据分析和机器学习全球副总裁Swami Sivasubramanian所说:

我相信生成式AI将改变每一个应用程序、行业和企业。

事实上,随着AI模型大战的不断升级,也让生成式 AI进入聚光灯下。一批在AI领域有所积累的企业也在探索适合自己的应用方向,试图从这场前所未有的变革中,找到自己的新机会。

而亚马逊云科技的众多服务,无疑为企业降低开发成本、加速商业化落地赢得了更多的发展空间。

标签:

Agent开发的一小步,大模型应用的一大步

ChatGPT是大模型发展的重要里程碑,它将AI重新推向了时代中心,成为了

08-03 15:19:50

神兽王巴巴罗斯配什么卡组(:神兽王 巴巴罗斯)

1、要的。2、奈落的落穴是指召唤后才发动,还有奈落的落穴有群杀性,只

08-03 14:50:43

云南省红河哈尼族彝族自治州石屏县2023-08-03 12:59发布雷电黄色预警

一、云南省红河哈尼族彝族自治州石屏县天气预报1、石屏县气象台2023年8

08-03 14:05:16

北京延庆:白河堡水库正在泄洪 严禁无关人员进入泄洪区域

中新网8月3日电据北京市延庆区官方政务微博消息,根据延庆区水务防汛专

08-03 13:19:16

兆驰股份:台风暂未对公司造成影响

同花顺金融研究中心8月3日讯,有投资者向兆驰股份提问,你好,请问这次

08-03 12:25:05

任天堂夏季优惠2023:游戏七折优惠

任天堂近日宣布,将于2023年8月4日至17日期间,在其电子商店eShop举行

08-03 11:55:37

华中师范大学2023年在内蒙古高校专项招生计划

华中师范大学2023年在内蒙古高校专项招生计划学院专业科类专业性质学费

08-03 11:02:55

为什么这几天总是有周杰伦做的广告呢(为什么这几天总是有周杰伦做的广告)

1、因为人红,广告就多,广告多。2、广告就借着周董的人气跟着有名气,

08-03 10:41:59

《莲花楼》断更两天后,热度下降不如《安乐传》,断更的反噬来了

点点关注,好运连连8月1日,《莲花楼》在断更两天后,热度被《安乐传》

08-03 10:02:20

太阳能发电板功率大的好还是功率小的好(太阳能发电板功率)

太阳能发电板功率大的好还是功率小的好,太阳能发电板功率这个很多人还

08-03 10:04:11

私人资本的垄断:在中国,请断了这个念想

说到私人资本的垄断,就要说到上海的金融会议,正是在这个会议上,马云

08-03 09:32:48

亚马逊被曝组建新团队研发大语言模型

据报道,亚马逊成立了一个全新的团队,致力于研发大语言模型项目。报道

08-03 09:20:49

青岛银行08月02日获深股通增持390.42万股

08月02日,青岛银行获深股通增持万股,已连续7日获深股通增持,共计万

08-03 09:16:19

解读2023年《财富》世界500强榜单:中国上榜企业数量再列第一!中美日三国企业总营收占比近7成

8月2日,《财富》杂志发布2023年世界500强排行榜。上榜企业营业收入总

08-03 08:59:34

贵广网络(600996):8月2日北向资金减持41.14万股

8月2日北向资金减持41 14万股贵广网络。近5个交易日中,获北向资金减持

08-03 09:08:18

等你一句金句来!这份征集启事请查收 千元大奖快来拿

封面新闻记者戴竺芯点击图片,进入活动e法治网,清朗天府。快来点击链

08-03 08:54:43

广州番禺再通报“楼顶建豪华泳池”:属违建,将严肃追责问责

番禺区联合工作组今日通报,针对广州市番禺区钟村街道“雄峰北商业中心

08-03 08:23:10

8月2日基金净值:广发睿毅领先混合A最新净值2.77,跌0.53%

8月2日,广发睿毅领先混合A最新单位净值为2 77元,累计净值为2 77元,

08-03 08:29:14

又一重磅研究成果,美国顶级研究机构称研发出杀死所有癌瘤药物

据证券时报报道,美国顶级癌症治疗和研究机构希望城市(CityofHope)国

08-03 07:36:09

东西问|彭凯平:纪念黄光国先生

中新社北京8月2日电题:纪念黄光国先生——专访清华大学社会科学学院院

08-03 07:22:05

“西湖阿姐”准备好了 !穿上“蓝马甲”为亚运城市做志愿服务

8月1日上午,“迎亚运,向未来,‘西湖蓝马甲’城市志愿服务启动仪式”

08-03 07:17:27

广州拟对住宅半开敞空间半算计容比例适当放宽

广州拟对住宅半开敞空间半算计容比例适当放宽《征求意见稿》提出,为改

08-03 07:06:25

华锐精密(688059):8月2日北向资金增持1.41万股

8月2日北向资金增持1 41万股华锐精密。近5个交易日中,获北向资金减持

08-03 06:37:00

「权威发布」实录|淄川区召开高质量发展基层风采主题系列新闻发布会罗村镇专场

大众网记者滕腾淄博报道8月2日,淄川区人民政府新闻办公室举行高质量发

08-03 06:22:36

讯飞星火APP在苹果应用商店下架

讯飞星火APP于今日(8月1日)凌晨2点在苹果应用商店下架,该APP于6月29

08-03 05:36:56

“洽洽小黄袋”登上大运会餐桌

7月28日,第31届世界大学生夏季运动会在成都开幕。连日来,中国队捷报

08-03 05:28:20

爹爹手脚一个月内连续两次肿痛 住院三天免疫抑制治疗后好转

爹爹手脚一个月内连续两次肿痛住院三天免疫抑制治疗后好转---方爹爹说

08-03 05:24:56

农业农村部:落实落细农业防汛救灾和灾后生产恢复措施

光明日报北京8月2日电(记者陈晨)农业农村部2日召开全国农业防台防汛

08-03 05:14:09

广发证券:8月1日融资买入1.16亿元,融资融券余额31.03亿元

8月1日,广发证券(000776)融资买入1 16亿元,融资偿还1 64亿元,融资

08-03 04:46:39

日月股份公布新一届董事长及高级管理人员名单

日月股份公布新一届董事长及高级管理人员名单北极星风力发电网讯,8月1

08-03 04:07:02

美众院跟进参院提案!对台军售「不再限防御性武器」

继参议院后,美国跨党派众议员近日提出「透过实力促进台湾和平法案」,

08-03 04:06:01

2023年诺贝尔奖揭晓时间来了

此页面是否是列表页或首页?未找到合适正文内容。

08-03 04:00:05

梅花小剧场来了一群“林妹妹”“宝哥哥”

上妆、束发、穿衣……水袖摇摆间,10名小朋友摇身一变,瞬间化作“红楼

08-03 03:18:42

驱动(精灵)

来为大家解答以上问题,驱动,精灵很多人还不知道,现在让我们一起来看

08-03 03:03:20

畅捷通(01588.HK)将于8月16日举行董事会会议以审批中期业绩

格隆汇8月2日丨畅捷通01588HK公布董事会会议将于2023年8月16日举行藉以

08-03 03:02:38

张家界市召开2023年省河长制工作指标调度会

红网时刻张家界8月2日讯(通讯员李学文龚政)近日,张家界市召开2023年

08-03 02:49:53

8月2日基金净值:中邮核心科技创新灵活配置混合最新净值1.327,涨0.15%

8月2日,中邮核心科技创新灵活配置混合最新单位净值为1 327元,累计净

08-03 02:25:56

这个行政公益诉讼案督促铁路部门保障军人优先出行权

2021年7月,徐州铁路运输检察院在筛查涉铁公益诉讼线索中发现,部分铁

08-03 02:03:05

冰箱放在哪最旺风水

在中国传统文化中,风水学是一门重要的学问,它主要研究人类居住环

08-03 00:57:03

激光业务持续增长,预计市场规模将达到约350亿美元!激光行业市场发展现状分析2023

中国激光产业市场起步较晚,但随着中国装备制造业的迅猛发展,近年来,

08-03 00:07:33

十九岁美容仪上线小米众筹:轻体验感受,太好用了

女人天生爱美,这个是女性的天性,但现在大家的工作都很忙碌,导致女人

08-02 23:46:18

梅西代言中国白酒,一瓶卖1299元,背后站着山东临沂临沭首富

梅西代言中国白酒,一瓶卖1299元,背后站着山东临沂临沭首富,贵州,高文

08-02 22:58:38

尽享浪漫与舒适! 第23届红豆七夕节火热开启

进入火热的8月,将迎来今年最浪漫一个节日七夕。8月1日,作为七夕的首

08-02 22:52:01

2023援琼医护畅游三亚活动举办

8月1日,“酷酷的海南欢乐的暑期”2023暑期旅游推广活动在海南三亚天涯

08-02 22:21:44

锦鸡股份(300798.SZ)第一大股东的一致行动人减持期届满未减持

智通财经APP讯,锦鸡股份(300798 SZ)公告,公司第一大股东赵卫国的一致

08-02 21:34:21

改编自东野圭吾作品 重庆首家沉浸式娱乐商业综合体开业

00:35华龙网-新重庆客户端讯(首席记者佘振芳实习生支景莹)面朝嘉陵江

08-02 21:28:03

羊脂玉黄玉

羊脂玉和黄玉都是矿石中的一种。羊脂玉又称羊脂白玉,是一种色泽温润、

08-02 20:40:20

近视偏光是什么意思(偏光是什么意思)

近视偏光是什么意思,偏光是什么意思这个很多人还不知道,现在让我们一

08-02 20:26:46

个人医保账户清除计算是什么意思?带你了解一下~

个人医保账户清除计算是什么意思?带你了解一下~,随社保网小编来看看

08-02 20:04:51

2023江苏省宿迁中学(宿迁市教育局直属学校)招聘教师面试成绩及进入考察阶段考生名单公告

2023年江苏省宿迁中学(宿迁市教育局直属学校)面向社会公开招聘教师面试

08-02 18:56:22

神兽王巴巴罗斯配什么卡组(:神兽王 巴巴罗斯)
云南省红河哈尼族彝族自治州石屏县2023-08-03 12:59发布雷电黄色预警
北京延庆:白河堡水库正在泄洪 严禁无关人员进入泄洪区域
兆驰股份:台风暂未对公司造成影响
任天堂夏季优惠2023:游戏七折优惠
华中师范大学2023年在内蒙古高校专项招生计划
为什么这几天总是有周杰伦做的广告呢(为什么这几天总是有周杰伦做的广告)
《莲花楼》断更两天后,热度下降不如《安乐传》,断更的反噬来了
太阳能发电板功率大的好还是功率小的好(太阳能发电板功率)
私人资本的垄断:在中国,请断了这个念想
亚马逊被曝组建新团队研发大语言模型
青岛银行08月02日获深股通增持390.42万股
解读2023年《财富》世界500强榜单:中国上榜企业数量再列第一!中美日三国企业总营收占比近7成
贵广网络(600996):8月2日北向资金减持41.14万股
等你一句金句来!这份征集启事请查收 千元大奖快来拿
广州番禺再通报“楼顶建豪华泳池”:属违建,将严肃追责问责
8月2日基金净值:广发睿毅领先混合A最新净值2.77,跌0.53%
又一重磅研究成果,美国顶级研究机构称研发出杀死所有癌瘤药物
东西问|彭凯平:纪念黄光国先生
“西湖阿姐”准备好了 !穿上“蓝马甲”为亚运城市做志愿服务
广州拟对住宅半开敞空间半算计容比例适当放宽
华锐精密(688059):8月2日北向资金增持1.41万股
「权威发布」实录|淄川区召开高质量发展基层风采主题系列新闻发布会罗村镇专场
讯飞星火APP在苹果应用商店下架
“洽洽小黄袋”登上大运会餐桌
爹爹手脚一个月内连续两次肿痛 住院三天免疫抑制治疗后好转
农业农村部:落实落细农业防汛救灾和灾后生产恢复措施
广发证券:8月1日融资买入1.16亿元,融资融券余额31.03亿元
日月股份公布新一届董事长及高级管理人员名单
美众院跟进参院提案!对台军售「不再限防御性武器」
2023年诺贝尔奖揭晓时间来了
梅花小剧场来了一群“林妹妹”“宝哥哥”
驱动(精灵)
畅捷通(01588.HK)将于8月16日举行董事会会议以审批中期业绩
张家界市召开2023年省河长制工作指标调度会
8月2日基金净值:中邮核心科技创新灵活配置混合最新净值1.327,涨0.15%
这个行政公益诉讼案督促铁路部门保障军人优先出行权
冰箱放在哪最旺风水
激光业务持续增长,预计市场规模将达到约350亿美元!激光行业市场发展现状分析2023
十九岁美容仪上线小米众筹:轻体验感受,太好用了
梅西代言中国白酒,一瓶卖1299元,背后站着山东临沂临沭首富
尽享浪漫与舒适! 第23届红豆七夕节火热开启
2023援琼医护畅游三亚活动举办
锦鸡股份(300798.SZ)第一大股东的一致行动人减持期届满未减持
改编自东野圭吾作品 重庆首家沉浸式娱乐商业综合体开业
羊脂玉黄玉
近视偏光是什么意思(偏光是什么意思)
个人医保账户清除计算是什么意思?带你了解一下~
2023江苏省宿迁中学(宿迁市教育局直属学校)招聘教师面试成绩及进入考察阶段考生名单公告
日本外相访非“特意传达G7想法”
X 广告
行业动态
X 广告

Copyright ©  2015-2022 亚洲植物网版权所有  备案号:京ICP备2021034106号-51   联系邮箱:5 516 538 @qq.com