OpenAI又開源了！不用代碼就能構(gòu)建復(fù)雜多Agents實時語音協(xié)作系統(tǒng)

原標(biāo)題：OpenAI又開源了！不用代碼就能構(gòu)建復(fù)雜多Agents實時語音協(xié)作系統(tǒng)
文章來源：夕小瑤科技說
內(nèi)容字?jǐn)?shù)：3899字

OpenAI開源項目：20分鐘構(gòu)建多Agent語音應(yīng)用

近日，OpenAI悄然發(fā)布了開源項目openai-realtime-agents，這是一個基于Realtime API的多Agent語音應(yīng)用示例，只需20分鐘即可構(gòu)建屬于自己的多Agent語音應(yīng)用。該項目最大的亮點在于，它允許開發(fā)者使用自然語言來定義Agent及其交互規(guī)則，并引入了低延時的Realtime API，極大降低了開發(fā)門檻。

自然語言定義Agent及交互

1. 簡化開發(fā)流程：以往構(gòu)建多Agent應(yīng)用需要復(fù)雜的編程知識和大量開發(fā)工作，而openai-realtime-agents則允許開發(fā)者用自然語言描述Agent的行為和功能，無需精通編程語言和開發(fā)環(huán)境。即使沒有專業(yè)編程技能，也能快速創(chuàng)建多Agent應(yīng)用或代理式工作流。

2. 示例場景：官方提供了一個簡單的示例，包含兩個Agent：greeter（接待員）和haiku（俳句詩人）。greeter負(fù)責(zé)接待用戶，詢問是否需要俳句詩；用戶回答后，系統(tǒng)切換到haiku，根據(jù)用戶提供的主題創(chuàng)作俳句。

3. 三步定制：定制過程簡單易行，只需三步：定義Agent（姓名、職責(zé)、指令、工具）；明確Agent的下游響應(yīng)者；添加Agent轉(zhuǎn)換工具（實現(xiàn)Agent間的自動切換）。

Agent生成工具及狀態(tài)機(jī)Prompt

1. 高質(zhì)量Agent指令生成：項目作者Noah MacCallum提供了一個工具，能夠生成高質(zhì)量的Agent指令，例如，可以生成一個導(dǎo)購版小瑤的Agent指令，直接作為Agent配置的instructions。

2. 狀態(tài)機(jī)Prompt：該工具生成的指令實際上是一個用自然語言描述的對話狀態(tài)機(jī)，每個狀態(tài)都有詳細(xì)的指令、示例和狀態(tài)切換條件。這使得Agent能夠根據(jù)對話內(nèi)容進(jìn)行狀態(tài)切換，實現(xiàn)更復(fù)雜的交互。

3. 實際應(yīng)用：文章中通過一個簡單的年貨導(dǎo)購場景，展示了狀態(tài)機(jī)的實際應(yīng)用效果，導(dǎo)購版小瑤能夠根據(jù)用戶的需求進(jìn)行引導(dǎo)，展現(xiàn)了該模式的應(yīng)用價值。未來該模式可應(yīng)用于游戲角色扮演、業(yè)務(wù)系統(tǒng)實現(xiàn)等領(lǐng)域。

顛覆性的意義與未來展望

1. 降低AI應(yīng)用門檻：該項目讓開發(fā)者可以用自然語言實現(xiàn)業(yè)務(wù)邏輯，更貼近人類的思考方式。即使沒有代碼編寫能力，也能開發(fā)出復(fù)雜的AI應(yīng)用。

2. 改變?nèi)藱C(jī)交互方式：該項目改變了開發(fā)者與AI的交互方式，開發(fā)者只需定義Agent的職責(zé)和能力，Agent就能協(xié)同工作，如同管理一個團(tuán)隊。

3. 未來應(yīng)用潛力巨大：該項目預(yù)示著未來AI應(yīng)用開發(fā)的趨勢，降低了開發(fā)成本，拓展了AI應(yīng)用的領(lǐng)域，為創(chuàng)造一個新的世界提供了可能。

總而言之，openai-realtime-agents是一個具有突破性意義的開源項目，它簡化了多Agent應(yīng)用的開發(fā)流程，降低了AI應(yīng)用的門檻，為AI的廣泛應(yīng)用鋪平了道路，也為開發(fā)者提供了全新的視角和工具，去探索和創(chuàng)造未來。

聯(lián)系作者

文章來源：夕小瑤科技說
作者微信：
作者簡介：低負(fù)擔(dān)解碼AI世界，硬核也可愛！聚集35萬AI發(fā)燒友、開發(fā)者和從業(yè)者，廣泛覆蓋互聯(lián)網(wǎng)大廠中高管、AI公司創(chuàng)始人和機(jī)構(gòu)投資人。一線作者來自清北、國內(nèi)外頂級AI實驗室和大廠，兼?zhèn)涿翡J的行業(yè)嗅覺和洞察深度。商務(wù)合作：zym5189