來(lái)源:艾特保IT 虹科分享 | 用Redis為L(zhǎng)angChain定制AI代理——OpenGPTs
原文鏈接:https://mp.weixin.qq.com/s/U8vTgGJk87c0kdYmIWD8wQ
歡迎關(guān)注虹科,為您提供最新資訊!
#AI代理 #OpenAI #Redis
OpenAI最近推出了OpenAI GPTs——一個(gè)構(gòu)建定制化AI代理的無(wú)代碼“應(yīng)用商店”,隨后LangChain開(kāi)發(fā)了類似的開(kāi)源工具OpenGPTs。OpenGPTs是一款低代碼的開(kāi)源框架,專用于構(gòu)建定制化的人工智能代理。因?yàn)镽edis具有高速和穩(wěn)定性的優(yōu)點(diǎn),所以LangChain選擇了Redis來(lái)作為OpenGPTs的默認(rèn)向量數(shù)據(jù)庫(kù)。
文章速覽:
-OpenGPTs簡(jiǎn)介
-Redis在OpenGPTs中的作用
-在本地使用OpenGPTs
-在云端使用OpenGPTs
-Redis與LangChain賦能創(chuàng)新
一、OpenGPTs簡(jiǎn)介
通過(guò)幾個(gè)配置步驟,我們可以用OpenGPTs構(gòu)建一個(gè)精通Redis的機(jī)器人,名為“RedisGuru”。
以下是我們選擇的LLM、系統(tǒng)消息和工具的示例,包括DuckDuckGo搜索、維基百科搜索,以及通過(guò)Kay.ai訪問(wèn)的公共新聞稿。
配置并部署RedisGuru后,可以測(cè)試代理如何運(yùn)行:
此外,我們還可以查詢有關(guān)Redis數(shù)據(jù)結(jié)構(gòu)的問(wèn)題。可以看到,RedisGuru記住了我的名字:
我們構(gòu)建的這個(gè)RedisGuru代理只是一個(gè)應(yīng)用示例。你也可以構(gòu)建各類應(yīng)用,比如電子郵件文案編輯器、智能研究助理、代碼審查員等。
二、Redis在OpenGPTs中的作用
在這個(gè)OpenGPTs演示的背后,Redis提供了一個(gè)強(qiáng)大且高性能的數(shù)據(jù)層,是 OpenGPTs 技術(shù)棧不可或缺的一部分。
Redis可以持久化用戶聊天會(huì)話(線程)、代理配置和嵌入式文檔塊,并用于向量數(shù)據(jù)庫(kù)檢索。
01 用戶聊天會(huì)話
為了在對(duì)話中維持“狀態(tài)”,Redis為OpenGPTs提供了用戶與AI代理間的持久聊天線程。這些聊天會(huì)話也被輸入到LLM中,以提供當(dāng)前對(duì)話狀態(tài)的上下文信息。
02 代理配置
為了支持多租戶代理架構(gòu),Redis為OpenGPTs提供了一個(gè)遠(yuǎn)程的、低延遲的存儲(chǔ)層。當(dāng)應(yīng)用程序啟動(dòng)時(shí),它從Redis讀取指定的代理設(shè)置,然后開(kāi)始處理請(qǐng)求。
03 向量數(shù)據(jù)庫(kù)用于RAG****
為了讓對(duì)話基于實(shí)際情況,OpenGPTs允許我們上傳“知識(shí)”源,以便LLM將其與生成的答案結(jié)合。通過(guò)一種稱為檢索增強(qiáng)生成(RAG)的過(guò)程,OpenGPTs將上傳的文檔存儲(chǔ)在Redis中,并提供實(shí)時(shí)向量搜索,以檢索與LLM相關(guān)的上下文。
這些功能是Redis平臺(tái)的一部分,通過(guò)我們的LangChain + Redis集成融入到應(yīng)用程序中。
Redis與LangChain的OpenGPTs集成帶來(lái)了更高的靈活性、可擴(kuò)展性以及實(shí)時(shí)處理和搜索能力。處理多樣化數(shù)據(jù)結(jié)構(gòu)的能力是Redis成為OpenGPTs記憶功能的首選解決方案。
三、在本地使用OpenGPTs
如果想親自體驗(yàn)OpenGPTs,你可以在項(xiàng)目的README文件中找到更詳細(xì)的指南。以下是一個(gè)快速概述:
1、 安裝后端依賴: 克隆項(xiàng)目倉(cāng)庫(kù),然后導(dǎo)航到后端目錄并安裝必要的Python依賴項(xiàng)。
-cd backend
-pip install -r requirements.txt
2、連接Redis和OpenAI: OpenGPTs使用Redis作為L(zhǎng)LM的記憶庫(kù),使用OpenAI進(jìn)行LLM的生成和嵌入。設(shè)置環(huán)境變量REDIS_URL和OPENAI_API_KEY,以連接到您的Redis實(shí)例和OpenAI賬戶。
-export OPENAI_API_KEY=your-openai-api-key
-export REDIS_URL=redis://your-redis-url
3、啟動(dòng)后端服務(wù)器: 在本地機(jī)器上運(yùn)行LangChain服務(wù)器,提供應(yīng)用程序服務(wù)。
-langchain serve --port=8100
4、 啟動(dòng)前端: 在前端目錄中,使用yarn啟動(dòng)開(kāi)發(fā)服務(wù)器。
-cd frontend
-yarn
-yarn dev
5、在瀏覽器中打開(kāi)http://localhost:5173/,與您的本地OpenGPTs部署進(jìn)行交互。
四、在云端使用OpenGPTs
如果希望在沒(méi)有本地設(shè)置的情況下使用OpenGPTs,可以嘗試在谷歌云上部署。另外,你還可以訪問(wèn)由LangChain、LangServe和Redis支持的托管預(yù)覽部署。這種部署展示了OpenGPTs的可定制性和易用性。
五、Redis與LangChain賦能創(chuàng)新
Redis企業(yè)版作為一款企業(yè)級(jí)的低延遲向量數(shù)據(jù)庫(kù),在支持生成性AI項(xiàng)目方面具有獨(dú)特優(yōu)勢(shì)。其不僅提供向量搜索,還提供多功能數(shù)據(jù)結(jié)構(gòu),能有效滿足LLMs的應(yīng)用狀態(tài)需求。這個(gè)強(qiáng)大的平臺(tái)提供了優(yōu)異的可擴(kuò)展性和性能,Redis借此成為生成式AI領(lǐng)域的重要工具。
審核編輯 黃宇
-
AI
+關(guān)注
關(guān)注
87文章
34146瀏覽量
275297 -
Redis
+關(guān)注
關(guān)注
0文章
384瀏覽量
11311 -
OpenAI
+關(guān)注
關(guān)注
9文章
1201瀏覽量
8628
發(fā)布評(píng)論請(qǐng)先 登錄
在郵科定制的攝像頭怎么樣,用哪個(gè)軟件?
虹科集團(tuán)數(shù)字化轉(zhuǎn)型戰(zhàn)略全面升級(jí)
虹科電子攜手投資機(jī)構(gòu)啟動(dòng)億元?jiǎng)?chuàng)新基金
虹科直播回放 | IO-Link技術(shù)概述與虹科IO-Link OEM

Gupshup推出AI代理庫(kù),加速企業(yè)AI應(yīng)用
NVIDIA與合作伙伴推出代理式AI Blueprint
虹軟AI視覺(jué)賦能雷鳥(niǎo)V3 AI拍攝眼鏡發(fā)布
虹科電子12月事件回顧
虹科應(yīng)用 為什么虹科PCAN方案能成為石油工程通訊的首選?

新合作啟航,服務(wù)如初!虹科與HMS及PEAK合作升級(jí)

LangChain框架關(guān)鍵組件的使用方法

虹科方案 領(lǐng)航智能交通革新:虹科PEAK智行定位車(chē)控系統(tǒng)Demo版亮相

虹科應(yīng)用 當(dāng)CANoe不是唯一選擇:發(fā)現(xiàn)虹科PCAN-Explorer 6

虹科案例|為什么PCAN MicroMod FD是數(shù)模信號(hào)轉(zhuǎn)換的首選方案?

評(píng)論