亞馬遜云科技數據和人工智能副總裁Swami Sivasubramanian博士表示:“生成式AI有望成為我們這個時代最具變革性的技術??蛻舴e極應用生成式AI創造新機遇、應對業務挑戰,這給我們帶來了啟發。當客戶將生成式AI融入其業務時,他們會利用Amazon Bedrock以全托管的方式獲取領先模型、定制功能、代理功能以及企業級安全和隱私保障。有了更多觸手可及的工具,客戶可以使用Amazon Bedrock充分發揮生成式AI的潛力,創新用戶體驗、重塑業務并加速生成式AI之旅。”
企業希望在各種場景中應用生成式AI,例如提高生產效率,創新用戶體驗和開啟全新工作方式。然而,生成式AI技術正快速發展,每天都有新的服務和創新發生。在日新月異的當下,客戶的適應能力至關重要。企業需要能夠使用最新、最好的可用模型進行試驗、部署、迭代和調整,并時刻準備好迎接變化。為了應對這些挑戰,亞馬遜云科技開發了Amazon Bedrock,使一系列模型的構建和移動就像API調用一樣簡單,讓所有開發人員都可以獲得模型定制的最新技術,并確保客戶的安全和數據隱私。包括Alida、Automation Anywhere、Blueshift、寶馬集團、Clariant、Coinbase、Cox Automotive、dentsu、Druva、Genesys、Gilead、GoDaddy、Hellmann Worldwide Logistics、INRIX、KONE、LexisNexis Legal & Professional、Lonely Planet、NatWest、Nexxiot、OfferUp、宏盟集團、The PGA Tour、Proofpoint、Salesforce、西門子、竹中公司和Verint在內的眾多企業已率先采用Amazon Bedrock應用生成式AI。此次發布引入了新的模型和功能,使客戶能夠更輕松地構建和規?;墒紸I應用。
Anthropic、Cohere、Meta和Stability AI的最新模型以及亞馬遜Titan的新增功能為客戶提供了更多模型選擇
沒有一個模型適合所有場景。模型的功能、價格和性能都不盡相同??蛻粜枰p松訪問各種模型選擇,多次嘗試和切換模型,最終選出最匹配需求的模型。借助Amazon Bedrock,客戶可以利用最新版本的模型快速創新,包括新推出的Anthropic Claude 2.1和Meta Llama 2 70B以及最近推出的Stability AI Stable Diffusion XL 1.0、Meta Llama 2 Chat 13B、Cohere Command Light、Cohere Embed English和Cohere Embed多語言模型——全部可通過API訪問。除了Amazon Titan Text Embeddings和Amazon Titan Text模型(現已全面可用)之外,亞馬遜云科技還提供了Titan Multimodal Embeddings和Amazon Titan Image Generator為客戶使用模型構建生成式AI應用程序提供更多選擇和靈活性。Amazon Titan模型由Amazon Bedrock獨家提供,由亞馬遜云科技在適用于各種用例的大型且多樣化的數據集上創建和預訓練,并內置對負責任地使用AI的支持。如果正式可用的Amazon Titan模型或其輸出的內容侵犯了第三方版權,亞馬遜將對使用這些模型的客戶進行賠償。
· Amazon Bedrock上的Anthropic Claude 2.1:Anthropic是一家從事AI安全和科研的公司,致力于構建可靠、可解釋和可控的AI系統。Anthropic已將其最新版本的語言模型Claude 2.1引入Amazon Bedrock。Claude 2.1提供了長達200,000個token的上下文窗口,并且提高了長文檔的準確性??蛻艨梢蕴幚砦谋久芗臀臋n,例如財務報表和內部數據集。Claude 2.1能夠總結和對比文檔、進行問答等。Anthropic報告稱,與此前模型相比,Claude 2.1在開放式對話中的錯誤陳述減少了50%,錯誤陳述率減少了一半。
· Amazon Bedrock上的Meta Llama 2 70B:Llama 2是Meta的下一代語言模型。Llama 2 的訓練數據比Llama 1多40%,上下文長度是Llama 1的兩倍。除了最近發布的Llama 2 130億參數模型之外,Llama 2 700億參數模型也已在Amazon Bedrock上提供。Llama 2 Chat建立在預訓練的Llama模型之上,通過指令數據集和超過100萬條人工注釋進行調優,針對對話場景進行了優化。這些模型在多個外部基準測試中的表現卓越,包括推理、編碼、熟練程度和知識測試,并在Amazon Bedrock上提供了極高的性能價格組合。
· 新的Amazon Titan Image Generator現已推出預覽版:Amazon Titan Image Generator可幫助廣告、電子商務、媒體和娛樂等行業的客戶通過使用自然語言提示生成高質量、逼真的圖像或增強現有圖像,以便以低成本快速構思和大量迭代圖像。這一模型可以理解復雜的提示詞并生成相關圖像,且準確度較高很少失真,也不易含有有害內容,減少錯誤信息傳播??蛻艨梢栽贏mazon Bedrock控制臺中使用該模型,在配置維度參數并指定模型應生成變化圖像的數量之前,可以直接輸入自然語言提示來生成圖像或上傳圖像進行自動編輯。在編輯過程中,客戶可以隔離圖像的某些部分以添加或替換細節(例如,將沖浪板插入海灘場景或將汽車廣告背景中的高山替換為森林),或者他們可以使用其他與原作風格相同的細節擴展圖像的邊界。為了兌現亞馬遜云科技今年早些時候在白宮做出的承諾,所有Amazon Titan生成的圖像都包含不可見水印,以通過建立嚴謹的識別AI生成圖像的機制來幫助減少錯誤信息的傳播,促進AI技術的安全、可靠和透明發展。亞馬遜云科技是首批廣泛發布內置隱形水印的模型提供商之一,這些水印集成到輸出的圖像中,并設計為拒絕更改。
· 新的Amazon Titan Multimodal Embeddings現已正式可用:Amazon Titan Multimodal Embeddings可幫助客戶為最終用戶提高多模態搜索和推薦體驗,讓輸出結果更準確且與上下文相關。模型可以將圖像和短文本轉換為embedding數字表示形式,使模型能夠輕松理解語義以及數據之間的關系。最終用戶可以使用圖像和文本提示的任意組合進行搜索查詢。該模型將為搜索查詢生成嵌入,并將它們與已有的嵌入相匹配,以產生更相關的搜索和推薦結果。例如,擁有數億張圖像的圖庫攝影公司可以使用該模型來增強其搜索功能,這樣用戶就可以使用短語、圖像或圖像和文本的組合來搜索圖像(例如,“我要和這張照片類似的圖像,但天空是晴朗的”)。一般情況下,使用該模型生成向量非常適合于需要高準確度和快速響應的搜索場景。然而,客戶也可以生成更小的維度來優化速度和性能。Amazon Titan Text Embeddings模型可以將詞語、短句、長文檔等文本輸入轉化為嵌入(embeddings),用于搜索和個性化推薦等場景,這一模型加入了Amazon Titan Text Embeddings。
新功能可幫助客戶高效評估、比較和選擇最適合其應用場景和業務需求的模型
如今,企業擁有廣泛的模型選項來為其生成式AI應用程序提供支持。在具體應用場景中,為了在準確性和性能之間取得適當的平衡,企業必須有效地比較模型并根據其首選指標找到最佳選擇。為了比較模型,企業必須首先花幾天時間確定基準、設置評估工具并運行評估,所有這些都需要深厚的數據科學專業知識。此外,這些測試無法用于主觀標準的評估(例如,品牌聲量、相關性和風格),因為主觀標準需要通過繁瑣、耗時的人工審核進行判斷。對于每個新場景模型,這些比較所需的時間、專業知識和資源使企業望而卻步,從而限制了他們對生成式AI的使用。
Amazon Bedrock中的模型評估功能現已推出預覽版,可幫助客戶使用自動或人工評估來評估、比較和選擇適合其特定應用場景的最佳模型。在Amazon Bedrock控制臺中,客戶可以選擇他們想要針對給定任務(例如問答或內容摘要)進行比較的模型。如需自動評估,客戶可以選擇預定義的評估標準(例如準確性、魯棒性和是否含有有害內容)并上傳自己的測試數據集或從內置的公開數據集中進行選擇。對于需要復雜判斷的主觀標準或細微內容,客戶只需點擊幾下即可輕松設置基于人工的評估工作流程。這些工作流程利用客戶的內部員工隊伍或使用亞馬遜云科技提供的員工隊伍來評估模型響應。在基于人的評估過程中,客戶可以定義特定的指標(例如,相關性、風格和品牌聲量)??蛻敉瓿稍O置后,Amazon Bedrock就會運行評估并生成報告,以便客戶可以輕松了解模型在關鍵標準上的表現,并可以做出最佳權衡,從而快速選擇最適合其應用場景的模型。
擴展的全新模型定制功能可幫助客戶在亞馬遜云科技上私密且安全地釋放數據價值
企業希望最大限度地釋放數據價值,以大規模提供卓越的用戶體驗,這些體驗經過獨特定制,能夠反映公司的風格、聲音和服務。Amazon Bedrock中提供的新的專門構建的功能可幫助客戶使用自己的數據私密且安全地定制模型,以構建差異化的生成式AI驅動的應用程序。
· Amazon Bedrock知識庫功能使用上下文和相關公司數據定制模型響應:組織希望使用專有數據補充現有模型,以獲得更相關和更準確的響應。為了給模型配備最新信息,組織轉向RAG,這種技術通過從多個來源(例如資源池、數據庫和API)獲取數據,將數據與提示詞結合。Amazon Bedrock知識庫功能現已全面可用,可將模型安全地連接到公司內部數據源用于RAG,以便為聊天機器人和問答系統等用例提供更準確、針對特定上下文的響應。知識庫是完全托管的,因此客戶只需指明數據位置,然后知識庫就會獲取文本文檔,并將數據保存到向量數據庫或代表客戶設置一個向量數據庫。當用戶進行查詢時,Amazon Bedrock會自動編排RAG,通過模型獲取相關文本來增強提示詞,將提示詞發給模型,最終返回響應。Amazon Bedrock知識庫支持數據庫用于向量功能,包括Amazon OpenSearch、Pinecone和Redis Enterprise Cloud的向量引擎,Amazon Aurora和MongoDB也即將推出。
· Cohere Command、Meta Llama 2和Amazon Titan模型現在可以在Amazon Bedrock上進行微調,并且即將推出對Anthropic Claude 2的支持:除了RAG之外,企業還可以利用微調功能在具體任務(例如,文本生成)中進一步訓練模型,使用標記數據集調整模型參數,使其適合業務需求,將掌握的知識擴展到組織和終端用戶使用的詞匯庫。例如,零售客戶可以在產品描述數據集上微調模型,以幫助其了解品牌風格,從而為網站生成更準確的描述。Amazon Bedrock現在支持對Cohere Command和Meta Llama 2,以及Amazon Titan Text Express、Amazon Titan Text Lite、Amazon Titan Multimodal Embeddings和Amazon Titan Image Generator(預覽版)的完全托管微調,因此客戶可以使用帶標簽的數據集提高特定任務的模型準確性。此外,亞馬遜云科技客戶很快就能夠利用自己的數據源微調Anthropic Claude 2的性能。要微調模型,客戶可以選擇模型,使用Amazon Bedrock制作副本。之后,客戶可以在Amazon Simple Storage Service(Amazon S3)中的標記示例。Amazon Bedrock(利用新信息增強復制模型)對其進行訓練,在保證隱私的情況下返回結果。模型越是經過精準調優,返回的結果越是相關且定制化??蛻魯祿趥鬏斶^程中和靜態時都經過加密,因此所有有價值的客戶數據都是始終安全且私密的。亞馬遜云科技和第三方模型提供商不會使用Amazon Bedrock的任何輸入或輸出來訓練其基本模型。
借助Amazon Bedrock代理功能,生成式AI應用程序可以使用公司系統和數據源執行多步驟任務
雖然模型能夠有效地進行對話和創建新內容,但如果能夠執行復雜的操作,例如解決問題以及與公司系統交互以完成任務(例如,旅行預定或訂購替換零件),它們可以提供更多價值。然而,這需要定制化地將模型與公司數據源、API以及內部和外部系統集成起來。開發人員必須編寫代碼來協調模型、系統和用戶之間的交互,以便應用程序可以按邏輯順序執行一系列API調用。為了將模型與數據源連接起來,開發人員必須部署RAG,以便模型可以根據任務調整其響應。最后,開發人員必須配置和管理必要的基礎設施,并制定數據安全和隱私策略。這些步驟非常耗時且需要專業知識,從而減慢了生成式AI應用程序的開發速度。
現在正式可用、完全托管的Amazon Bedrock代理功能使生成式AI應用程序能夠跨公司系統和數據源執行多步驟任務。代理可以計劃和執行大多數業務任務,例如回答有關產品可用性的問題或接受訂單??蛻艨梢允褂煤唵蔚脑O置過程創建代理——首先選擇所需的模型,用自然語言編寫一些說明(例如,“你是一位友好的客戶服務代理”,和“在庫存系統中檢查產品庫存情況”),并開放其對公司企業系統和知識庫的訪問;代理自動分析請求并將其分解為邏輯序列,使用模型的推理功能來確定所需的信息;然后,代理通過識別要調用的API并決定何時調用它們來采取行動、滿足請求。代理還可以從專有數據源檢索所需信息,以提供準確且相關的響應。代理每次都會在后臺安全、私密地執行此過程,使客戶無需設計提示、管理會話上下文或手動編排系統。借助適用于Amazon Bedrock的代理,客戶可以提升準確性,加速生成式AI應用程序的開發。
借助Amazon Bedrock的Guardrails功能,客戶可以根據應用程序要求和負責任的AI策略跨模型實施保護措施
企業認識到需要管理生成式AI應用程序中的交互,以提供所答即所問的用戶體驗并確保安全。雖然許多模型使用內置控件來過濾不良和有害內容,但企業希望進一步定制交互,以保證話題始終與業務相關,符合公司政策,并遵守“負責任的AI”的原則。例如,銀行可能希望這樣設置其在線助手:避免查詢競爭對手、避免提供投資建議、以及限制有害內容。此外,應用戶要求,可能要變換或隱去用戶的個人身份信息(PII)以保證安全。企業可能需要更改模型、使用多個模型或跨應用程序復制策略,他們需要一種簡單的方法來同時在所有這些領域一致地部署他們的要求。這需要深厚的專業知識來構建具有此類保護措施的定制保護系統并將其集成到應用程序中,并且該過程可能需要數月時間。企業希望以一種簡化的方式在生成AI應用程序中強化關鍵策略和規則,以提供所答即所問的用戶體驗并支持更安全地使用該技術。
Amazon Bedrock的Guardrails功能現已推出預覽版,使客戶能夠為生成式 AI 應用程序實施保護措施。這些應用程序根據客戶應用場景和“負責任的AI”原則進行定制,因此這一功能可以增強用戶交互的安全性和隱私性。Guardrails功能可以提高Amazon Bedrock上的模型對應用程序中不良和有害內容的響應方式的一致性??蛻艨梢詫uardrails功能應用于Amazon Bedrock上的所有大型語言模型,以及微調模型并與 Amazon Bedrock代理功能結合使用。要在Amazon Bedrock控制臺中創建一個Guardrail,客戶首先使用自然語言描述來定義其應用程序中需要被拒絕的話題??蛻暨€可以配置仇恨言論、侮辱、性語言和暴力的閾值,以將有害內容過濾到他們想要的水平。在2024年初,客戶還可以設定模型響應中的個人身份信息(PII)的變換方法以保證安全、設置臟話過濾器,并提供自定義單詞列表來阻止用戶和模型之間的交互。Guardrails自動評估用戶查詢和模型響應,以檢測并防止出現屬于受限類別的內容??蛻艨梢詣摻ǘ鄠€Guardrails來支持不同的用例,也可以在多個模型中應用相同的Guardrail。Amazon Bedrock的Guardrails功能通過提供一致的用戶體驗并標準化生成型AI應用程序的安全和隱私控制,使客戶能夠安全地進行創新。
電通是全球最大的整合營銷和技術服務提供商之一。電通創新與新興技術執行副總裁Brian Klochkoff表示:“我們致力于將營銷、技術和咨詢整合起來,助力那些希望造福社會的品牌實現以人為本的轉型。生成式AI能夠讓我們以更大規模、更快速地為客戶提供服務。這項技術不會取代我們的員工,而是為我們全球72000名員工提供助力。具體來說,Amazon Bedrock為我們提供了企業級的控制能力和便捷部署第三方模型的能力,以便我們的產品和技術團隊能夠跨團隊分散使用。這讓團隊能夠在一個安全和負責任的環境下,借助最新、最前沿的生成式AI技術進行革新,為客戶打造創新機遇。”
MongoDB的使命是通過釋放軟件和數據的力量,幫助創新者創造、變革和顛覆行業。MongoDB首席產品官Sahir Azam表示:“各行各業越來越多的客戶希望利用生成式AI來構建下一代應用程序,但許多人擔心數據隱私以及人工智能驅動的系統輸出的準確性。為了滿足客戶的需求,我們將MongoDB Atlas作為Amazon Bedrock的知識庫,以便我們的共同客戶可以利用其運營數據安全地構建生成式AI應用程序,以符合最終用戶期望的信任度和準確性來創建個性化體驗。通過這種集成,客戶可以訪問行業領先的基礎模型,并使用MongoDB Atlas Vector Search處理過的數據來創建應用程序,在正確的上下文中提供更多相關的輸出。利用Amazon Bedrock知識庫中內置的數據隱私最佳實踐,客戶可以節省在生成式AI運營上花費的時間,從而更專注于技術部署,以在 亞馬遜云科技上提供更有吸引力的最終用戶體驗。”
Salesforce是領先的AI客戶關系管理(CRM)平臺,通過AI、CRM和數據的力量實現高效和可信賴的客戶體驗。Salesforce產品高級副總裁Kaushal Kurapati表示:“我們致力于幫助企業以全新、個性化的方式與客戶建立連接,AI對實現這一承諾來說不可或缺。Amazon Bedrock是我們開放模型生態戰略的重要組成部分,能夠將模型與客戶的數據無縫整合,并集成到Salesforce工作流程當中。新增的評估能力可以從多維度對比基礎模型,包括從友好性、風格和品牌相關性等定性方面進行比較,從而讓模型落地變得前所未有的簡單、快捷。”