Google Gemini Pro 1.5重大更新：新增音頻理解、單次處理任何格式數(shù)據(jù)、更強大的函數(shù)調用和JSON模式，DataLeanrerAI實測音頻理解能力優(yōu)秀，且同時Gemini 1.5 Pro 開放 API 讓開發(fā)者申請使用！輕松獲取Gemini 1.5 Pro API Key教程：開發(fā)者申請部署ai應用。

Gemini Pro 1.5 超過180個國家或地區(qū)的Gemini API公測環(huán)境提供， 引入了官方改進的音頻/視頻（語言）理解能力和新的file API，以便于實時大文件訪問。

Gemini 1.5 Pro的主要更新內容

全球可用性:

Gemini 1.5 Pro現(xiàn)已在超過180個國家或地區(qū)的Gemini API公測環(huán)境提供，使得全球開發(fā)者都能訪問并利用這一新型模型。

官方音頻/視頻（語言）理解能力:

引入了官方改進的音頻（語言）理解能力，這意味著Gemini 1.5 Pro能夠更精確地解析和理解音頻輸入，為開發(fā)者提供更豐富的語言識別和處理工具。

新的file API:

新增的file API使得文件大小不再成為限制，使開發(fā)者能夠更高效地處理應用中的大文件傳輸，視頻和音頻文件的處理。

JSON解析:

JSON能力升級，包括多套綜合的JSON解析器架構，極大地提高了數(shù)據(jù)解析的精度和性能。

功能和接口:

改進了功能和接口調用，開發(fā)者可以選擇不同的接口實現(xiàn)功能調試，增強了系統(tǒng)接口的靈活性和適用性。

新的文本嵌入模型:

推出了性能優(yōu)越的最新一代文本嵌入模型（text-embedding-004），在MTEB基準測試中顯示出比前幾代模型更優(yōu)越的綜合性能，為文本分析和語義理解提供了強大的支持。

更廣泛的輸入格式支持:

Gemini 1.5 Pro擴展了對不同輸入格式的支持，包括音頻和視頻，并計劃很快支持圖片的內容和語言（語言）跨模態(tài)轉換的API交互，為開發(fā)者提供更多元化的應用可能。

這些更新不僅展示了Google對AI技術不斷創(chuàng)新的承諾，也為開發(fā)者提供了更多工具和資源，以便更好地構建和優(yōu)化他們的應用程序和服務。

如何使用Gemini 1.5 Pro？

創(chuàng)建API密鑰:

在Google AI Studio創(chuàng)建或申請測試的API密鑰，開始構建。

查看和使用擴展的音頻/視頻（語言）能力:

在Gemini API和Google AI Studio中查看擴展的音頻和視頻（語言）理解能力。

支持通過上傳到Google AI Studio的視頻和音頻自動翻譯的音頻輸入，API交互的潛力巨大。

配置API調用:

在Google AI Studio的Gemini API中，通過交互式的分析與管理控制臺創(chuàng)建、定義角色、格式、時間和規(guī)則，以便于理解不同的輸入格式和行為。

JSON解析:

查看和使用改進的JSON解析功能和新的文本嵌入模型，使你可以更靈活地處理大文本數(shù)據(jù)和結構化的JSON響應。你可以使用cURL或Python SDK支持的交互功能。

import requests

url = "https://gemini.api.google.com/v1/json-parser"

headers = {

"Authorization": "Bearer YOUR_API_KEY",

"Content-Type": "application/json"

}

payload = {

"json_input": {"example_key": "example_value"}

}

response = requests.post(url, headers=headers, json=payload)

print(response.json())

跨模態(tài)轉換的使用:

現(xiàn)在可以與Gemini API互動，將音頻、視頻和文本，甚至圖片進行交互，功能適用范圍大大擴展。

申請Gemini 1.5 Pro API步驟

訪問Google AI Studio:

打開瀏覽器，訪問Google AI Studio。

創(chuàng)建賬號或登錄:

使用Google賬號登錄，若沒有賬號，請先注冊。

申請API密鑰:

在主頁上選擇“創(chuàng)建項目”。

輸入項目名稱并選擇相關設置。

在項目設置中選擇“API與服務”，然后選擇“創(chuàng)建API密鑰”。

預充值

輸入預充值金額，最低為5美元。

Gemini API支付覺得復雜的小伙伴可以參考：

國內直連通過中轉平臺快速獲取Gemini API KEY 密鑰，以 uiuihao.com 平臺為例，申請并使用Gemini API密鑰比較友好，可以快速主力開發(fā)者更好的節(jié)省折騰申請Gemini API KEY 密鑰的時間。

配置和測試API:

在API控制臺中配置所需的API服務。

使用提供的API密鑰在開發(fā)環(huán)境中進行測試和開發(fā)。

Gemini 1.5 Pro帶來了顯著的改進和新功能，為開發(fā)者提供了強大的工具和更大的靈活性，幫助他們在全球范圍內更高效地開發(fā)和優(yōu)化應用程序。通過詳細的API調用和配置步驟，開發(fā)者可以輕松上手并充分利用這些新特性。


審核編輯 黃宇