技術(shù)
導(dǎo)讀:北京2023年3月27日 -- 亞馬遜云科技自2006年推出對(duì)象存儲(chǔ)服務(wù)Amazon Simple Storage Service (Amazon S3)至今,一直不斷根據(jù)客戶需求持續(xù)豐富Amazon S3的功能。目前,Amazon S3擁有超過 280 萬億個(gè)對(duì)象,平均每秒處理超過 1 億個(gè)請(qǐng)求。在Amazon S3 17周年之際,亞馬遜云科技宣布推出諸多新的服務(wù)及功能,包括Amazon S3 的開源文件客戶端Mountpoint for Amazon S3(內(nèi)測(cè)版),可輕松查找、訂閱和使用第三方數(shù)據(jù)文件的Amazon Data Exchange for Amazon S3,Amazon S3 Multi-Region Access Points支持跨多個(gè)亞馬遜云科技賬戶間復(fù)制數(shù)據(jù)集,以及Aliases for S3 Object Lambda Access Points自動(dòng)為客戶呈現(xiàn)不同的數(shù)據(jù)視圖等。
北京2023年3月27日 -- 亞馬遜云科技自2006年推出對(duì)象存儲(chǔ)服務(wù)Amazon Simple Storage Service (Amazon S3)至今,一直不斷根據(jù)客戶需求持續(xù)豐富Amazon S3的功能。目前,Amazon S3擁有超過 280 萬億個(gè)對(duì)象,平均每秒處理超過 1 億個(gè)請(qǐng)求。在Amazon S3 17周年之際,亞馬遜云科技宣布推出諸多新的服務(wù)及功能,包括Amazon S3 的開源文件客戶端Mountpoint for Amazon S3(內(nèi)測(cè)版),可輕松查找、訂閱和使用第三方數(shù)據(jù)文件的Amazon Data Exchange for Amazon S3,Amazon S3 Multi-Region Access Points支持跨多個(gè)亞馬遜云科技賬戶間復(fù)制數(shù)據(jù)集,以及Aliases for S3 Object Lambda Access Points自動(dòng)為客戶呈現(xiàn)不同的數(shù)據(jù)視圖等。
Amazon S3具有 99.999999999%(11 個(gè) 9)數(shù)據(jù)持久性,旨在為客戶提供具有高持久性的數(shù)據(jù)存儲(chǔ)。為了保護(hù)客戶數(shù)據(jù)的完整性,Amazon S3 每秒執(zhí)行超過 40億次校驗(yàn)和計(jì)算。多年來,亞馬遜云科技持續(xù)豐富Amazon S3的功能,例如推出一系列的存儲(chǔ)類,更經(jīng)濟(jì)、高效地存儲(chǔ)客戶的數(shù)據(jù)。每天,客戶平均從 S3 Glacier Flexible Retrieval 和 S3 Glacier Deep Archive 存儲(chǔ)類中恢復(fù)超過1PB數(shù)據(jù)。自推出 Amazon S3 Intelligent-Tiering 以來,客戶使用該功能已經(jīng)節(jié)省了 10 億美元。2015 年,亞馬遜云科技增加了跨區(qū)域復(fù)制數(shù)據(jù)的可能性。每周,Amazon S3 Replication都會(huì)移動(dòng)超過100PB的數(shù)據(jù)。Amazon S3是數(shù)十萬個(gè)數(shù)據(jù)湖的核心。同時(shí)也成為無服務(wù)器應(yīng)用程序的關(guān)鍵組成,Amazon S3 每天向無服務(wù)器應(yīng)用程序發(fā)送超過1,250億個(gè)事件通知。
亞馬遜云科技持續(xù)基于客戶需求進(jìn)行創(chuàng)新,在Amazon S3 17周年之際,推出諸多Amazon S3相關(guān)新的服務(wù)及功能,幫助客戶更方便的存儲(chǔ)、查詢、復(fù)制數(shù)據(jù)。
Mountpoint for Amazon S3(內(nèi)測(cè)版):Amazon S3 的開源文件客戶端
Mountpoint for Amazon S3 是 Amazon S3 的開源文件客戶端,客戶可以將其安裝在計(jì)算實(shí)例上。它將本地文件存儲(chǔ) API 調(diào)用轉(zhuǎn)換為對(duì) Amazon S3 中對(duì)象的 REST API 調(diào)用??蛻羰褂?Mountpoint for Amazon S3 時(shí),使用文件 API 訪問對(duì)象的數(shù)據(jù)湖應(yīng)用程序可以實(shí)現(xiàn)較高的單實(shí)例傳輸速率,從而節(jié)省計(jì)算成本。
客戶可以通過在計(jì)算實(shí)例的本地掛載點(diǎn)安裝 Amazon S3 存儲(chǔ)桶開始使用 Mountpoint for Amazon S3。掛載后,應(yīng)用程序?qū)?duì)象讀取為本地可用的文件。Mountpoint for Amazon S3 支持對(duì)現(xiàn)有 S3 對(duì)象執(zhí)行順序和隨機(jī)讀取操作。它可以作為內(nèi)測(cè)版下載用于 Linux 操作系統(tǒng),尚不適用于生產(chǎn)工作負(fù)載。亞馬遜云科技希望能收集更多客戶反饋,進(jìn)一步改進(jìn)設(shè)計(jì)和實(shí)施。欲開始使用,客戶可訪問 Mountpoint for Amazon S3 GitHub 存儲(chǔ)庫,閱讀技術(shù)發(fā)布博客。
推出Amazon Data Exchange for Amazon S3
Amazon Data Exchange for Amazon S3 使客戶能夠輕松查找、訂閱和使用第三方數(shù)據(jù)文件,從而更快地獲得見解、優(yōu)化存儲(chǔ)成本、簡化數(shù)據(jù)許可管理等。Data Exchange 訂閱用戶可以直接使用數(shù)據(jù)提供商的 Amazon S3 存儲(chǔ)桶中的文件,通過亞馬遜云科技的服務(wù)進(jìn)行分析,無需創(chuàng)建或管理其賬戶的副本。數(shù)據(jù)提供商可以許可對(duì)其 Amazon S3 存儲(chǔ)桶中托管的數(shù)據(jù)進(jìn)行就地訪問。要詳細(xì)了解數(shù)據(jù)提供商如何簡化和擴(kuò)展對(duì)多個(gè)數(shù)據(jù)訂閱用戶的訪問管理,可以閱讀此博客。
Amazon S3 Multi-Region Access Points多區(qū)域接入點(diǎn)現(xiàn)已支持跨多個(gè)亞馬遜云科技賬戶復(fù)制數(shù)據(jù)集
亞馬遜云科技于2021年9月推出了Amazon S3多區(qū)域接入點(diǎn),并于2022年11月增加了故障切換控制。Amazon S3 多區(qū)域接入點(diǎn)現(xiàn)在支持在多個(gè)亞馬遜云科技賬戶之間復(fù)制數(shù)據(jù)集。該功能簡化了跨區(qū)域或者跨賬號(hào)的對(duì)象存儲(chǔ)訪問,無需在應(yīng)用程序中開發(fā)復(fù)雜的請(qǐng)求路由邏輯。它們?yōu)榭蛻舻目缍鄥^(qū)域應(yīng)用程序提供單一的全局接入點(diǎn),并根據(jù)客戶定義的策略動(dòng)態(tài)路由 S3 請(qǐng)求。這可以幫助客戶輕松實(shí)現(xiàn)多區(qū)域韌性、基于延遲的路由和故障切換,即使客戶的數(shù)據(jù)存儲(chǔ)在多個(gè)亞馬遜云科技賬戶中也是如此。客戶可以在 Amazon S3 常見問題中了解相關(guān)更多信息。
將Aliases for S3 Object Lambda Access Points作為Amazon CloudFront分發(fā)源
亞馬遜云科技在2021年3月推出Amazon S3 Object Lambda ,允許客戶將自己的代碼添加到 S3 GET、HEAD 和 LIST API 請(qǐng)求中,以便在數(shù)據(jù)返回到應(yīng)用程序時(shí)對(duì)其進(jìn)行修改。Aliases for S3 Object Lambda Access Points的推出讓任何需要 S3 存儲(chǔ)桶名稱的應(yīng)用程序都可以根據(jù)請(qǐng)求者輕松呈現(xiàn)不同的數(shù)據(jù)視圖?,F(xiàn)在,客戶可以使用 Aliases for S3 Object Lambda Access Points作為 Amazon CloudFront 的分發(fā)源,以修改所請(qǐng)求的數(shù)據(jù)。例如,客戶可以根據(jù)用戶訪問時(shí)使用的設(shè)備(例如臺(tái)式機(jī)或智能手機(jī))動(dòng)態(tài)轉(zhuǎn)換圖像。欲了解更多,可閱讀此博客文章,包含更多詳細(xì)信息和代碼示例。