AWS黑科技，RedShift Spectrum，全表掃描 1000 PB 級別資料庫只需要 155 秒鐘，在 S3 上直接查詢

在今天於舊金山召開的AWS峰會上，公共雲基礎設施提供商亞馬遜網路服務公司（AWS）宣布推出Redshift Spectrum，這是AWS的Redshift託管數據倉庫服務的延伸版，能夠查詢駐留在傳統的AWS S3存儲服務裡面的數據。

UnitedStack有雲程輝朋友圈感嘆

Redshift Spectrum的推出將讓某些類型的數據查詢更加經濟實惠，原因是包括計算功能和存儲功能的Redshift是一種比較複雜、比較費錢的服務，它是專門為針對大量數據進行數字處理而設計的。

為了讓大家有一個直觀的了解，亞馬遜首席技術官沃納·沃格爾斯（Werner Vogels）舉了一個例子：使用Apache Hive開源數據查詢軟體對艾位元組（EB）數據執行查詢。這項任務需要五年的時間和1000個節點――也就是說，成本相當高昂。沃格爾斯表示，但是藉助Spectrum，只要花155秒和區區幾百美元。

AWS首席宣傳官傑夫·巴爾（Jeff Barr）在一篇博文中寫道：「如果你開始執行查詢，Redshift先對查詢進行拆分，生成一個查詢方案，盡量減少需要讀取的S3數據的數量，並充分利用面向列的格式以及按日期或另一個鍵劃分的數據。然後，Redshift向龐大的共享池請求Spectrum worker，並引導這些worker預測、過濾和整合S3數據。最後的處理在Redshift集群裡面加以執行，結果返回給你們用戶。」

他表示，Docomo、Time、Edmunds、Redfin和Yelp已經在使用AWS Redshift Spectrum。

競爭對手包括初創公司Snowflake的雲數據倉庫。微軟Azure和IBM的公共雲也提供數據倉庫服務。

AWS在2012年推出了Amazon Redshift。而S3本身的歷史可以追溯到2006年。

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！