全自研青云科技推出非結(jié)構(gòu)化數(shù)據(jù)統(tǒng)一存儲平臺QingStor U10000

2022-05-25 08:35:38來源：TechWeb.com.cn 關(guān)鍵詞：存儲設(shè)備閱讀量：23488

導(dǎo)讀：青云科技產(chǎn)品技術(shù)解決方案總監(jiān)張忠華介紹，QingStor U10000廣泛適用于容器存儲、大數(shù)據(jù)分析、PACS(醫(yī)療影像系統(tǒng))、高精度地圖、多媒體數(shù)據(jù)處理與存儲、冷數(shù)據(jù)備份和歸檔等應(yīng)用場景，并已經(jīng)在互聯(lián)網(wǎng)體檢、智能駕駛、智能工廠的IoT場景和多元化的超算場景成功應(yīng)用。

　　5月24日消息，僅一輛自動駕駛汽車每一天產(chǎn)生的數(shù)據(jù)量就可達數(shù)TB甚至數(shù)十TB。隨著自動駕駛、物聯(lián)網(wǎng)、人工智能、AR、5G等技術(shù)更深入應(yīng)用于生產(chǎn)生活，其帶來的文本、圖形、圖像、音頻、視頻等非結(jié)構(gòu)化數(shù)據(jù)為主的信息數(shù)據(jù)量急劇增加。

　　據(jù)IDC預(yù)測，到2025 年，全球產(chǎn)生的數(shù)據(jù)量將達到175ZB，其中超過80%的數(shù)據(jù)都會是處理難度較大的非結(jié)構(gòu)化數(shù)據(jù)。

　　當前，對巨量且仍不斷增長的非結(jié)構(gòu)化數(shù)據(jù)進行高效存儲、管理、分析，已經(jīng)成為企業(yè)數(shù)字化、智能化轉(zhuǎn)型時需要著重處理的環(huán)節(jié)。

　　近期，長期自研存儲技術(shù)的青云科技正式推出了非結(jié)構(gòu)化數(shù)據(jù)統(tǒng)一存儲平臺QingStor U10000，面向私有云場景，以期賦能企業(yè)加速數(shù)字化轉(zhuǎn)型。

　　青云科技存儲產(chǎn)品總監(jiān)馮相東介紹，和QingStor NeonSAN 主要面向結(jié)構(gòu)化數(shù)據(jù)高性能業(yè)務(wù)場景需求不同，QingStor U10000 主要面向非結(jié)構(gòu)化數(shù)據(jù)的場景，包括影像數(shù)據(jù)、音視頻數(shù)據(jù)、數(shù)據(jù)湖、大數(shù)據(jù)、物聯(lián)網(wǎng)等場景。青云希望通過專業(yè)的存儲分工能更好地服務(wù)專業(yè)的場景。

　　據(jù)悉，QingStor U10000產(chǎn)品設(shè)計初衷就是為了幫助客戶更好地實現(xiàn)海量數(shù)據(jù)的價值挖掘。QingStor U10000支持文件、對象和大數(shù)據(jù)三種非結(jié)構(gòu)化數(shù)據(jù)訪問協(xié)議互通及無損共享，容量方面支持橫向擴展，線性增加整體系統(tǒng)的容量和性能，且可獨立水平擴展元數(shù)據(jù)和存儲節(jié)點；安全性方面，實現(xiàn)元數(shù)據(jù)和業(yè)務(wù)存儲數(shù)據(jù)分離存儲，有效規(guī)避單點故障；在運維方面，提供資源管理、配置管理、告警、日志、監(jiān)控等一系列的統(tǒng)一管理平臺。

　　根據(jù)客戶需求，QingStor U10000支持軟件交付和存儲一體機兩種交付模式。

　　全自研

　　馮相東表示，青云存儲產(chǎn)品的一個重要特點就是，真正自研的中國存儲。和QingStor NeonSAN 一樣，QingStor U10000繼承與融合QingStor對象存儲及文件存儲，也是由青云科技存儲團隊自主設(shè)計，沒有繼承任何開源的架構(gòu)，不存在任何知識產(chǎn)權(quán)的風險。自主研發(fā)使得技術(shù)QingStor U10000百分百可控，不存在技術(shù)盲區(qū)，能更好支撐企業(yè)數(shù)字化轉(zhuǎn)型需求。

　　在信創(chuàng)領(lǐng)域，包括QingStor U10000在內(nèi)的青云各產(chǎn)品線兼容核心國產(chǎn)硬件平臺和操作系統(tǒng)平臺，比如鯤鵬、飛騰、海光等目前主流的國產(chǎn)硬件平臺，還有麒麟軟件、統(tǒng)信、openEuler等國產(chǎn)操作系統(tǒng)，青云已實現(xiàn)完整的生產(chǎn)化兼容。

　　“青云作為中國云計算公司，懷揣著中國存儲服務(wù)數(shù)字中國的愿景，希望通過自身的努力能消除企業(yè)對數(shù)據(jù)安全的顧慮，以真正自研的中國存儲服務(wù)于數(shù)字中國。”馮相東強調(diào)。

　　真多協(xié)議無損互通

　　QingStor U10000相比于青云早前推出的QingStor對象存儲和文件存儲產(chǎn)品，除了產(chǎn)品力的全面繼承，還以幾個方面做了明顯的能力提升，包括實現(xiàn)數(shù)據(jù)協(xié)議的互通，功能和性能的增強，整個算力平臺對接的強化等。

　　馮相東特別強調(diào)，QingStor U10000構(gòu)建了統(tǒng)一索引架構(gòu)，支持多協(xié)議無損互通，從而實現(xiàn)數(shù)據(jù)的訪問和流通的高效。

　　為什么要特別強調(diào)“協(xié)議互通可以讓數(shù)據(jù)分析更高效”，馮相東闡述道：“一份數(shù)據(jù)在一個完整的業(yè)務(wù)場景下可能會在多個環(huán)節(jié)有數(shù)據(jù)處理的需求，如果做不到協(xié)議互通，這個數(shù)據(jù)需要不停地Copy，比如在這個業(yè)務(wù)的存儲空間里先處理完，再Copy到另一個存儲空間，用另一種存儲協(xié)議做訪問，這樣會增加多種存儲間數(shù)據(jù)遷移的成本。”

　　也就是說，無論是基于對象接口存進來的數(shù)據(jù)、基于NFS/SMB存進來的數(shù)據(jù)，還是通過HDFS大數(shù)據(jù)專用協(xié)議存進來的數(shù)據(jù)，QingStor U10000都是基于統(tǒng)一的索引架構(gòu)提供這些數(shù)據(jù)的元數(shù)據(jù)管理。這種架構(gòu)為應(yīng)用帶來好處就是：不需要通過格式轉(zhuǎn)化就能讓對象存儲存進來的數(shù)據(jù)，通過NFS訪問，或者NFS存進來的數(shù)據(jù)可以通過S3訪問。存儲和讀取數(shù)據(jù)之間不需要經(jīng)過格式轉(zhuǎn)化，這樣就不會存在性能和語義的損失。

　　以自動駕駛場景為例，馮相東介紹道，“通常情況下，一輛路測車每天可能會產(chǎn)生幾TB或者幾十TB的數(shù)據(jù)，有幾十輛路測車，每天產(chǎn)生差不多1PB的數(shù)據(jù)，正常情況下，這1PB的數(shù)據(jù)需要通過四個環(huán)節(jié)的處理才能真正發(fā)揮其作用。第一個環(huán)節(jié)是數(shù)據(jù)的上傳和導(dǎo)入，通常會用到存儲里的S3和NFS的協(xié)議。第二個環(huán)節(jié)是數(shù)據(jù)預(yù)處理，基本上以HDFS這種大數(shù)據(jù)分析的框架為主。第三個環(huán)節(jié)是AI訓(xùn)練，以NFS協(xié)議為主。第四個環(huán)節(jié)還會涉及仿真測試，主要以NFS和SMB協(xié)議為主。通過自動駕駛完整數(shù)據(jù)鏈的處理環(huán)節(jié)可以看到，一份數(shù)據(jù)在不同的階段，需要通過不同的數(shù)據(jù)訪問協(xié)議對接不同的計算框架，只有協(xié)議互通才能讓數(shù)據(jù)分析更高效。”

　　市面上雖然也有在講協(xié)議互通的分布式存儲廠商，但大多是通過格式轉(zhuǎn)化的技術(shù)實現(xiàn)的，談不上真正的“多協(xié)議無損互通”，在底層來看，就是因為沒有統(tǒng)一的索引架構(gòu)。馮相東認為：“統(tǒng)一的索引架構(gòu)是QingStor U10000 在架構(gòu)層面非常明顯的一個優(yōu)勢。”

　　青云科技產(chǎn)品技術(shù)解決方案總監(jiān)張忠華介紹，QingStor U10000廣泛適用于容器存儲、大數(shù)據(jù)分析、PACS(醫(yī)療影像系統(tǒng))、高精度地圖、多媒體數(shù)據(jù)處理與存儲、冷數(shù)據(jù)備份和歸檔等應(yīng)用場景，并已經(jīng)在互聯(lián)網(wǎng)體檢、智能駕駛、智能工廠的IoT場景和多元化的超算場景成功應(yīng)用。例如，青云提供的存儲集群及算力資源，基本上解決了某智能駕駛科技公司的高精度地圖業(yè)務(wù)場景從采集、生產(chǎn)、訓(xùn)練整個生命周期的存儲和算力的需求。

　　原標題：全自研青云科技推出非結(jié)構(gòu)化數(shù)據(jù)統(tǒng)一存儲平臺QingStor U10000

上一篇：豐田汽車將于6月削減約10萬輛全球生產(chǎn)計劃

下一篇：蔚來將在上海嘉定建鋰電池實驗室及電芯試制線

我要評論

昵稱

匿名

文明上網(wǎng)，理性發(fā)言。（您還可以輸入200個字符)

表情

所有評論僅代表網(wǎng)友意見，與本站立場無關(guān)。

存儲漲價已成定局！閃迪美光先行、三星和SK海力士緊隨
據(jù)媒體報道，美光和閃迪等美國內(nèi)存制造商已決定在下個月開始漲價，其中閃迪將從4月1日起將NAND價格提高10%以上。作為全球排名第一和第二的NAND閃存廠商，有行業(yè)消息人士表示，這兩家也準備在下個月提高NAND價格。
存儲設(shè)備NAND價格
2025-03-12 14:14:37
工信部組織開展算力強基揭榜行動
工業(yè)和信息化部近日印發(fā)通知，組織開展算力強基揭榜行動。工業(yè)和信息化部將統(tǒng)籌利用各類資源對揭榜入圍、優(yōu)勝單位予以支持，推動優(yōu)秀成果示范應(yīng)用推廣。
算力數(shù)字經(jīng)濟存儲設(shè)備
2025-02-27 09:51:59
紫光發(fā)布一大波全新SSD：國產(chǎn)先進主控、閃存
西安紫光國芯UniIC宣布正式推出全新SSD產(chǎn)品，共有四大系列。這些SSD在規(guī)格上多種多樣，分別支持SATA 6Gbps、PCIe 3.0、PCIe 4.0，并有2.5英寸、M.2 2280/2242三種不同形態(tài)。
SSD產(chǎn)品存儲設(shè)備
2024-04-30 13:23:53
早報|百度終止收購YY；中國坐穩(wěn)全球第二企業(yè)級存儲市場座椅
2023年前三季度，中國企業(yè)級存儲市場同比下降0.8%，存儲銷售容量達到16.7EB，不過在全球份額已提升到19.2%，牢牢坐穩(wěn)全球第二企業(yè)級存儲市場這把座椅；1月1日，百度宣布通過行使合同權(quán)利，終止收購歡聚集團在國內(nèi)視頻娛樂直播業(yè)務(wù)......
存儲設(shè)備無人機
2024-01-03 10:09:45
存儲行業(yè)拐點來了：SSD等要漲價有廠商財報明確！
7月6日消息，對于存儲行業(yè)，拐點可能真的來了，至少有廠商已經(jīng)在財報中明確了。
存儲設(shè)備SSD
2023-07-06 10:01:53
這家廠商斬獲多個激光退火設(shè)備大訂單
日前，美國維易科精密儀器(Veeco Instruments)公司宣布，公司從一家全球先進的半導(dǎo)體存儲設(shè)備制造商那里獲得了多個激光尖峰退火(LSA)設(shè)備訂單。
半導(dǎo)體存儲設(shè)備存儲設(shè)備
2023-05-29 14:27:24

版權(quán)與免責聲明：

凡本站注明“來源：智能制造網(wǎng)”的所有作品，均為浙江興旺寶明通網(wǎng)絡(luò)有限公司-智能制造網(wǎng)合法擁有版權(quán)或有權(quán)使用的作品，未經(jīng)本站授權(quán)不得轉(zhuǎn)載、摘編或利用其它方式使用上述作品。已經(jīng)本網(wǎng)授權(quán)使用作品的，應(yīng)在授權(quán)范圍內(nèi)使用，并注明“來源：智能制造網(wǎng)”。違反上述聲明者，本站將追究其相關(guān)法律責任。

本站轉(zhuǎn)載并注明自其它來源（非智能制造網(wǎng)）的作品，目的在于傳遞更多信息，并不代表本站贊同其觀點或和對其真實性負責，不承擔此類作品侵權(quán)行為的直接責任及連帶責任。如其他媒體、平臺或個人從本站轉(zhuǎn)載時，必須保留本站注明的作品第一來源，并自負版權(quán)等法律責任。如擅自篡改為“稿件來源：智能制造網(wǎng)”，本站將依法追究責任。

鑒于本站稿件來源廣泛、數(shù)量較多，如涉及作品內(nèi)容、版權(quán)等問題，請與本站聯(lián)系并提供相關(guān)證明材料：聯(lián)系電話：0571-89719789；郵箱：1271141964@qq.com。