1. 創(chuàng)業(yè)頭條
  2. 前沿領(lǐng)域
  3. 大數(shù)據(jù)
  4. 正文

杉巖MOS對(duì)象存儲(chǔ)雙引擎,加速智能應(yīng)用的助推器

 2020-09-14 16:51  來源:互聯(lián)網(wǎng)  我來投稿 撤稿糾錯(cuò)

  域名預(yù)訂/競(jìng)價(jià),好“米”不錯(cuò)過

大數(shù)據(jù)分析手段的廣泛應(yīng)用,助推數(shù)據(jù)快速增長,存儲(chǔ)形態(tài)相繼經(jīng)歷了從傳統(tǒng)存儲(chǔ)到大數(shù)據(jù)存儲(chǔ)1.0再到大數(shù)據(jù)存儲(chǔ)2.0的變遷,以應(yīng)對(duì)海量數(shù)據(jù)的挑戰(zhàn)。1.0時(shí)代解決了海量存儲(chǔ)的問題,通過分布式架構(gòu)和軟件定義,讓數(shù)據(jù)能夠存得下。2.0時(shí)代解決了便捷管理的問題,通過多協(xié)議訪問、生命周期管理、異構(gòu)存儲(chǔ)管理、混合云管理,讓企業(yè)管好數(shù)據(jù)。

存儲(chǔ)引擎 + 智能引擎:更強(qiáng)大的MOS對(duì)象存儲(chǔ)

企業(yè)耗費(fèi)資本存儲(chǔ)數(shù)據(jù),最終是為了利用數(shù)據(jù)價(jià)值創(chuàng)造經(jīng)濟(jì)效益。存儲(chǔ)倘若仍是一個(gè)“傻盒子”,只能存儲(chǔ)卻不能感知數(shù)據(jù),是無法滿足企業(yè)真正需要的。企業(yè)對(duì)數(shù)據(jù)價(jià)值利用的強(qiáng)烈訴求,驅(qū)動(dòng)大數(shù)據(jù)存儲(chǔ)步入3.0時(shí)代。這要求存儲(chǔ)足夠智能,可基于數(shù)據(jù)感知實(shí)現(xiàn)數(shù)據(jù)處理和智能調(diào)度,基于應(yīng)用感知實(shí)現(xiàn)訪問加速,通過存儲(chǔ)自身的智能運(yùn)維減少人力依賴。如此,才能幫助企業(yè)用好數(shù)據(jù),以智能存儲(chǔ)為數(shù)字底座,構(gòu)建面向未來的IT基礎(chǔ)架構(gòu)。而杉巖MOS海量對(duì)象存儲(chǔ)的智能數(shù)據(jù)處理引擎,正是承載了這一使命。

圖1.海量數(shù)據(jù)增長催生存儲(chǔ)形態(tài)變遷

從杉巖的產(chǎn)品戰(zhàn)略來看,海量存儲(chǔ)核心引擎和智能數(shù)據(jù)處理引擎,支撐起了更為強(qiáng)大的MOS對(duì)象存儲(chǔ)。前者依托分布式架構(gòu)、多樣化管理策略以及全面的企業(yè)級(jí)特性,滿足企業(yè)存儲(chǔ)和管理海量數(shù)據(jù)的需求;后者依托開放式平臺(tái)和強(qiáng)大的數(shù)據(jù)處理能力,并基于數(shù)據(jù)感知實(shí)現(xiàn)智能調(diào)度,滿足智能處理數(shù)據(jù)、挖掘數(shù)據(jù)價(jià)值的需求。雙引擎驅(qū)動(dòng),讓MOS對(duì)象存儲(chǔ)集海量數(shù)據(jù)存儲(chǔ)、管理、價(jià)值挖掘于一體,無疑是企業(yè)應(yīng)對(duì)大數(shù)據(jù)挑戰(zhàn)的極佳選擇。

圖2:MOS雙引擎驅(qū)動(dòng)智能應(yīng)用

智能數(shù)據(jù)處理引擎:加速智能應(yīng)用,釋放數(shù)據(jù)價(jià)值

數(shù)字化浪潮來襲,大數(shù)據(jù)、人工智能的發(fā)展超出預(yù)期,在各行業(yè)的落地應(yīng)用也逐漸鋪開,企業(yè)利用AI挖掘數(shù)據(jù)價(jià)值的需求是不言而喻的。在傳統(tǒng)模式下,對(duì)數(shù)據(jù)庫文件等結(jié)構(gòu)化數(shù)據(jù)進(jìn)行價(jià)值挖掘相對(duì)容易,但是對(duì)于圖像、影音等非結(jié)構(gòu)化數(shù)據(jù)的價(jià)值挖掘是比較困難的。

MOS的智能數(shù)據(jù)處理引擎,正是為此而生。通過對(duì)非結(jié)構(gòu)化數(shù)據(jù)的多維度標(biāo)簽化和結(jié)構(gòu)化處理,讓有價(jià)值的數(shù)據(jù)更容易被發(fā)現(xiàn),實(shí)現(xiàn)更高效的價(jià)值挖掘。有了智能數(shù)據(jù)處理引擎,數(shù)據(jù)處理能力下沉到存儲(chǔ)內(nèi)部,通過與海量存儲(chǔ)核心引擎高效聯(lián)動(dòng),并基于數(shù)據(jù)感知實(shí)現(xiàn)智能調(diào)度,極大地簡(jiǎn)化業(yè)務(wù)流程,提升業(yè)務(wù)效率。

圖3.智能數(shù)據(jù)處理引擎工作流程

目前,智能數(shù)據(jù)處理引擎幫助許多行業(yè)客戶實(shí)現(xiàn)了數(shù)據(jù)的高效價(jià)值挖掘,提升收益。

智能管理10億文件,幫助廣發(fā)證券打造內(nèi)容管理平臺(tái)

廣發(fā)證券原來的檔案管理往往需要業(yè)務(wù)員人眼篩查,耗時(shí)長、易出錯(cuò),檔案查詢不夠精準(zhǔn)。采用智能數(shù)據(jù)處理引擎后,當(dāng)客戶電子檔案存入時(shí),通過身份證識(shí)別插件,將客戶的姓名、出生年月、身份證號(hào)等信息提取出來并打上標(biāo)簽,后續(xù)營業(yè)廳工作人員可直接通過檔案檢索界面,根據(jù)標(biāo)簽信息進(jìn)行檔案的精細(xì)化檢索,也可以自定義檢索模板,方便高效。此外,為滿足合規(guī)要求,需將合同文件(Word文檔)轉(zhuǎn)為PDF文檔并添加水印后再存檔。該項(xiàng)目中對(duì)相關(guān)文件設(shè)定生命周期策略,自動(dòng)調(diào)用智能數(shù)據(jù)處理引擎的文檔格式轉(zhuǎn)換(Word轉(zhuǎn)PDF)和添加水印功能,處理后的文件自動(dòng)轉(zhuǎn)存至目標(biāo)桶,整個(gè)過程基于生命周期策略自動(dòng)觸發(fā),無需人工介入,極大提升了業(yè)務(wù)效率。

圖4.智能數(shù)據(jù)處理引擎對(duì)證件照片和文檔的加工處理

智能存儲(chǔ)助力質(zhì)檢效率提升,幫助UTAC節(jié)省20%存儲(chǔ)空間

UTAC是全球十大芯片封測(cè)廠商之一。在其芯片封測(cè)產(chǎn)線上,通過工業(yè)攝像機(jī)拍攝芯片的高清圖像(BMP格式,單張30MB以上)進(jìn)行智能質(zhì)檢,每天數(shù)據(jù)增量80TB,每月文件增量1.3億個(gè),存儲(chǔ)3-4個(gè)月,預(yù)計(jì)需要PB級(jí)存儲(chǔ)空間。進(jìn)一步交流得知,部分圖片僅前三天需要高清格式,以便于人工復(fù)核,三天之后僅作歸檔和檢索,或者直接刪除。利用智能數(shù)據(jù)處理引擎將BMP圖片轉(zhuǎn)為JPG圖片(單張10MB以內(nèi)),并基于圖片標(biāo)簽實(shí)現(xiàn)生命周期自動(dòng)化管理(如圖片到期自動(dòng)刪除,轉(zhuǎn)碼后歸檔到冷池)。該方案幫助用戶節(jié)省20%存儲(chǔ)空間,且數(shù)據(jù)處理效率相比傳統(tǒng)方案提升了30%,總體成本降低了60%以上。

圖5.智能數(shù)據(jù)處理引擎對(duì)圖像文件的自動(dòng)化處理

智能數(shù)據(jù)處理引擎在機(jī)器學(xué)習(xí)場(chǎng)景的應(yīng)用

機(jī)器學(xué)習(xí)場(chǎng)景下,訓(xùn)練素材以圖片為主。如果原始素材是視頻文件,可以通過MOS智能數(shù)據(jù)處理引擎,在存儲(chǔ)內(nèi)部對(duì)視頻進(jìn)行抽幀,抽幀后產(chǎn)生的圖片用于訓(xùn)練推理。如果有特殊需要,可以對(duì)抽幀圖片進(jìn)行二次處理或自定義標(biāo)簽,再用于推理訓(xùn)練,顯著提升訓(xùn)練效率。

開放生態(tài),打造強(qiáng)大的智能處理平臺(tái)

杉巖MOS智能數(shù)據(jù)處理引擎就像應(yīng)用市場(chǎng)一樣,是一個(gè)開放式平臺(tái),可以集成豐富的第三方插件,比如合合信息的身份證識(shí)別、票據(jù)識(shí)別等插件,微模式公司的人臉識(shí)別、車輛識(shí)別等插件,用戶可以按需添加插件,擴(kuò)展數(shù)據(jù)處理能力。

目前,MOS智能數(shù)據(jù)處理引擎支持圖片轉(zhuǎn)碼、圖片裁剪、添加水印、身份證識(shí)別、人臉識(shí)別、車牌識(shí)別、票據(jù)識(shí)別、文檔識(shí)別、語音識(shí)別、內(nèi)容提取、文件格式轉(zhuǎn)換等20余項(xiàng)處理功能,為用戶提供更強(qiáng)大的智能處理平臺(tái),滿足不同場(chǎng)景的數(shù)據(jù)處理需求。

智能數(shù)據(jù)處理引擎的使用有多簡(jiǎn)單?請(qǐng)戳視頻,一睹為快

智能數(shù)據(jù)處理引擎是杉巖數(shù)據(jù)面對(duì)大數(shù)據(jù)存儲(chǔ)發(fā)展趨勢(shì)的應(yīng)對(duì)方案,在海量存儲(chǔ)和便捷管理的基礎(chǔ)上,讓存儲(chǔ)“理解”數(shù)據(jù),基于數(shù)據(jù)感知實(shí)現(xiàn)數(shù)據(jù)預(yù)處理和智能調(diào)度,簡(jiǎn)化業(yè)務(wù)流程;基于應(yīng)用感知實(shí)現(xiàn)訪問加速,快速響應(yīng)業(yè)務(wù)需求;依托智能運(yùn)維減少人力依賴,打造更強(qiáng)大的智能數(shù)字底座,構(gòu)建面向未來的智能IT基礎(chǔ)架構(gòu)。

申請(qǐng)創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!

相關(guān)文章