面對互聯網時代海量信息的存儲和管理,澤云科技將國際化技術研發與本地化市場支持相結合,憑借在存儲領域多年的研發經驗和技術積累,推出了ZS全系列存儲產品,包括視頻監控存儲、通用數據存儲、集群存儲以及私有云存儲。 澤云科技對傳統RAID算法進行優化,開發了業內領先的RQR技術,大幅縮短陣列重建時間,增加了系統對磁盤故障的容忍度;并且開發出新興的集群高可用存儲、SSD優化等業界科技前沿的存儲技術。
澤云科技在數據中心、云存儲、大數據、監控存儲等領域具備獨特的解決方案,廣泛應用于政府、醫療衛生、教育科研、廣播電視、能源電力、交通運輸等各行各業。以下是筆者對深圳澤云科技系統工程師明溪源的采訪實錄。
深圳澤云科技系統工程師 明溪源
CSDN:能否介紹一下你及澤云科技,技術特點及團隊結構?
澤云科技:
a.我是澤云科技的一名系統工程師,主要負責存儲系統運維工作。
b.澤云科技專注研發新一代高性能存儲系統,提供服務器存儲應用解決方案,澤云科技存儲在2014年第一季度取得突破性進展,其中視頻監控存儲性能全國第一。
c.澤云科技的技術特點是對視頻監控存儲系統的深度開發,我們有業界特有的視頻監控文件系統VFS,它可以大幅度提升視頻監控存儲系統的性能。
d.澤云科技的的研發人員均出自知名存儲廠商或者國內外著名IT企業,擁有強大的研發實力;核心銷售人員具有多年的存儲產品以及視頻監控行業市場經驗。
CSDN:與業界其他類似產品相比,澤云科技的ZS全系列存儲產品的特點、優勢表現在哪些方面?
澤云科技:
1. 視頻監控文件系統VFS:增加硬盤的壽命,大量的隨機寫變成順序寫,減少磁頭的尋道。單臺設備支持更多接入視頻路數,最高達3200Mbps,行業最高。
2. 秒級重建技術RQR:國內首創秒級重建技術。當硬盤讀寫出現壞道錯誤時,能迅速修復,支持多塊磁盤同時發生壞塊。支持監控級硬盤。
3. VRAID技術:RAID5中多塊硬盤損壞,數據仍能讀出,目前行業內僅有極少數廠家有此項技術。
4. 磁盤遷移:可避免由于磁盤被錯誤插拔而導致的數據丟失。主機系統發生異常而需要更換系統盤時 數據和陣列配置不丟失。
5. 局部重建:重建數據減少。磁盤被人為誤拔出后1分鐘之內插回系統,或者磁盤出現閃斷的時候,陣列不需要進行全盤重建,只需要重建磁盤不在位時刻起,修改過的數據即可。
6. MetroUI:圖形界面集中圖形化管理,支持一鍵式快速配置以及多平臺登錄管理。操作簡單,響應快捷流暢,支持一鍵配置和一鍵維護。
CSDN:對于存儲系統,主要瓶頸就是讀寫速度,尤其是大數據時代,澤云在這方面有什么獨特之處?
澤云科技:對于存儲系統讀寫問題,澤云科技VFS文件系統對讀操作進行了優化。在讀方面,視頻監控數據寫入時,硬盤幾乎沒有讀操作;在寫方面,VFS將大量隨機寫變為順序寫,減少磁頭尋道,同時利用條帶刷機制控制硬盤的寫入頻率,在大幅度提升系統性能的同時保證系統的穩定性。
CSDN:你們的主要客戶有哪些?客戶部署你們的存儲產品,有哪些好處?
澤云科技:澤云科技的主要客戶是視頻監控系統集成商與工程商,部署澤云科技存儲產品,主要的好處有如下四方面:
第一,在業界具有競爭力的價格
第二,技術優勢,如VFS文件系統以及秒級重建,可以讓客戶在投標中更為主動
第三,開放的API,澤云愿意與客戶進行深度合作,取長補短,共同研發出更具有競爭力的產品
第四,專業的售前以及售后服務,包括項目開局、現場指導以及原廠的后期維護
CSDN:有沒有一些應用案例和大家分享一下?
澤云科技:澤云科技目前正在與某安防行業前五的廠商進行合作,通過雙方的對接開發,對方的視頻監控轉發服務與存儲服務模塊成功合入澤云科技存儲產品中,配合VFS使用。目前這款產品已經通過公安部的認證檢測。
CSDN:能否詳細給我們談談澤云科技RQR技術?其在企業私有云存儲方面有什么優勢?
澤云科技:RQR(Raid Quick Repair)技術的核心是為了解決視頻監控存儲中硬盤故障和RAID重建的問題。對硬盤及RAID算法的優化,是一個廠家的核心技術所在,據IDC權威數據,存儲系統的硬件故障90%以上是由硬盤故障引起。
故障硬盤中,只有12%是完全的物理損壞,其余88%是硬盤系統的軟件錯誤告警(實際可能是邏輯損壞或者某個壞道損壞),只要通過軟件方式進行修復和補償,仍然屬于可用硬盤。但對于這88%的告警,傳統存儲系統會產生告警,并將“壞盤”從RAID組踢出,整個RAID組進入全盤重建。傳統RAID組進行整盤重建的時間是比較長的,如下圖統計數據顯示:
從上圖可以看出,1TB的數據,無業務壓力情況下,重建時間要20小時以上,如果采用4TB硬盤,重建時間需要80小時,超過3天時間。對一個RAID而言,重建時間越長,風險越大,因為在RAID重建時,會占用大量的計算資源,同時極大降低RAID組的讀寫性能(會產生嚴重的數據丟包)。如果在重建過程中,有新的硬盤故障產生,整個RAID組都會崩潰。在此情況下,傳統存儲技術面臨一個兩難命題:硬盤故障后必須進行數據重建,降低數據丟失的風險;但由于重建時間過長,且嚴重影響性能,又對數據安全帶來新的風險,針對這個問題,RQR技術提供了解決方案:
如下圖所示:將硬盤以條塊為單位進行細分,當某塊硬盤出現條塊損壞時,RQR算法會立即將條帶的數據遷移到其他條帶,同時并對條帶進行修復,如果是邏輯損壞,則修復后,釋放空間,繼續使用;如果是物理損壞,則將損壞的條帶屏蔽。整個重建修復及屏蔽過程,都在10s內完成。
RQR技術,在企業私有云方面,將為客戶帶來以下價值:
1、避免RAID進入長時間的重建中,保證系統的性能穩定和存儲數據的安全性,當陣列重建時,再次出現掉盤現象,陣列將損壞;
2、能夠識別硬盤是物理損壞還是邏輯損壞,能夠對邏輯損壞或者微小的物理損壞進行修復,減少90%以上的硬盤告警率,降低由于硬盤告警帶來的維護頻次,從而降低維護成本,降低由硬盤更換維護本身帶來的系統風險。
3、RQR容忍硬盤的條帶及壞道故障,能夠提供硬盤的有效利用時間,節約硬盤投入成本;傳統系統,只要有告警,就要更換硬盤。
CSDN:澤云科技下一步有什么計劃,方便透露嗎?
澤云科技:澤云科技下一步的計劃是為客戶提供全套的視頻監控系統解決方案。
CSDN:能談談大數據時代的商業存儲嗎?
澤云科技:研究表明,大數據處理的數據中,超過80%的數據都為非結構化數據,而非結構化數據,主要就是指不能存儲在數據庫中,而需要存放在文件系統中的數據,主要包括各類文檔、圖片以及視頻等數據信息,由于澤云科技主要的研發方向在視頻監控存儲領域,那么我主要談談大數據中的視頻數據所需要的商業存儲。目前,視頻監控安防行業正在發生巨大的變化,在大數據時代,這個變化的趨勢就是高清化、智能化,那么這就對存儲系統帶來兩個問題,第一,對于高清化,視頻監控存儲系統的容量十分關鍵,而目前市面上的4T硬盤已經慢慢開始普及,那么作為存儲廠商,需要解決大容量硬盤與磁盤陣列之間的兼容問題、優化問題;第二,對于大數據時代的智能化,視頻數據將具有智能分析功能,具體包含車牌識別、人臉識別、視頻診斷、視頻壓縮等功能,而這對數據存儲的要求也將有重大的變革,已經不僅僅是讀寫速度的問題,還包含檢驗信息記錄、文件系統設計等多方面問題。
上一篇 3.4 命令模式(5.2)