超融合架構
分布式存儲
統一存儲
開放式存儲平臺
自主可控
3D動畫云渲染解決方案
方案背景
3D動畫渲染是一種特殊的影視制作方式,通常包含了概念設計、故事板、3D模型、貼圖材質、燈光、特效、分層渲染、合成等多個制作環節。電視臺通常也會針對部分精品節目進行特效制作與包裝渲染。
渲染過程中通常包含大量的計算業務,這些計算業務通過訪問大量紋理素材文件進行計算渲染,輸出成品幀圖片,最終合成成品影片。動畫渲染主要是由前端渲染集群節點對大量動畫圖片進行加工處理,對存儲系統的小文件處理能力提出了更高的要求,包括滿足大量渲染集群節點的并發訪問、長期穩定運行、具備良好的彈性。鯨鯊動畫云渲染解決方案采用多功能集群調度+高并發集群存儲作為方案基礎架構,為用戶提供高并發,高效率,優便捷的云解決方案。
傳統渲染和鯨鯊云渲染
傳統渲染
利用以太網技術、服務器、操作系統構建成類超級計算機,達到或者接近超級計算機的能力,由人工干預每一個動畫渲染任務,效率低下、可拓展性差。不能滿足中大型、高要求動畫的后期制作。目前已處于行業淘汰趨勢。
鯨鯊云渲染
鯨鯊云渲染模式與常規的云計算類似,即將3D程序放在遠程的服務器中渲染,用戶終端通過Web軟件并借助高速互聯網接入訪問資源,指令從用戶終端中發出,服務器根據指令執行對應的渲染任務,而渲染結果畫面則被傳送回用戶終端中加以顯示,服務器自動計費、計時和問題干預和告警。無需人工干預即完成大型動畫的渲染或高清效果圖的渲染工作,還可根據用戶需求接入公有云。
鯨鯊云渲染平臺

鯨鯊云渲染系統功能:
支持渲染素材的自助上傳、渲染過程的自助預覽及渲染結果的自助下載,提高操作便捷性渲染資源池采用成熟可靠、性能卓越的分布式文件系統和渲染資源調度引擎實現了資源池化。
采用松耦合系統架構,各模塊互不依賴,靈活的架構支持規模化的平滑擴展;快速彈性部署,支持低起點建設,具備大規模可擴展能力,可同時支持超過4000個節點共同渲染。
鯨鯊云渲染系統價值:
提升遠程管理和操作的便捷性
人性化功能和中文支持,操作體驗更完美
促進內外部人力資源協作共享
利用移動渲染外包平臺提供高質量的快速渲染服務
構建一體化資源協作平臺,調劑資源余缺,促進資源能力均衡
云存儲高并發集群系統
動畫渲染業務系統對存儲的需求主要有以下幾點:
支撐海量小文件頻繁讀寫
熱點數據高效訪問
跨平臺兼容性
鯨鯊云存儲系統特針對動畫渲染高并發IO環境進行了500-1000節點并發IO測試渲染,發現在動畫渲染過程中幾乎97%的文件是K量級小文件且渲染過程中頻繁訪問,一般的存儲在這樣的訪問壓力下IO的能力很差。為解決該問題,鯨鯊的研發人員經過長時間測試研究編寫了一套鯨鯊自有的專利存儲系統,針對高并發小文件頻繁讀寫的并行集群系統,另外通過軟硬件結合解決了熱點數據高效訪問,俗稱熱數據處理。并且支持兼容不同操作系統跨平臺訪問。
鯨鯊云存儲系統特點:
全對稱分布式架構
統一命名空間
獨有的彈性算法
擴展性及高性能
高可用性
數據安全性
標準的協議,廣泛的適用性
良好的易用性
先進的全分布式集群存儲架構,節點對等,無元數據架構設計,具備快速、安全實現容量性能隨節點數量線性增長等特點,通過創新的系統構架,可以給用戶提供顯著高效的海量存儲系統性能和擴展能力。
DOFS將多個節點的硬盤資源聚集成一個單一的虛擬存儲池,對外提供全局統一命名空間,消除多個命名空間帶來的數據孤島,對上層用戶和應用屏蔽了底層的物理硬件,同時通過任意節點都可以對同一存儲空間進行訪問。存儲資源可以根據需要在虛擬存儲池中進行彈性擴展。
采用獨有的彈性算法在存儲池中定位數據,而不是采用集中式或分布式元數據服務器索引。避免了元數據服務器通常會導致I/O性能瓶頸和單點故障的問題。BR2所有在Scale-Out存儲配置中的存儲節點都可以智能地定位任意數據分片,不需要查看索引或者向其他服務器查詢。這種設計機制完全并行化了數據訪問,實現了真正的線性性能擴展。
數據I/O可在命名空間內所有節點上自動進行負載均衡,系統智能定位任意數據分片,不需要查看索引或者向其他服務器查詢,消除SAN環境或元數據服務器帶來的訪問熱點和性能瓶頸問題,真正實現并行化數據訪問,性能線性擴展。系統冗余組網,支持GbE、10GbE網絡互聯,為用戶帶來高速存儲的極致體驗。
BR2可以對文件進行自動復制,如鏡像或多次復制,從而確保數據總是可以訪問,甚至是在硬件故障的情況下也能正常訪問。自我修復功能能夠把數據恢復到正確的狀態,而且修復是以增量的方式在后臺執行,幾乎不會產生性能負載。DigiBrickBR2采用操作系統中主流標準的磁盤文件系統來存儲文件,因此數據可以使用各種標準工具進行復制和訪問。
基于數據安全性方面的考慮,用戶可以通過配置工具設置數據相應的安全等級,選擇將數據和數據副本分別存放在不同的存儲節點上。BR2可以實現節點間的數據保護功能,提供從1:1、1:N(N>=2)、N+M的冗余級別。提供給用戶十分靈活的數據冗余策略,方便用戶可以根據業務數據的邏輯需求,隨意的制定冗余策略。
DOFS分布式文件系統支持NFS、CIFS、HTTP、FTP的標準協議訪問,支持私有協議,完全兼容POSIX標準,并且支持對象存儲、OpenStack,兼容Hadoop存儲訪問接口,能夠替換hdfs作為大數據處理系統的底層存儲系統,為復雜的云計算環境提供豐富的存儲訪問方式。
整個集群系統的管理工作可以在統一的圖形化管理界面中完成,易于部署,快速交付,有效的屏蔽了傳統高端存儲中復雜的存儲底層細節,可以讓普通的IT管理人員快速的掌握,降低企業在存儲系統中的整體擁有成本。