構建高效的媒資管理系統

2022-09-12 16:15:11 字數 4033 閱讀 7891

1) 儲存格式和物件

海量儲存一定是多格式的,從長遠來看,十年、二十年之後,不管是高畫質還是標清壓縮演算法肯定都會改變,面向應用也會有不同的考慮,我們可能會針對不同的節目形態在節目型別方面做一些優化。我們在設計上根據我台的實際情況媒資系統目前儲存的節目格式主要有兩種,一種是外購電視劇集,專題片等節目,這一類節目在媒資系統儲存主要是實現自動備播,因此在考慮到遷移到播出系統的效率問題,這類節目採用12mbps ibp幀的播出格式進行儲存,直接通過互連平台進行自動備播用,一種是自製節目,新聞等,採用50mbps的mpeg2格式儲存,同時在各個製作網系統中均全部統一格式,從媒資**的內容在進入到製作網的時候必須轉碼成與製作系統要求相一致的格式,保證格式的統一,避免或減少多格式混編在製作系統中的使用。根據實際的使用要求在入媒資儲存階段就對格式做好規劃,在後期的檢索**等應用中會對媒資系統的效率提高有不小的作用。

2) 儲存體系規劃

這裡可能會有一些儲存物件的規劃和分析上的問題,比如對於原始素材、成品節目、歸檔資料的儲存應該採取何種模式才能充分發揮效率,需要結合其再利用的模式來考慮,而儲存區的規劃,包括面向生產——**冗餘、近線備份;面向歸檔——分級儲存、策略排程;面向運營——素材、成片、產品,都需要結合實際應用進行考慮。在實際使用中,我們的**儲存採用兩台fc儲存作為主備,通過在軟體中將兩台儲存的碟符劃分到媒資系統執行所需的各個儲存路徑下,正常執行環境下入庫的資料格局各個碟符所占用的空間情況自動進行分配,。近線與離線儲存採用基於lto-4技術的磁帶機,在實際使用過中能夠提供大於90mb/s的讀寫速率,可以提供較高的資料遷移能力。

3) 儲存網路技術選擇

關於儲存網路技術選擇,十個人可能有十種觀點,其實san架構和ip儲存各有各的優勢,san勝在高頻寬,尤其san架構單埠、單任務的頻寬會比較具有優勢,而ip儲存的總頻寬也基本可以滿足應用需求,現在很多ip儲存的產品效能都非常優異,它的優點是接入成本比較低,但也存在一些問題,如單任務頻寬會受到以太接入的限制,以現在**資產管理分級儲存的資料排程效率來講,主機的瓶頸往往是ip儲存的問題,從技術發展的角度來講,萬兆及以太fcoe技術逐漸成熟可能會使ip和fc的儲存在萬兆點上產生融合。

4) 元資料儲存與優化

媒資系統中除了媒資資料以外還有就是元資料的儲存了,元資料庫主要儲存在資料庫中,而且隨著時間的積累,資料庫中儲存的元資料資訊會越來越多,隨著資料量的增大資料庫的效能會對整個媒資系統的執行效率產生很大的影響,在媒資系統設計中要重點考慮資料庫的選型以及資料庫的硬體效能。除此以外在軟體設計,資料庫設計方面也需要軟體開發商能夠做到盡可能的進行優化。我台採用的oracle 10g作為資料庫,採用單獨的scsi盤陣作為資料盤,使用oracle的rac並行集群提供服務,在實際的使用過程中當我們使用到一定的時間以後會發現資料庫的效率會下降很嚴重,最嚴重的時候甚至系統幾乎無法正常工作,後來通過排查以及對資料庫進行分析,在原有的基礎上對資料庫的指令碼做了一些優化以及相關軟體做了優化後這一問題才得到解決。

1.2 流程優化

流程優化的主要設計點在於業務流程的梳理和整合以及設計合理的模型和流程引擎,從工作流的角度來講,工作流在實現流程邏輯和應用軟體剝離方面確實能夠極大的提高系統的靈活性,而且也便於拆解複雜的業務系統,但它的問題是複雜度會增加,流程邏輯剝離會導致流轉效率降低,往往是處理流程越複雜,效率問題越突出。

在流程優化方面首先就是要對引擎進行優化,在全台網環境下esb引擎為各系統互連提供匯流排服務,提供元資料交換等,引擎要能夠提供靈活的,高效的資料轉換,外部的web服務可像「黑盒」一樣來為流程提供所需的服務,而不需要考慮開發的平台、異構系統等問題。引擎應能夠提供靈活的配置方式以及各種轉換方式,如xslt,xpath等,能夠在流程設計階段完成各種轉換而不需要對引擎做任何的修改。其次是業務流程的梳理和整合,在前期要對現有的業務流程做乙個梳理,了解哪些是必須的,哪些是可以取消的,哪些是可以合併的,使業務流程更合理,降低系統的複雜度。

另外在流程設計階段要盡量簡化流程模型,提取出共性的部分。在乙個互連流程中有很多環節,各個環節基本採用的是順序執行模式,複雜一些的流程中也會採用到排他選擇模式,如在某乙個環節流程執行過程中獲取到的引數不對等,流程會直接跳轉到結束節點,順序模式與排他選擇模式在流程中普遍得到使用,但是如果在一些更複雜的流程中能夠將業務流程進行更細化的拆分,並加入同步模式這樣在流程效率上會有不小的提高。

1.3高效的媒資管理

高效的媒資管理需要考慮**檔案的入/出、媒資的效率優化、元資料內容管理方面的優化以及後台管理的方便性等等,即需要充分考慮入庫、編目、檢索再利用、轉碼/遷移、流程管理等各個環節,從而實現整個系統運轉與管理的高效率。

1.3.1 高效的後台管理

媒資系統的執行需要大量的後台軟體來支撐,如磁碟使用情況、媒資檢索平台、媒資互連介面、帶庫控制管理等,對於管理人員來說如何方便、高效的管理與掌握整個系統的運**況直接影響到媒資系統的高效性,只有有了良好的管理才能為其他應用提供高效的服務。管理人員要能夠直觀的了解整個系統中各個方面的運**況,如儲存使用情況、策略執行是否正常,檢索平台等各種應用是否均在正常的工作。

1.3.2 豐富高效的入庫手段

在媒資系統中應有專門的上**工作站能夠將傳統磁帶直接上載到媒資系統中,可以提供自動化的批量上載、批量匯入以及匯入時的分段匯入和多種高、標清高位元速率格式的互轉等功能。也可以將已有的**、**、文件等直接匯入進行集中管理,實現**資料數位化儲存和統一管理,有助於業務資料規範化管理,並保證珍貴資料影象高質量的長期儲存和反覆利用。同時能夠高效的通過互連平台將各種資料儲存到媒資系統中,能夠針對不同的應用情況傳入不同的內容,如在製作網中入媒資儲存的可以是視音訊檔案也可以是視音訊與文稿相結合的內容,在入媒資儲存階段就直接將文稿資訊帶入媒資系統中,方便編目人員進行編目。

1.3.3 專業智慧型化的編目功能

遵循《國家廣播電視音像資料編目規範》制定的標準,對**節目/素材進行描述。系統可自動識別**節目/素材的關鍵幀並儲存相關資訊,形成關鍵幀和**節目/素材的對應關係。同時,系統還可自動提取節目/素材的原始資訊(例如:

對應的文稿、上載過程中的預標註等)並按照預先定義的編目規範進行整理,也可進行手動修改或標註。對於文稿與**結合的條目在入媒資的時候即可將文稿資訊如欄目資訊,首播日期,記者等資訊直接儲存到媒資系統中,簡化一次編目,減少編目人員的工作量。

1.3.4 檢索靈活高效

檢索是媒資建設中的重要環節,隨著系統的執行,媒資系統中的資料量會越來越大,在上百萬甚至上千萬的資料裡面要查詢相似或者最匹配的內容會耗費相當大的時間,而引入全文索引則可以很好的解決在大資料量中檢索資料慢的矛盾。使用全文索引技術可以大大提高使用者的檢索效率,在全文索引中「分詞」演算法尤為重要,在檢索系統中加入同音字檢索、拼音檢索、同義詞檢索、附件內容檢索、關鍵幀檢索、關聯檢索以及檢索模板等,都可幫助使用者快速檢索所需的節目資源。在檢索平台中使用web2.

0技術也會大大提高使用者使用體驗,在檢索到內容後可以直接檢視並可以與流程結合直接整段或者分段**各個子系統。

1.3.5 高效的檔案傳輸與轉碼

在媒資系統中各種的檔案互動非常頻繁,同時也需要在各種情況下進行轉碼,要求在檔案傳輸過程中能夠實現多伺服器組協同工作,能夠對任務進行拆分成多個子任務由多台伺服器共同完成,能夠繼承流程中設定好的任務優先順序,根據優先順序的高低自動進行處理,軟體能夠支援多格式轉碼,能夠根據不同的需要自動進行轉碼,並能夠借助先進的計算機平台實現超實時的轉碼。

1.3.6 直觀靈活的歸檔管理

在媒資系統中資料最終都會進入到帶庫中儲存,而如果只是單一的將資料寫入一盤磁帶,存在因某盤磁帶故障而導致資料丟失的風險,因此在系統中帶庫歸檔應能夠提供雙歸檔功能,能夠在一次歸當中自動將同乙份資料寫入兩盤不同的磁帶中進行儲存,並在資料庫中記錄對應的關聯,避免單一磁帶的損壞導致資料丟失。同時也要能夠提供單磁帶複製,單磁帶拷貝等多種備份機制,提高系統的安全性與系統效率。

由於磁帶有讀寫壽命,如何更合理的使用磁帶是歸檔管理軟體需要考慮的問題,因此何時進行歸檔,在滿足何種條件下進行歸檔需要根據實際情況來制定,而系統中提高歸檔策略軟體是比較好的一種解決方法,通過靈活的多種歸檔策略設定來提高磁帶的壽命,比如根據我台實際節目量我們設定按照水位線來進行歸檔,只要需要歸檔的**檔案達到設定的水位線則立即進行歸檔,或者根據時間來歸檔,如夜間歸檔、每週固定的幾天進行歸檔等措施來降低磁帶的讀寫次數,延長磁帶的使用壽命。

1.4 總結

綜上所述,**資源管理系統發展至今,從解決儲存問題到強調再利用的發展,引伸出海量儲存對效率的更高要求,儲存效率是媒資的核心效率,檢索效率是再利用的基礎,而流程效率是高效執行所有業務的保證和基礎,可謂細節決定系統的效率,而效率決定了系統的成敗。

媒資管理系統的設計與應用

摘要本文結合日照廣播電視台在媒資管理系統方面的應用實踐,詳細分析了媒資管理系統的系統設計 網路架構 業務功能模組,以及查詢檢索 資料儲存等關鍵技術,以及媒資管理系統數位化建設中的一些體會。關鍵詞編目 查詢檢索 編譯碼 網路構架 中圖分類號tp392 文獻標識碼a 文章編號 1674 6708 201...

高效的會議管理系統

會議簽到,速度決定一切 人們早就厭煩於擁擠的地鐵 公交,還有馬路堵車,如果這些上班族趕到你的會場參加活動,體會到的還是那種擁擠 混亂的簽到場面,排隊簽名的現場服務,堪稱遭罪的體驗怎能獲得嘉賓們的再次蒞臨?會場簽到需要快速的節奏來適應嘉賓們的會務需求,速度決定了他們的參會滿意度,直接影響活動的效益。就...

1構建高效的績效管理體系

主講 王雷軍 一 課程背景 績效管理何以成為人力資源管理體系的核心,原因之一就是人力資源管理通過績效滲入到企業的業務與經營之中。什麼才是績效管理?我們通常對績效管理的理解就是績效考核,我們習慣於將主要精力放在的績效考核分數的斤斤計較上,而忽略了績效管理的重點在於績效的改進與提公升 我們注重於員工層面...