前言：尋找寫作靈感？中文期刊網(wǎng)用心挑選的開源項目部縣級廣電技術(shù)資料管理系統(tǒng)，希望能為您的閱讀和創(chuàng)作帶來靈感，歡迎大家閱讀并分享。

摘要：縣級廣電的技術(shù)資料管理工作一直困擾著基層廣電管理者，特別是在各級縣級廣電系統(tǒng)出現(xiàn)經(jīng)營困難的情況下，如何充分利用新型的云存儲開源技術(shù)，實現(xiàn)技術(shù)資料低成本的管理成為大家共同尋找的方案。江蘇有線網(wǎng)絡(luò)發(fā)展有限責任公司寶應(yīng)分公司充分發(fā)揮基層技術(shù)人員的技術(shù)優(yōu)勢，采用Linux操作系統(tǒng)為基礎(chǔ)平臺，結(jié)合目前流行的容器虛擬化技術(shù)和Seafile開源項目，完成了本地技術(shù)資料管理系統(tǒng)的建設(shè)，為廣電基層資料管理工作提供了可行性方案。

關(guān)鍵詞：企業(yè)云;資料存儲;資料管理;云存儲

1引言

云存儲技術(shù)是近年來一種新興的基于網(wǎng)絡(luò)的存儲技術(shù)，旨在通過互聯(lián)網(wǎng)為用戶提供更強的存儲服務(wù)，是在云計算的基礎(chǔ)上延伸和發(fā)展出的一個新的概念，即云計算的資源存儲。江蘇有線網(wǎng)絡(luò)發(fā)展有限責任公司寶應(yīng)分公司（以下簡稱“寶應(yīng)分公司”）經(jīng)過多年運營，存在著大量技術(shù)資料，這些資料均存儲在個人電腦或以紙質(zhì)文檔存儲，沒有進行統(tǒng)一管理，存在資料分散、更新不及時、保存易丟失和傳輸安全隱患等各方面問題，亟需從技術(shù)和機制方面進行統(tǒng)一管理。目前，寶應(yīng)分公司正考慮利用云存儲技術(shù)管理公司的技術(shù)資料，但鑒于區(qū)縣經(jīng)營壓力大，沒有更多資金投入系統(tǒng)建設(shè)中，故公司充分發(fā)揮基層技術(shù)人員的技術(shù)優(yōu)勢，鼓勵開拓創(chuàng)新，降本增效，利用手中資源實現(xiàn)管理功能。2021年初，寶應(yīng)分公司對各技術(shù)部門的資料管理情況組織調(diào)研，深入了解各部門對文檔管理及存儲方面的要求，本著以重實用、輕投入的原則，利用開源系統(tǒng)Seafile社區(qū)版，推動完成了寶應(yīng)分公司文件智能化云管理系統(tǒng)的建設(shè)工作。

2系統(tǒng)介紹

2.1總體介紹

為了充分利用現(xiàn)有服務(wù)器資源，提高硬件性能，服務(wù)器采用Linux操作系統(tǒng)為基礎(chǔ)平臺，結(jié)合目前流行的Docker容器虛擬化技術(shù)構(gòu)建云服務(wù)，為今后云資料服務(wù)大規(guī)模應(yīng)用提供擴展空間，且可平滑過渡至高并發(fā)集群。目前，該系統(tǒng)包含一個Web界面和兩種桌面客戶端，可以管理、共享、同步、掛載文件，同時還能適用于Android和iOS的移動客戶端，方便移動場景下快速調(diào)取、查閱資料。該系統(tǒng)部署在公司內(nèi)部網(wǎng)絡(luò)中，各部門用戶可以通過辦公電腦訪問該系統(tǒng)，通過瀏覽器輸入系統(tǒng)地址即可使用。該資料存儲系統(tǒng)主要提供文件分發(fā)與匯總、多人在線編輯、大文件傳輸、斷點續(xù)傳、部門管理、層級權(quán)限設(shè)置、外鏈共享文件、消息推送、日志查詢等服務(wù)，為公司解決了文件的無限存儲、共享、協(xié)助以及便攜移動辦公等問題，大幅提高了公司的辦公效率。圖1是資料管理系統(tǒng)的網(wǎng)絡(luò)拓撲圖。應(yīng)用層部署應(yīng)用服務(wù)器和數(shù)據(jù)庫服務(wù)器，通過分布式文件系統(tǒng)實現(xiàn)數(shù)據(jù)的多份存儲，實現(xiàn)了高可用和高性能。技術(shù)資料管理系統(tǒng)除了免安裝的Web瀏覽器的快速訪問，還提供了PC電腦客戶端和手機客戶端的軟件。其中，手機客戶端比較簡單，主界面主要展示個人資料庫和共享資料庫，還有個人標識的星標文件。

2.2系統(tǒng)功能

（1）管理系統(tǒng)采用資料庫來組織文件，每個資料庫都可以獨立同步和共享給他人或群組（群組可以是部門或公司范圍），也可以在本地客戶端創(chuàng)建后加密上傳至服務(wù)器，保證了資料庫管理的靈活性、安全性。（2）在協(xié)作管理上，采用文件活動信息流，可以及時查看他人修改的文件的信息。另外，還提供了群組內(nèi)討論、文件評論、消息提醒等互動功能。（3）提供桌面客戶端，功能更加豐富，同步文件更加方便，可在無人為干預(yù)下實現(xiàn)本地電腦文件與服務(wù)器文件的同步（需要提前設(shè)置）。同時，客戶端集成了協(xié)作功能，能夠及時了解更新信息。（4）文件系統(tǒng)具有可擴展性、高可靠性。整個系統(tǒng)包含很多資料庫，每個資料庫都是一個獨立的文件系統(tǒng)，可以獨立管理每個資料庫。采用LogStructured文件系統(tǒng)設(shè)計，資料庫記錄了完整的版本信息，損壞后可以恢復(fù)到最后一次可用版本，且資料庫的存儲之間互相隔離，損壞只局限在一個資料庫中。（5）文件處理高效。文件系統(tǒng)做過數(shù)據(jù)去重處理，資料庫內(nèi)相同文件只保存一份，文件多版本之間只保存增量部分。針對刪除的文件，具有垃圾回收機制，刪除文件后會保留一段時間，系統(tǒng)自動定期清除過期的刪除文件，避免日常文件的誤操作。（6）支持集群架構(gòu)。系統(tǒng)服務(wù)器是無狀態(tài)的，可支持橫向擴展。通過S3、Swift、Ceph來保證存儲的可靠性和擴展性；通過MariaDBGaleraCluster來保證數(shù)據(jù)庫的可靠性。具體結(jié)構(gòu)如圖2所示。（7）支持高并發(fā)。3000個客戶端同時在線時，服務(wù)器CPU（單核）占用僅40%，數(shù)據(jù)查詢可以通過緩存數(shù)據(jù)庫查詢，大大降低了開銷。測試100個客戶端同時下載相同資料庫，服務(wù)器無明顯負載增加。（8）管理賬號權(quán)限切換。通過系統(tǒng)管理員賬號、密碼進入系統(tǒng)，首先進入的是普通文件管理界面，無法進行用戶、群組權(quán)限操作，需要切換至系統(tǒng)管理界面。（9）文件秒傳。運用多線程、HTTP通信實現(xiàn)了上傳文件時自動檢測云端是否有相同文件。（10）用戶分組。可以將所有用戶按公司、部門、項目分組，個人存儲的資料可以按要求進行部門或公司間的共享查看。（11）資料外鏈。系統(tǒng)內(nèi)部賬號可將資料庫共享連接，提供給網(wǎng)內(nèi)非系統(tǒng)內(nèi)賬戶查看；網(wǎng)內(nèi)用戶通過電腦、手機、平板等終端點擊共享連接即可實時查閱資料庫信息。系統(tǒng)可以外鏈進行密碼權(quán)限設(shè)置。外鏈也可以共享上傳資料，供非系統(tǒng)內(nèi)人員臨時上傳文件使用。

2.3操作簡介

技術(shù)資料管理系統(tǒng)通過“資料庫”來分類管理文件，每個資料庫可單獨同步，用戶可加密資料庫，且密碼不會保存在服務(wù)器端，所以即使是服務(wù)器管理員也無權(quán)訪問用戶的文件。系統(tǒng)允許用戶創(chuàng)建“群組”，在群組內(nèi)共享和同步文件，方便團隊協(xié)同工作。系統(tǒng)桌面、移動客戶端均遵循GPLv3，Web端遵循ApacheLicense。系統(tǒng)目前支持Windows、MAC、Linux、iOS、Android平臺。本系統(tǒng)完全私有部署，在保證性能的同時，支持海量終端并發(fā)同步，支持同步數(shù)據(jù)協(xié)作管理，支持任意文件格式歷史版本管理，支持快群模式文件共享協(xié)作。本系統(tǒng)大幅度降低了日常維護成本和硬件成本，如系統(tǒng)、軟件安裝、數(shù)據(jù)備份等。通過個人賬號從Web瀏覽器進入系統(tǒng)，默認在“我的資料庫”頁面可以展示該賬號創(chuàng)建的所有資料庫，資料庫以文件夾的形式展現(xiàn)。創(chuàng)建的資料庫必須共享后，其他賬號才能查看和修改。文件夾后面的圖標可以對該資料庫進行共享、刪除、重命名、轉(zhuǎn)讓或外鏈管理等設(shè)置；新建資料庫可以對資料庫進行加密設(shè)置；“更多”選項中可以查看已刪除的資料庫信息，默認已刪除資料庫30天后自動清除，30天內(nèi)可以恢復(fù)刪除的資料庫。群組共享。各賬號共享到群組的資料庫在此進行管理。可通過群組進行分類管理，進入某一群組與“我的資料庫”界面操作類似，可以在該群組中直接創(chuàng)建文件夾。共享鏈接。點擊資料庫共享鏈接可直接彈出共享操作界面。主要通過以下4種共享形式對該資料庫進行共享操作。（1）下載鏈接。生成一個URL鏈接地址，可以通過微信、QQ或文件等形式將資料庫共享給網(wǎng)內(nèi)所有用戶，只要網(wǎng)絡(luò)聯(lián)通，任何終端都可訪問，但只能下載、瀏覽，不能上傳文件。安全方面可以通過增加密碼或自動過期形式進行保護。（2）上傳鏈接。可以將該資料庫共享為上傳鏈接地址，網(wǎng)內(nèi)用戶任何終端都可以上傳文件，安全方面同共享鏈接一樣。（3）共享給用戶。將資料庫共享給系統(tǒng)內(nèi)用戶（必須是系統(tǒng)內(nèi)創(chuàng)建的賬號），通過搜索查找用戶，進行共享。（4）共享給群組。將資料庫共享給系統(tǒng)內(nèi)群組（必須是系統(tǒng)內(nèi)創(chuàng)建的群組），該群組內(nèi)的所有用戶均可訪問該資料庫。進入對應(yīng)資料庫即可進行文件上傳、瀏覽等操作，詳細功能如圖3所示。

3結(jié)語

隨著云技術(shù)的發(fā)展，網(wǎng)盤的發(fā)展速度越來越快，越來越多的公司選擇用網(wǎng)盤處理工作中的大量文件，以滿足團隊協(xié)同工作的需要。經(jīng)過這幾年的發(fā)展，可以看出，國內(nèi)網(wǎng)盤的未來趨勢為小容量、付費，所以，建立企業(yè)私有云盤勢在必行。而自建的系統(tǒng)首要考慮的因素是安全。寶應(yīng)分公司自建系統(tǒng)的客戶端和服務(wù)器間采用通信加密技術(shù)，技術(shù)資料管理系統(tǒng)在服務(wù)器配置了HTTPS后，客戶端會自動使用HTTPS協(xié)議和服務(wù)器通信。也就是說，當你創(chuàng)建一個加密資料庫，你將為其提供一個密碼，所有資料庫中的數(shù)據(jù)在上傳到服務(wù)器之前都將用密碼進行加密。另外，基于開源項目開發(fā)的云資源管理系統(tǒng)投入成本低，對經(jīng)費緊張又有相關(guān)需求的基層單位具有較強的吸引力。技術(shù)資料管理系統(tǒng)建成后，寶應(yīng)分公司就組織編寫了系統(tǒng)的操作手冊，分發(fā)到各部門需要使用的人員手里進行學(xué)習。目前，該資料存儲系統(tǒng)各功能正常，使用方便，提高了公司員工的辦公效率。尤其是資料存儲和共享功能得到公司員工的認可和贊許，為公司統(tǒng)一資料管理，完善公司管理工作做出了貢獻。

作者：周友良 姜樹軍 蔡偉 單位：江蘇有線網(wǎng)絡(luò)發(fā)展有限責任公司寶應(yīng)分公司