分布式方案(系列14篇)_分布式方案
發表時間:2024-12-23分布式方案(系列14篇)。
〖一〗分布式方案
【內容提要】根據網上數字參考咨詢服務發展,介紹了國內外主要的數字(或網上)參考咨詢服務系統的問答內容創建、對象描述、知識組織、數據存取傳遞。專家信息管理、協作館信息管理、服務流程管理、質量控制、知識產權管理、個人隱私控制等方面的標準規范的研究和發展。討論了國家科學數字圖書館分布式參考咨詢服務和管理標準規范研究和規定。【摘??要??題】信息服務
[分類號]G255.54
數字化信息環境下的數字化參考咨詢服務,不僅可以體現文獻信息服務的專業化,自動化、智能化和知識化程度,同時能夠更有效地幫助用戶充分、高效地利用文獻信息資源與服務。
隨著數字化參考咨詢服務和協作咨詢服務網絡的發展,需要研究和制訂咨詢系統和參考服務管理標準,以保證服務質量和系統的互操作。目前國內外很多網上參考咨詢服務系統日益重視咨詢服務及其管理的標準化問題,正在研究和制訂一系列相關標準規范。
1 數字參考咨詢標準研究概況
目前國內外數字參考咨詢系統及其服務標準研究及其規范工作,主要集中在三個方面:
(1)專家或成員信息描述標準。用于識別咨詢(學科)專家(館員)或協作成員。
(2)知識庫標準。主要用于收集、描述、加工、存儲和共享問題和答案的知識庫建設。
(3)問題傳輸協議。主要解決參考咨詢服務機構之間的信息交換。
目前通常采用Web表單或者電子信箱等工具來處理這個問題。這意味著大量的數據的流動,包括從數據庫或電子信箱中導出或導入。創建一種信息交互的無縫方式能夠使信息共享更加容易,更加經濟。
2 參考咨詢標準內容研究
2.1 咨詢數據庫格式與標準
知識庫的數據格式提供了廣泛的問答知識的組織框架,以獲取咨詢業務中的知識層面的信息,定義參考咨詢業務流程、管理和問答知識組織、描述、存取數據。知識庫格式把參考咨詢交互轉換經過編目,并且能夠妥善保存、便于編輯修改的可靠、嚴格的知識數據。制定知識庫格式的基本原則是:必須能處理咨詢業務中濃縮的信息比特內容;在形成對信息來源的選擇和評價過程中,必須能將圖書館員的知識具體化。
目前,知識庫標準主要包括知識內容、數據元素/元數據、過程維護和功能報告。內容包括一個問/答過程完成后的問題、答案、匹配和指示/鏈接。數據和元數據元素包括信息描述、問答記錄、個人信息、權力管理、費用信息和回答者及資源的確認/證明。過程維護包括記錄的更新、增加、刪除和記錄之間的相互參見。功能報告包括知識庫記錄的趨勢、統計和分析。知識庫標準可以與資源描述、質量、權限管理、隱私、版權、統計、鑒定和存檔等方面的標準進行整合和協調。此外,需進一步研究與語言和文化、隱私、版權、行政權限以及文化、法律和政治敏感性等相關的標準。
專家與成員館描述標準須考慮提問者的描述元素和答者的描述元素,以及二者的有機結合??蓞⒖嫉哪P陀蠧PEX(Customer??Profile??Exchange)和CDRS.CPEX中劃分類別包括代理/參與者/執行者(如統一標識符,國籍、角色)、聯系方式、參與人數統計、交易對象參考、管理、交互歷史、優先信息/約束以及司法和隱私限定。
交換協議包括描述過程模型,消息和功能,內容描述包。目前有許多現存的標準或推薦標準可以參考借鑒,或者可以與之整合、協調。如ILL、SOAP、QuIF、ISO2146、N-CIP、Z39.50等。需要研究和試驗的內容包括:問/答交換模式的應用、元素和元數據交換性測試、參考咨詢軟件包之間的測試。協議標準的發展過程中對一些涉及國際性的問題比較敏感,如語言、時區和司法問題。
知識庫格式與標準需要進一步解決的主要問題包括:版權、問題和答案的所有者、語言、文化、主題分類法的選擇、采用受控詞表還是自然語言等,知識庫中提問信息之間的平衡、數據元素、權重、值是否正確及其表單設計等。另外,作為協作式參考咨詢,需要解決合作型知識庫系統、問題交換標準、資源共享、標準化的度量和計費系統。
數字參考咨詢標準研究主要針對數字參考咨詢過程中獲取的數據進行描述、共享和存儲說明。目前,美國ABC公司(AnswerBase??Corporation)和OCLC分別聯合研究型圖書館和數字圖書館聯盟(Digital??Library??Federation)研究提出了2個標準:KnowBit(KBIT)和QuIP。
(1)KBIT??數據庫格式
KnowBit是一種管理咨詢信息交互的標準數據格式。該格式為集成、可升級、鏈接和可擴展的數據標準,能夠將各種信息成分組合到一個簡單的格式中。它既包括對敘詞表或分類詞表的選擇,還包括與MARC及其它標準有關字段的連接。KnowBit格式區分了問題的類型:原始問題,咨詢過程問題和正式問題,并通過提問目的和所問問題類型來識別問題。描述字段可以對問題的地理范圍,語種,版權狀態和可獲得狀態進行識別。除此以外,采用主題分類,關鍵詞術語,數據條目,著者和來源評價、數據頻率等途徑可以進行分類、評價和統計分析,為獲取、識別、分類問題答案庫中的信息提出了有效手段。KBIT數據格式具有多種特點。
(2)QuIP數據標準
QuIP是針對基于網絡的數字化參考咨詢服務的問題和答案內容描述的一個交換協議。以分布式協作型為基礎,為Internet不同域的用戶設計。QuIP是一種基于元數據的線程化的數據格式,能以統一的格式維護、跟蹤、存儲咨詢服務的問題和答案。其核心是一個問答流。數字咨詢交換是多個問題/答案的交互。這種交換可能是多個交互,包括問題主題和咨詢人員或用戶的變化或變更。QuIP是面向過程的。QuIP支持基于多個服務器的問題和答案序列的知識共享的發展,輔助平衡服務器之間的問題負載。QuIP有三個主要概念:元數據模式,語法綁定,協議集。QuIP可分為兩個部分:
①元數據。確定數據存儲、交換的結構和格式。
②協議。協議能夠實現計算機到計算機的事務處理(如處理問題)和其它服務(如提問狀態)。
3 問答知識元數據研究
3.1 數據元素特征
知識庫格式和標準建有數據元素、字段或者數據詞典,力圖使問答過程的描述和數據庫的存儲格式化、標準化。
咨詢問答過程(交互)中通常有若干個屬性。每個屬性可能會有子元素,或子屬性。
以QuIP數據標準為例,可以得出知識庫數據元素一般具備以下特征:
(1)數據元素是可強制、有條件或可選擇的。
(2)數據元素可重復或不可重復。
(3)可預定元素值。
(4)元素和屬性可擴展。
(5)建立一些控制元素。
(6)建立唯一識別符,一般分為“
〖二〗分布式方案
摘要我們提出了分布式的回歸,高效和總體框架中,網絡模擬傳感器數據。在這個框架中,傳感器網絡中的節點相互協作,以使全局函數能夠最好地適應每個局部測量。該算法是基于內核的線性回歸,其中模型利用局部基函數的加權和的形式;這提供了一個表現又聽話類模型傳感器網絡的數據。
節點上的模型參數不發送數據到一個或另一個網絡,而是被限制在通信上,這大大減少了所需的通信量。算法運行后,每個節點都可以回答本地或節點能夠有效地將模型參數傳遞給網絡外用戶的查詢。我們提出了從一個48節點的傳感器網絡部署在英特爾研究根據數據的算法的評估 - 伯克利實驗室,這表明我們的分布式算法收斂到以很快的速度的最佳解決方案,是非常健壯到分組丟失。
授權書,副本在本通知的第一頁有完整的引文。若要復制、重新發布、在服務器上發布或重新分配清單,您需要預先獲得特定的權限和/或費用。
1.引言
小型、低功耗的設備能夠感知、激活和交流有關其網絡的環境信息,已被證明是科學和工業中許多任務的有用工具。近年來,發展以硬件和低級軟件導致可行的,多百節點網絡被部署用于遠程監控的環境和氣候數據(mic03; mps+02)。
這種監測系統通常用于在兩種操作模式中的一種:或者來自傳感器的數據被從網絡提取和分析離線(mps+02);或者使用從傳感器獲得的信息被聚集該計算簡單本地操作,例如,平均值,最大值,或直方圖(mad03; iegh02)。通信通過聚集的減少是有吸引力的,因為萃取的完整的數據集可以是非常昂貴的,因此需要大量的通信吸盡這些設備的有限的能量。
不幸的是,盡管聚合可節省能源,它可以失去大部分的原始結構的數據中,只提供粗統計數據,平滑過度有趣的局部變化。
在本文中,我們提出了一個方法,用于提取形狀和傳感器數據的結構比大多數聚集方案更全面的信息提供,同時仍然使用較檢索每一個傳感器讀數每個方法大大減少了交流。為了做到這一點,我們使用的事實是,來自同一空間的多個傳感器通常高度相關。因此,數據的有效維數可能顯著低于傳感器測量的總數。
一些先前公布的傳感器網絡查詢算法已利用此類型的結構,但這些方法僅解決特定的任務,諸如計算傳感器值(nm03)的輪廓的水平。
提出了一個傳感器網絡復雜查詢的總體框架。該框架能夠準確地表示原始數據的結構,并通過將讀取的數據轉換成低維的表示來顯著降低通信需求。具體地說,我們使用線性回歸,其中數據由基函數的加權線性組合近似來執行此投影。
我們的模型中使用的內核的線性回歸,其中一個核函數的支持確定該組被用來估計每個基函數系數的測量數據局部相關。然后,這些基函數和核位置系數提供了一個緊湊的、結構化的測量模型。
我們描述了一種簡單有效的分布式消息傳遞算法,用于傳感器網絡中的回歸。我們的算法保持了將以分布式方式獲得的表示,并且能夠以最小的通信開銷從網絡中提取該表示。我們的方法覆蓋的結樹數據通常用于在圖形模型(cdls99) - 酮路由樹通常用于數據收集的傳感器網絡的頂部概率推理結構。
通過在樹中的一對相鄰節點之間生成消息,優化基函數的系數,使重建誤差最小。
是這項工作的主要成果如下:
我們描述了基于內核的回歸,并認為它非常適合于**的傳感器網絡共同spatiotemporally相關數據的行為;
我們表明,一個解決內核回歸問題,根據高斯消去法,可以配制成的通信效率的分布式消息傳遞,可以在傳感器網絡被實際實現的算法;
研究表明,傳感器網絡中常用的基于樹的通信拓撲能夠有效地支持消息傳遞算法,
我們提出我們的做法進行評估使用的tossim模擬器(llw+03)tinyos的實施,體現了緊湊性和通過我們的分布式回歸算法生成的模型的準確性和快速的收斂速度,andhigh魯棒性數據包丟失。
4.評估與應用
在這一節中,我們看一下上面提出的分布式回歸算法的性能,這表明它提供了一個緊湊的方式,低誤差的方式來表示感測區域。我們還期待在我們的方法中有一些應用程序顯示,它可以用來回答各種各樣的查詢。
4.1評估基本算法
為了評估我們的分布式回歸算法,我們在tossim(llw+03),整個程序模擬器tinyos的實現了它。除上述對網損的討論外,我們預計這將實現對微塵的直接操作。這個模擬器允許我們模擬各種網絡拓撲和核心功能,并在現實環境中測量我們算法的通信成本。
在接下來的實驗中,我們使用這個模擬器來收集關于我們算法的通信需求的測量。
在我們最初的評估,我們跑了我們的算法對光照,溫度,濕度從我們的實驗室48傳感器部署收集2分鐘的樣本數據集。圖5示出了這一部署的地圖,與載置由小暗圓圈表示傳感器。實驗室測量的數據相當復雜:
太陽影響的實驗室在一天的不同時間的不同區域,并且所述測量結果具有很高的空間相關性,而且還包括由于靠近窗戶和空調通風口的局部變化。我們相信,這種數據集的時空特性也將存在于許多其他傳感器網絡部署中。
由另一方面,我們映射5內核上,以該空間,表示在圖5中在該映射中所示的5黑色區域,每一個傳感器中的至少一個內核,而一些傳感器處在兩個或三個內核。直觀地,這表示在空間的相關性 - 從空間的相同區域的讀數傾向于高度相關,而來自相鄰區域的讀數沿著它們的共同邊緣混合。從某種意義上說,如何執行所得到的回歸,圖6示出了在兩天的時間內,在來自多個傳感器的數據中使用二次模型的回歸。
回歸的一個應用是生成空間曲線的三維輪廓,它給出了溫度在空間和時間上如何變化和變化的圖像。圖7顯示了我們的回歸算法隨時間變化的不同點的結果,顯示了實驗室中溫度的巨大變化。圖8示出在10:
0010月28日在我們實驗室的溫度的等高線圖 - 注意到該溫度約20下在左下角而變化右上角29c。
我們還測量了通過運行我們的分布式回歸算法,改變兩個參數構成的模型的誤差:滑動窗口,t的大小的基礎函數中,k的數量和。在我們的測量模型中,f(x,y,t)之間的均方根(rms),它位于數據集d(x,y,t)的每個點。
為了測量回歸在傳感器領域那里沒有讀數位置**值的能力,我們還試驗了該數據集合d的子采樣用的原始數據以1/8的數據集,和所測量的均方根回歸應用于此數據集與d.
圖9顯示了在不同的時間窗口和針對不同基組的子采樣下這些誤差測量的結果。我們試驗了每內核三種不同的基函數集:或者(1)的線性空間,二次 - 時間(例如,f(x,y,t)= c1(x)的+ c2(y)+ c3(t2)+ c4 (噸)+ c5),(2)線性空間,線性時間,或(3)的線性空間,常數時間。
我們還測量簡單地計算讀數的每個內核在所述時間窗t.注的平均值,回歸執行得很好相比平均,并且,正如預期的,增加的基函數的數量增加的質量的rms適合。令人驚奇的是,回歸使用減小的數據集(具有1/8的點)執行,以及回歸與整個數據集;這可能是由于溫度低的變化在8閱讀(16分鐘)的窗口。
由于在整個數據組的平均誤差不捕獲這些方法的最壞情況下的性能,我們還在一天的不同時間繪制這些計劃的誤差,使用兩小時的時間窗的大小。該實驗的結果如圖10所示。請注意,線性和二次擬合執行過程中多次好得多當溫度急劇變化(例如,當太陽升起,并集 - 見圖6for溫度由若干個傳感器讀數的情節),但所有方案在時間表現出色低方差(例如,在夜間)。
這表明,一種自適應方案,其中不同數目基礎功能都用于根據信號的變化可能是有益的;這樣的探索是留給未來的工作。
我們還測量了我們的實驗室部署的通信成本(使用每內核3系數),結果發現,在tossim,由所有的傳感器發送的字節總數為5808個字節與節中提取從每個傳感器的單個讀數。在此之后節的通信,每個節點可以**在其局部區域,其中,因為我們描述第5can是非常重要的感測場的行為。此外,雖然總的通信是比較高的,為小型實驗室網絡,通過該網絡的根發送的總字節數中提取所有讀數時只是123個字節用于我們的算法與329個字節。
在接下來的部分中,我們研究我們的算法隨著網絡規模的增加的比例,并指出,分布式回歸的成本增長相當緩慢的網絡規模,不象提取所有讀數的成本。
〖三〗分布式方案
一、策劃背景1.瀏陽河原名瀏水,又名瀏渭河,又因瀏陽城而名瀏陽河其源為大、小溪,分別出自大圍山北麓和南坡二溪在瀏陽城東10公里處匯合,始稱瀏陽河流經長沙縣,至開福區馬廠以南入湘江,全長公里,流域面積4665平方公里2.區域交通:
319、106國道縱橫境內,醴瀏鐵路連通浙贛線,交通十分便捷瀏陽距省會長沙67公里,距長沙黃花國際機場40公里3.地區特產:瀏陽市的鞭炮煙花,進入國際市場已有百余年歷史,并曾多次獲獎也成功舉辦過四屆國際煙花節,與夏布、豆豉并稱“瀏陽三特”河道中所產菊花石為世界一絕,多次獲國際賽大獎瀏陽河畔還有湘繡、花炮、豆豉、茴餅、紙傘、竹編等特產4.
人力資源:清末民初,有譚嗣同、唐才常,后有焦達豐、陳作新。他們都是為國捐軀,在歷史上享有盛名;著名菊花石雕老工匠、國家工藝美術大師戴清生;現世界著名**家譚盾、著名作家張揚、《瀏陽河》的詞作者等一曲《瀏陽河》也唱出了瀏陽的知名度
二、策劃目的1.塑造和傳播瀏陽城市形象,打響瀏陽的知名度、提高瀏陽的競爭力和影響力,樹立品牌2.帶動瀏陽市的經濟發展,吸引投資商、企業家到瀏陽投資3.
推進湖南省旅游開發建設精品化,旅游宣傳**品牌化,促進全省旅游業發展4.推動瀏陽市乃至整個湖南省其他相關行業的發展
三、策劃原則1.整體策劃,分級負責,協調合作,務求實效2.經濟效益、環境效益、社會效益相結合3.活動具有新穎性、獨特性、現實性
四、組織形式**主導,各部門分工合作,社會各界力量參與
5、 主題口號1。瀏陽狂歡夜,唱新瀏陽2。五彩繽紛的瀏陽,中國的亮光
六、主辦單位主辦單位:湖南省旅游局、湖南省人民**新聞辦公室、湖南省廣播電視局承辦單位:瀏陽市旅游局及有關縣(市)人民**
七、主要活動及程序以舞蹈歌曲形式的大型晚會為主,輔以龍舟、竹排、水上芭蕾、巨型彩龍、日景煙花、彩色氣球表演此外,還將舉行湖南各地手工藝品的制作展、國際煙花藝術展暨世界煙花博覽會等系列活動湖南旅游節新聞通報會1.主要內容:湖南省**省長周伯華召開湖南旅游節安排新聞發布會2.
地點:瀏陽神農別墅3號
9: 2004年9月11日
邀請人員:湖南省國內外旅游推介會**及記者
一、二、
三、四、
五、六、
7、 活動主題活動介紹活動意義活動時間地點活動參與者活動主辦單位:主辦單位:協辦單位:
八、九、
十、活動流程表活動宣傳計劃表活動具體流程啟動儀式暨“”活動流程時間:地點:流程:
前言“青春社團激情極限,陽光宿院和諧致遠”宿州學院第九屆社團文化節在我黨成功舉辦十八大的喜慶氛圍中拉開了隆重的帷幕“共建繽紛社團,齊創和諧校園”,在新的一學期里讓我們譜寫無限繽紛暢想和諧樂章舞動青春旋律共建宿州學院美好明天在激情、活躍的文化節氛圍中徹底融入到第九屆社團文化節中,彰顯青春風采,盡展無限激情,打造優秀百家社團文化,建立宿院精品社團作為一年一度的全院性文化盛會,社團聯合會在總結第八屆社團文化節經驗基礎之上,推陳出新,其目的在于結2.愛美化妝品公司開幕儀式策劃方案?項目背景:
愛美是一種新生的力量,讓生活變得更美好.?活動目標1.通過開工奠基儀式達成社會各界對愛美的綜合印象,為項目的啟動與營銷奠定堅實的基礎2.
擴大本案在化妝品品牌形象及行業地位,從而樹立并鞏固本案良好形象3.通過開工奠基整合多種資源與通路,塑造人與自然的和諧共存,共同發展和相互促進的社會形象?前期準備工作1.
主場地布置及舞臺搭建前一天完成,并做好儀式活動所需的一切準備工作2.提前三天向氣象局獲取儀式當天的天氣情況3.提前幾天落實指揮和負責秩序工作,落實活動范圍內保安指揮和負責秩序的工作4.
提前一周確定貴賓、嘉賓名單及工作人員名單5.提前做好活動現場的禮品工作6.提前確定活動當日**宣傳,制造聲勢?
注意事項及服務聯系人:1。參建人員的車輛停放在施工現場,安保人員負責看護安保人員。2主要嘉賓和工作人員應滿足10:00:00的要求
00前入場到位3.與會人員要嚴格遵守會場紀律按指揮行走,保證人車安策劃案策劃人:李海洋
一、策劃背景速滑館位于大慶市高新區,北鄰城中路,東鄰經九街,西鄰黎明河,速滑館建筑面積23385平方米,擁有座椅1826個,可以滿足國際國內各大型賽事,還可提供冰球、短道速滑、冰壺等運動項目的訓練場地,和用于陸地訓練的塑膠跑道場地,輪滑場地等,以及用于全民健身場地
二、活動目的,意義和目標通過開館儀式來展現冰的魅力,滑冰不僅可以給我們帶來健康,還可以帶來快樂,讓百姓大眾了解冰,親近冰,愛好冰宣傳本館的內部設施及良好的訓練環境,展示優秀的教學水平,展現全體教練職工以培養國家優秀后備人才為己任的決心和信心,提高本館的整體形象
3、 活動的主題是為大慶文化體育旅游集團速滑館揭幕,展示速滑館的全貌,展現自我,創造輝煌
四、活動的時間暫定
五、活動的地點企業文化節開幕式
一、活動名稱:
二、活動目的:
三、活動主題:
四、活動時間:
五、活動主持人:
五、活動對象:
六、活動地點:
7、 人事安排總協調:舞臺搭建:組長:
組員:任務:1.
晚會期間舞臺燈光設備及揚聲器設備安裝場地安排:組長:
組員:任務:1各店站、場地的劃分,嘉賓位置劃分1會場桌子的安排,畫場地2晚會的現場布置3到場人員就坐的位置的劃分工作;在**晚會過程中嘉賓的就坐4舞臺射燈要求提前準備好,樓上的要提前和有關老師聯系,確保無誤活動機動組:
組長:組員:任務:
1.慶典期間,負責處理緊急情況2.充當候補人員,晚會布置現場,協同活動會務組,抓緊布置工作各隊人員組織安排:
后勤保障組:組長:組員任務:
飲食工作及環境工作,人員分配4.晚會階段范圍的劃分并確定安全范圍,維護晚會人員進出和安全秩序工作5.負責物品的歸還問題,和解決糾紛6.
場館安全工作,場館出入口人員安排:組長:成員:
任務:清理活動現場:
八、開幕式具體流程:1、開場節目2、主持人致開場詞3、主持人介紹到場領導4、領導致辭并宣布開幕5、員工代表講話6、文藝節目7、主持人對活動進行總結并宣布開幕式結束
集團人力資源部年月日xx
〖四〗分布式方案
引言
隨著信息的全球化,互聯網產業得到迅速地發展,其在科學研究、數據挖掘和信息獲取等方面的廣泛應用,使人類需要存儲和管理越來越多的數據,進而出現數據爆炸的現象。2012年12月,IDC公司的全球數據分析報告如圖1,預計2020年全球數據總量將由2012年的2.72ZB增長至40ZB,并且40%的數據需要保證其安全性。然而,受硬件設備失效、火災、地震自然災害等因素的影響,數據的安全性和可靠性受到嚴重威脅。在這個數據即信息,數據即價值的大數據時代,如何保證數據的安全性和完整性成為當前存儲領域越來越重要的問題。
1 目前主流快照技術
本章首先介紹目前主流的快照創建技術,包括鏡像分裂、按需復制、指針重映射和增量快照技術,并分別分析其優缺點;然后介紹目前基于增量快照的快照恢復方法;最后為了降低空間、時間開銷和提高系統可擴展性,提出快照創建和快照恢復需要改進的問題。
1.1 快照創建1.1.1 鏡像分裂快照技術鏡像分裂技術在快照時間點到來之前需要為源數據卷創建并維護一個完整的物理鏡像卷,同一數據的兩個副本分別保存在由源數據卷和鏡像卷組成的鏡像對上??煺詹僮鞯絹頃r,鏡像操作停止,鏡像卷轉化為快照卷,得到一份數據快照,快照卷在完成數據備份后,與源數據卷再次同步,重新成為鏡像卷。鏡像分裂技術雖然在短時間內(斷開鏡像對所需的時間)就可以得到一個完整的物理副本,但其缺乏靈活性,需要預先為源數據卷創建鏡像卷,無法在任意時間點為任意的數據卷創建快照,并且其占用大量的存儲資源,會造成存儲空間的浪費。
1.1.2 按需復制快照技術[12-14]按需復制技術在快照時間點之后開始建立源數據卷的完整物理副本。系統接收到快照請求,暫停上層應用,接著為源數據卷創建快照卷,并為其分配大于或等于源數據卷容量的存儲空間,同時建立一個控制位圖,該控制位圖的每一個控制位表示源數據卷的一個單位(通常為數據塊)是否已經復制到快照卷,快照操作完成,恢復上層應用??煺战⒅螅笈_復制程序開始運行,將源數據卷的數據塊復制到快照卷,并將對應的控制位圖位置1,表示該數據塊完成復制。在此過程中,當源數據卷上某數據要被更新時,若該數據塊尚未完成復制,則這些塊將執行寫前復制COW(首先被復制到快照卷,同時將對應的控制位圖置1,然后才能更新源數據卷的數據);若該塊已完成復制,則直接更新數據。按需復制快照技術的工作原理如圖2所示: 圖2 按需復制快照技術工作原理寫前復制技術確保復制操作發生在更新操作之前,使快照時間點之后的數據更新不會出現在快照卷上,保證了數據的完整性。通過后臺復制和寫前復制技術,最終源數據卷的數據會被復制到快照卷,得到源數據卷的完整物理副本。
1.1.3 指針重映射技術[12-14]指針重映射技術建立一份快照時刻源數據卷的邏輯副本,不會產生完整的物理副本。該技術只需分配少量的快照空間,存儲快照時間點之后被更新的數據,每個源數據卷都有一個數據指針表,該指針表中記錄的`數量等于源數據卷的數據塊數量,每條記錄保存著指向對應數據塊的指針??煺談摻〞r,為源數據卷的指針表建立一個副本,作為快照卷的數據指針表,快照時間點結束時,快照卷和源數據卷通過各自的指針表共享同一份物理數據。 圖3 指針重映射技術工作原理快照創建之后,當源數據卷中的某數據將要被更新時,使用寫前復制技術,將要更新的數據寫至預先分配的存儲空間,然后修改快照卷的數據指針表使其指向該存儲空間的數據塊。指針重映射技術工作原理如圖3所示:指針重映射技術的備份窗口只需幾秒鐘,為快照卷分配的存儲空間卻大大減小。
但因為快照卷僅僅保存了源數據卷中被更新的數據,快照技術無法得到完整的物理副本,且若更新的數據數量超過預先分配的存儲空間,快照將失效。
1.1.4 增量快照技術增量快照是基于按需復制的快照技術,因此能夠產生各個連續時間點的完整物理副本,同時結合重映射技術只復制更改數據塊的思想,減少了數據的物理復制工作量。在第一個快照時間點,除了分配一個大于或等于源數據容量的快照卷并建立控制位圖之外,同時還建立一個增量位圖,增量位圖用于記錄自上次時間點的快照創建之后,源數據卷上被更新的數據塊的位置。通過查詢控制位圖,執行后臺復制和寫時復制,同時利用增量位圖記錄快照時間點之后源數據卷上被更新的數據塊位置。當需要創建B時間點的快照時,用前一快照時間點的控制位圖與此時的增量位圖進行XOR操作,產生快照時間點B的控制位圖,同時將增量位圖置0,開始記錄時間點B之后被更新的數據塊,其工作原理如圖4所示: 圖4 增量快照工作原理快照時間點A時一部分數據已經拷貝至快照卷,同時增量位圖記錄了自快照時間點A后源數據卷被修改的數據塊,當創建時間點B的快照時,可以通過查看增量位圖,然后與A的控制位圖XOR,即得B處的控制位圖,即B時間點需要存儲的數據,同時增量位圖置0,記錄時間點B后被更新的數據塊。
1.1.5 快照技術總結如表1所示,鏡像分裂技術雖然備份窗口僅為斷開鏡像對的時間,但每次需要完全復制數據,浪費存儲空間,且缺乏靈活性。按需復制技術雖然可得到完整的數據副本,但空間開銷大并且后臺復制影響系統性能。指針重映射技術雖然只復制被更新的數據塊,但無法得到完整的物理副本。增量快照技術可以實現連續時間點的快照,并且在快照時間點只需要復制更改的數據塊,從時間和空間的角度綜合考慮,明顯優于其他快照技術。然而,在分布式文件系統中,增量快照的空間開銷隨著系統規模的增大,仍然會比較大,因此需要進一步改進,以節約空間開銷,提高系統可擴展性。表1 快照技術總結
1.2 快照恢復快照恢復與快照創建具有一一對應關系,對主流在分布式文件系統中,隨著數據量的增大和快照版本的增多,需要恢復的數據塊數也急劇增多,因此,遞進式地恢復特定時間點快照所需要的時間也會相應增多。為了提高數據失效時快照的恢復效率,對增量快照恢復方法的研究也是十分必要的。
2 基于數據壓縮的增量快照技術
2.1 增量快照的空間開銷問題數據快照的創建主要包括兩方面:第一,決定需要備份的數據塊;第二,將需備份的數據塊快速寫入快照空間。其中決定需要備份的數據塊有兩種情況,全部備份或者部分備份,目前的數據總量急劇增長,如果全部備份,所需的快照空間將隨數據總量的增加急劇增加,因此我們采取部分備份,即只備份更新的數據塊。傳統的創建數據快照的技術鏡像分裂、按需備份、指針重映射和增量備份技術中,在空間和時間方面,增量備份有相對低的開銷,并且可以創建連續時間點的快照。
2.2 基于數據壓縮的增量快照技術隨著系統規模的增大,被更新的數據塊逐漸增多,快照所占的存儲空間仍然比較大,因此需要對增量快照作進一步的改進,使其在大規模的分布式文件系統中具有較小的空間開銷和較高的可擴展性。壓縮技術是按照一定的算法對數據進行重新組織,以減少數據的冗余性和存儲空間開銷,因此本文將增量快照和壓縮技術相結合,實現了基于數據壓縮的增量快照技術,即在將需要備份的數據塊復制于快照空間之前,首先將這些數據塊進行一定的壓縮,然后再將其存入快照空間。本文擬采用Huffman壓縮算法[16-17],并對其做進一步改進,Huffman壓縮算法的流程如圖6:圖6 Huffman壓縮算法Huffman壓縮算法首次遍歷數據塊,分別統計每個字符出現的次數,按字符出現次數進行降序排序并構造二叉樹,出現次數較多的數據在樹的最頂層,較少的數據在樹的最底層,然后從根節點到每個數據的路徑來對其進行相應的編碼得到編碼位,最后用編碼位替換原數據塊中的字符,即可得到壓縮后的數據。但是,源數據塊中可能存在多個連續的相同字符,如果用編碼位將相同的字符都進行替換,會出現一定程度的空間浪費,可以考慮將連續出現的相同的字符只替換一次,然后增加標志位,用于記錄該字符連續出現的次數,以此節約更多的存儲空間。
2.3 基于數據壓縮的增量快照開銷分析因為增量快照只是復制更改的數據塊,當數據塊較大時,每次雖然只更新了數據塊中的小部分數據,仍然需要將整個數據塊復制至快照空間,造成存儲空間的浪費。而當數據塊較小時,若更改的數據較多,則每次需要復制多個數據塊,導致快照創建和恢復的操作復雜。因此,數據塊大小的選擇也是一個比較關鍵的問題,還需要做更多的測試來比較驗證,以選擇合適的大小
3 恢復鏈路縮減技術
3.1 快照恢復的開銷問題在采用增量快照的基礎上進行研究,增量快照在首次創建快照時完全備份,之后僅備份自上次快照時間點之后更改的數據塊。因此,當恢復指定時間點的快照時,需采用遞進式的恢復方法,當快照版本增多時,恢復快照的開銷也會相應的增大,因此,需要在原有快照恢復方法的基礎上作進一步的改進,以控制快照的恢復開銷。
3.2 恢復鏈路縮減算法針對上述問題,本文在已有的基于增量快照的快照恢復方法基礎上,提出了恢復鏈路縮減的快照恢復技術,即在從特定時間點至首次快照時間點之間的快照鏈路上,將對同一數據塊的多次遞進式恢復縮減為一次。在首次創建快照時,同時建立一個日志文件,該文件包括快照創建時間、需備份的數據塊地址和該數據塊在快照空間的地址三個字段
4 總結語
在大數據時代,保證數據的安全性和完整性具有重要意義,因此,越來越多的存儲系統采用快照技術來保證數據的安全性。然而在分布式文件系統中,快照創建的空間開銷隨著系統數據量的增大急劇增大。并且隨著快照數量的增多,存儲快照所占用的空間和系統失效時恢復快照的開銷也會增大,從而嚴重影響分布式文件系統的性能和可擴展性。
〖五〗分布式方案
第一條為規范光伏電站項目管理,保障光伏電站和電力系統安全可靠運行,促進光伏發電產業持續健康發展,根據《中華人民共和國可再生能源法》、《中華人民共和國電力法》、《中華人民共和國行政許可法》、《電力監管條例》和《國務院關于促進光伏產業健康發展的若干意見》,制定本辦法。
第二條 本辦法適用于作為公共電源建設及運行管理的光伏電站項目。
第三條光伏電站項目管理包括規劃指導和規模管理、項目備案管理、電網接入與運行、產業監測與市場監督等環節的行政管理、技術質量管理和安全監管。
第四條 國務院能源主管部門負責全國光伏電站項目建設和運行的監督管理工作。省級能源主管部門在國務院能源主管部門指導下,負責本地區光伏電站項目建設和運行的監督管理工作。委托國家太陽能發電技術歸口管理單位承擔光伏電站建設和運行技術管理工作。
第五條 國務院能源主管部門自責編制全國太陽能發電發展規劃。根據國家能源發展規劃、可再生能源發展規劃,在論證各地區太陽能資源、光伏電站技術經濟性、電力需求、電網條件的基礎上,確定全國光伏電站建設規模,布局和各省(區、市)年度開發規模。
第六條省級能源主管部門根據全國太陽能發電發展規劃,以及國務院能源主管部門下達的本地區年度指導性規模指標和開發布局意見,按照“統籌規劃、合理布局、就近接入、當地消納”的原則,編制本地區光伏電站建設年度實施方案建議。
第八條 國務院能源主管部門根據全國太陽能發電發展規劃,結合各地區報送的光伏電站建設和運行情況、年度實施方案建議,確認需要國家資金補貼的光伏電站的年度實施方案,下達各省(區、市)光伏電站建設年度實施方案。
第九條 各地區按照國務院能源主管部門下達的年度指導性規模指標,扣除上年度已辦理手續但未投產結轉項目的規模后,作為本地區本年度新增備案項目的規模上限。
第十條 各地區年度實施方案的完成情況,作為國務院能源主管部門確定下一年度該地區年度指導性規模的重要依據。對已發生明顯棄光限電問題且未及時解決的地區,停止下達該地區年度新增指導性規模指標及年度實施方案。對建設實施情況差的地區,相應核減下年度該地區指導性規模指標。
第十一條 光伏電站項目建設前應做好規劃選址、資源測評、建設條件論證、市場需求分析等項目開工前的各項準備工作。
第十二條 光伏電站項目開展太陽能資源測評,應收集項目場址或具有場址代表性的連續一年以上實測太陽能輻射數據和有關太陽能資源評估成果。
第十三條 項目單位應重點落實光伏電站項目的電力送出條件和消納市場,按照“就近接入、當地消納”的原則開展項目電力消納分析,避免出現不經濟的光伏電站電力遠距離輸送和棄光限電。
第十四條省級能源主管部門依據國務院投資項目管理規定對光伏電站項目實行備案管理。備案項目應符合國家太陽能發電發展規劃和國務院能源主管部門下達的本地區年度指導性規模指標和年度實施方案,已落實接入電網條件。
第十五條光伏電站完成項目備案后,應抓緊落實各項建設條件,在辦理法律法規要求的其他相關建設手續后及時開工建設,并與電網企業做好配套電力送出工程的銜接。
第十六條國務院有關部門對符合條件的備案項目納入可再生能源資金補貼目錄。未納入補貼目錄的光伏電站項目不得享受國家可再生能源發展基金補貼。
第十七條為促進光伏發電技術進步和成本下降,提高國家補貼資金使用效益,國務院能源主管部門根據需要適時組織地方采取招標等競爭性方式選擇項目投資企業,并確定項目的國家補貼額度。以招標等競爭性方式組織建設的光伏電站項目規模不計入本地區年度指導性規模指標。
第十八條光伏電站配套電力送出工程應與光伏電站建設協調進行。光伏電站項目單位負責投資建設項目場址內集電線路和升壓站工程,電網企業負責投資建設項目場址外配套電力送出工程。各省級能源主管部門負責做好協調工作。
第十九條 電網企業應根據全國太陽能發電發展規劃、各地區光伏電站建設規劃和年度實施方案,統籌開展光伏電站配套電網規劃和建設,根據需要采用智能電網等先進技術,提高電網接納光伏發電的能力。
第二十條 光伏電站項目接網意見由省級電網企業出具,分散接入低壓電網且規模小于6兆瓦的光伏電站項目的接網意見由地市級或縣級電網企業出具。
第二十一條 電網企業應按照積極服務、簡捷高效的原則,建立和完善光伏電站項目接網審核和服務程序。項目單位提出接入系統設計報告評審申請后,電網企業原則上應在60個工作日內出具審核意見,或對于不具備接入條件的項目說明原因。電網企業應提高光伏電站配套電網工程相關工作的效率,做到配套電力送出工程與光伏電站項目同步建設,同時投運。
第二十二條 光伏電站項目應符合國家有關光伏電站接入電網的技術標準,涉網設備必須通過檢測論證。經國家認可的檢測認證機構檢測合格的設備,電網企業不得要求進行重復檢測。
第二十三條 電網企業應按國家有關技術標準和管理規定,在項目單位提交并網調試申請后45個工作日內,配合開展光伏電站涉網設備和電力送出工程的并網調試、竣工驗收,與項目單位簽訂并網調度協議和購售電合同。雙方簽訂的并網調度協議和購售電合同必須符合《可再生能源法》關于全額保障性收購的規定。
第二十四條 電網企業應采取系統性技術措施,完善光伏電站并網運行的調度技術體系,按照法律規定和有關管理規定保障光伏電站安全高效并網運行,全額保障性收購光伏電站的發電量。
第二十五條 光伏電站項目應按照有關規范要求,認真做好光伏電站并網安全工作,會同電網企業積極整改項目運行中出現的安全問題,保證光伏電站安全和電力系統可靠運行。
第二十六條 國務院能源主管部門按照建設項目工程質量有關要求,加強光伏電站建設質量監督管理及運行監管,將建設和運行的實際情況作為制定產業政策,調整各地區年度建設規模和布局的依據。根據產業發展狀況和需求,及時完善行業規范和標準體系。
第二十七條 項目主體工程和配套電力送出工程完工后,項目單位應及時組織項目竣工驗收,并將竣工驗收報告報送省級能源主管部門,抄送國家太陽能發電技術歸口管理單位。
第二十八條 國務院能源主管部門適時組織有資質的咨詢機構,根據相關技術規定對通過竣工驗收并投產運行1年以上的重點項目的建設和運行情況進行后評價,作為完善行業規范和標準的重要依據,項目單位應按照評價報告對項目設施和運行管理進行必要的改進。
第二十九條 各省級能源主管部門應規范本地區光伏電站開發市場秩序管理,嚴格控制開展前期工作項目規模,保持本地區光伏電站有序發展。
第三十條 國務院能源主管部門負責加強對光伏電站運行監管,項目單位應加強光伏電站運行維護管理,積極配合電網企業的并網運行調度管理,電網企業應加強優化調度,保障光伏電站安全高效運行和發電量全額保障性收購。
第三十一條 國務院能源主管部門依托國家太陽能發電技術歸口管理部門建立可再生能源項目信息系統,對各地區光伏電站項目建設、運行情況進行監測。項目單位應按照有關要求,建立光伏電站運行管理信息系統,并向國家太陽能發電技術歸口管理單位報送相關信息。
第三十二條 光伏電站建設、調試和運行過程中,如發生人員傷亡、重大設備損壞及事故,項目單位應按規定及時向所在地能源監管部門和安全生產監督管理部門報告;如發現關鍵設備批量質量問題,項目單位應在第一時間向項目所在地能源主管部門報告,地方能源主管部門視情況上報國務院能源主管部門。
第三十三條項目單位不得自行變更光伏電站項目備案文件的重要事項,包括項目投資主體、項目場址、建設規模等主要邊界條件。
第三十四條 電網企業未按全額保障性收購的法律規定和有關管理規定完成收購光伏電站發電量,國家能源管理部門和監管機構責令電網企業限期糾正。按照《可再生能源法》第二十九條規定電網企業應承擔賠償責任。
第三十五條 本辦法由國家能源局負責解釋。
第三十六條本辦法自發布之日起施行。
〖六〗分布式方案
論文關鍵詞:資源網格 分布式 資源檢索
論文摘要:在格系統中,資源往往處于不同地區、不同結構的資源節點上,使用傳統的集中式的檢索機制無法勝任大量異構資源的檢索和發現。為了解決這個問題,研究設計了一個以XML為基礎的分布式檢索子系統。該系統通過同構的XML文件對不同資源節點上的本地資源進行描述,生成該節點上本地資源的描述XML文件,并以此為基礎,對多節點的大量資源文件實現了分布式的檢索。
目前,隨著現代信息技術在教育領域的廣泛應用,各地的中小學都擁有大量各種各樣的教學資源,包括教學課件、教學案例、精品課程教學視頻和各類輔助教學軟件等,但這些資源往往只能在有限的地域內尤其是校內才能訪問,互相之間發現和共享資源都十分困難,形成了許多的“信息孤島”,限制了不同學校、不同地域的信息交流和資源共享。因此,如何實現不同學校、不同地域之間的資源共享,提高資源的利用效率,避免同類資源的重復開發,是目前中小學教育信息化建設迫切需要解決的問題。
大量資源被分布在不同區域的不同資源節點上,每個節點對其所擁有資源的描述和存儲方式各有不同,有的通過各種數據庫,有的則通過一些資源描述文件來組織其本地資源,加之各種數據庫、描述文件之間往往是異構的,其各自的資源檢索機制也是多種多樣[不同主機上的資源可以通過松散耦合的方式實現共享,其中資源的管理、存儲機制與傳統的集中式的資源組織方式有著很大的不同。
XML是一種開放標準、簡單易用的語言,它支持國際化,與平臺、工具、數據庫、協議、編程語言無關,并且XML文件是基于文本的,易讀易寫,也易于在網絡中傳播。本文正是利用了XML語言的這些優點,通過同構的XML文件對不同資源節點上的本地資源進行描述,生成該節點上本地資源的描述XML文件,并以此為基礎,對多節點的大量資源文件進行分布式的檢索。
一、分布式檢索子系統的體系結構分析
在格的體系結構中,對資源的存儲和管理一般被分散在若干個具有不同結構的子節點上,本文定義這種節點為一個資源節點。資源節點一般位于一個較小的教學部門內,存儲了該部門一定數量的教學資源,并以web服務的方式供用戶和其它資源節點訪問。但不同資源節點的資源組織方式往往不同,有的是通過數據庫,有的是通過一些描述文件,而且數據庫的種類和結構也有很大的差別,這就導致不同資源節點之間資源共享和發現都十分困難。
在以上所描述的環境中,用戶如果想訪問這些資源,需要登陸每一個資源節點進行檢索和下載,但因為資源節點分布廣泛,數量眾多,用戶要盡快的檢索到自己所需要的全部資源存在一定的難度。分布式資源檢索策略可以有效的解決這一問題,該策略的思想是當用戶登陸任何一個資源節點的時候,這個節點除了要檢索自己本地的資源以外,還又作為一個客戶端,自動地去連接其它資源節點并發出檢索請求,將檢索結果進行合并和匯總后返回給用戶[2]。
二、本地資源的XML描述
在格系統中,資源通過各種協議由資源發布人上傳至資源節點。資源發布人在上傳過程中,需要指定資源的標題、所屬年級、學科、作者等描述信息,這些信息往往是資源檢索的依據。因此,本地資源的XML描述文件需要記錄以上的資源信息。為了實現所有資源的統一組織,這個XML文檔在不同的資源節點上應該是同構的。
根據以上的思想,需要對XML文檔進行統一規范。在一個資源節點的XML描述文檔中,XML頭部顯式定義文檔使用UTF—所屬年級、學科等。
在每一個資源節點上,只需一個節點管理程序,該程序會隨著其所屬本地資源的變動維護一個XML文檔,它的作用實質上是充當一個資源發言人的角色。其他站點只要通過這個XML文檔,就可以得到這個資源節點所管理的所有資源的信息,包括資源的描述信息和資源的地址信息。因此,對資源的檢索過程也就轉化為對這個XML文檔內容的檢索過程。
三、基于XPath的本地資源檢索
通過以上論述,對一個資源節點的檢索過程可以通過檢索其資源描述的XML文檔內容來完成。XPath是一門在XML文檔中查找信息的語言,它可以用來在XML文檔中對元素和屬性進行遍歷,使用路徑表達式來選取XML文檔中的節點或者節點集,可以通過XPath語言構造資源檢索語句。
在XPath中,有元素、屬性、文本、命名空間、處理指令、注釋和根節點七種類型的節點。在遍歷過程中,XML文檔是被作為節點樹來對待的。樹的根被稱為根節點,在根節點下,路徑表達式可以通過類似Windows操作系統文件夾的形式構造。
通過XPath語言構造出的資源檢索語句需要返回XML文檔的'資源描述中所包含的用戶所提供的檢索字符串中的資源項。在上文資源描述的定義規范中,對資源項的具體信息描述,如標題、所屬年級、學科等,都是以子元素的形式位于該資源項元素之下,因此,要想獲得該資源項元素,需要對已經查找到的包含用戶檢索字符串的元素進行軸路徑查找,以向上回溯獲得該元素的父節點,即所要返回的資源項元素。
四、基于JavaRMI的分布式檢索機制
在本文所描述的分布式資源共享的環境下,如果僅僅使用本地資源檢索,用戶需逐個登陸多個服務器以檢索所需要的資源,“信息孤島”的局面依然沒有解決,不能滿足分布式檢索子系統的要求。本文提出一種分布式檢索的機制,用戶登陸任意一臺服務器提交資源檢索字符串后,該服務器除在本地進行檢索之外,還將字符串檢索命令以洪泛的方式提交給它所知道的所有資源節點服務器。所有得到該命令的服務器分別在自己的XML資源描述文檔中查找是否包含用戶所需要的資源,如果有,則將該資源的描述信息和地址信息以結果集的形式返回給命令的發起服務器。由發起服務器負責將多個服務器返回的結果集進行合并、排序等操作,最后返回給用戶。 基于以上思想,分布檢索子系統可以采用JavaRMI技術來實現。JavaRMI是Java的一組支持開發分布式應用程序的API。RMI使用Java語言接口定義了遠程對象,集合了Java序列化和Java遠程方法協議。由于J2EE是分布式程序平臺,RMI機制可以實現程序組件在不同操作系統之間的通信,這樣就使原先的程序在同一操作系統的方法調用,變成了不同操作系統之間程序的方法調用。發起服務器將檢索命令提高的過程就可以看作是發起服務器對遠程服務器本地資源檢索方法的一次調用,通過RMI方法特有的JRMP協議,實現兩臺服務器命令的提交和結果集的返回。
五、分布式檢索的緩存策略和流程設計
引入分布式的檢索機制后,由于要對用戶的查詢請求使用洪泛的方式交付給每一個服務器處理,網絡的流量負擔會加重,造成檢索延遲的增大,影響到查詢效率。但資源節點服務器擁有的資源項相對固定,在一段時期內對服務器進行特定字符串檢索往往會返回同樣的結果。因此,采用在本地服務器中保存常用字符串檢索結果的緩存策略,會提高資源檢索的速度,降低網絡流量的壓力。為了獲取當前各資源節點的最新信息,還需要引入相應的超時和更新機制,限定緩存的生命周期,對緩存進行周期性的更新。
在緩存策略中,什么樣的字符串應該被緩存是首先要解決的問題。本文采用的是人工定義的方法,根據經驗定義一些字符串作為緩存項,主要是分類檢索的各個子項[“高二”,按學科分類檢索的子項“語文”、“數學”等。因為這些字符串相對比較固定且在教育網格的首頁設有鏈接,被檢索的幾率較高。
為管理好緩存并定時地創建、更新緩存項,在每一個服務器本地定義了一個XML文檔,該文檔描述了這臺服務器所有檢索緩存的字符串名稱、緩存更新的時間以及該字符串的類型信息。其中,字符串名稱不僅表示檢索時所對應的字符串,還表示該字符串檢索結果緩存在本地所保存的文件名;字符串的類型由type屬性決定;為方便地進行日期比較和時間差計算,緩存更新時間用該緩存項最后的更新時間與1970年1月1日之間的毫秒數來表示。
用戶提交檢索命令之后,檢索子系統首先讀取caches。xml文檔,檢查是否含有相應的緩存項的記錄。如果沒有,將其作為普通的字符串提交給分布式檢索引擎進行檢索。如果有,讀入該緩存項,提取出該緩存項的時間信息。如果該緩存最后更新時間與當前時間的差t大于規定的超時時間閾值tmax,則認定該緩存項超時,將該字符串提交給檢索引擎進行檢索,當結果集返回合并后,更新本地緩存文件,并更新caches。xml的相應更新時間信息。如果判定本地緩存項沒有超時,則直接讀入以字符串名命名的該緩存項的XML文件,作為結果集返回給用戶。
本文設計并實現了一個基于XML的分布式檢索子系統,該系統使用XML文檔作為一個資源節點的資源描述文件,并使用JavaRMI技術實現了分布式、多服務器的檢索。為提高檢索效率,降低網絡流量,還引入了緩存策略。該系統符合格系統的要求,有效的解決了不同地域、多種異構教育資源的共享問題。
參考文獻:
[。
[2]RahmanRM,BarkerK,AlhajjR。ReplicaPlacementDesignwithStaticOptimalityandDynamicMaintainability[C]//Proceedingsofthe6thIEEEInternationalSymposiumonClusterComputingandtheGrid。[S。1。]:IEEEPress,2006。
[:1—4?!?/p>
〖七〗分布式方案
這次小編給大家整理后的分布式水文模型在流域水資源開發利用中的應用研究進展,供大家閱讀參考。感謝網友“cj少女”向本站投稿了8篇與“分布式水文模型在流域水資源開發利用中的應用研究進展”相關的素材。
篇1:分布式水文模型在流域水資源開發利用中的應用研究進展<\/h2>
簡要闡述了我國水資源開發利用和管理研究的基本狀況.指出目前的水資源管理是基于一定水文規律的現狀水資源的調控與開發利用.認為在自然和人類活動的雙重作用下,水文循環規律發生了變化,具有物理基礎的分布式水文模型將為研究宏觀尺度上變化環境下水文循環規律和開發利用流域水資源提供科學有力的工具.回顧了國內外分布式水文模型的研發現狀,認為目前我國分布式水文模型的研究開發還不能適應水資源開發利用和管理的'現狀,開發具有物理基礎的分布式水文模型將為我國水資源開發利用和管理提供技術支撐和保障.最后給出了分布式水文模型建立過程中模型結構、尺度及模型參數的確定過程中存在的問題及處理方法.
作 者:劉金濤 馮杰 張佳寶 LIU Jin-tao FENG Jie ZHANG Jia-bao ?作者單位:劉金濤,LIU Jin-tao馮杰,FENG Jie
張佳寶,ZHANG Jia-bao
刊 名:中國農村水利水電? ISTIC PKU英文刊名:CHINA RURAL WATER AND HYDROPOWER?年,卷:?“”?分類號:P331?關鍵詞:水資源 ??分布式水文模型 ??流域 ??水文循環 ?篇2:水文網絡模型在分布式流域水文模擬中的應用<\/h2>
水文網絡模型在分布式流域水文模擬中的應用
水文網絡模型是地理信息系統對流域實際河網水系的一種規范化描述,它采用拓撲關系來確定流域水流的`空間聚合與分散.準確地描述水文網絡對成功模擬流域水流的空間分布起著至關重要的作用.水文網絡數據模型的關鍵在于如何表達水文網絡的構成要素,以及如何建立要素間的拓撲關系.本文重點闡述了水文網絡模型在分布式流域水文模擬中的應用.實例研究證明,采用水文網絡模型來表達流域河網水系結構有助于準確地模擬流域上水流的空間與時間分布.
作 者:熊立華 郭生練 陳華 林凱榮 程進強 XIONG Li-hua GUO Sheng-lian CHEN Hua LIN Kai-rong CHENG Jin-qiang ?作者單位:武漢大學,水資源與水電工程科學國家重點實驗室,湖北,武漢,430072?刊 名:水文? ISTIC PKU英文刊名:JOURNAL OF CHINA HYDROLOGY?年,卷:2007?27?分類號:P333.2?關鍵詞:水文網絡 ??拓撲關系 ??分布式水文模型 ??地理信息系統 ?篇3:分布式水文模型構建及在黃河區間流域的應用<\/h2>
分布式水文模型構建及在黃河區間流域的應用
選擇位于黃河支流洛河中游的長水-宜陽區間流域作為研究對象,基于數字高程模型,計算柵格水流方向、集水面積和柵格演算次序,為產匯流計算打下基礎.把1個柵格單元作為1個小子流域,基于柵格采用新安江模型進行產流計算,采用Muskingum-Cunge算法進行河道洪水演算.結果表明,基于DEM的分布式水文模型在洪峰誤差控制和過程擬合等方面表現較好,洪水模擬具有較高的精度.
作 者:李巧玲 菅浩然 李致家 姚成 Li Qiaoling Jian Haoran Li Zhijia Yao Cheng ?作者單位:李巧玲,李致家,姚成,Li Qiaoling,Li Zhijia,Yao Cheng菅浩然,Jian Haoran
刊 名:水力發電? ISTIC PKU英文刊名:WATER POWER?年,卷:?32?分類號:P64?關鍵詞:數字高程模型 ??新安江模型 ??柵格單元 ??黃河區間流域 ?篇4:分布式水文模型在西南巖溶地區的應用前景<\/h2>
分布式水文模型在西南巖溶地區的應用前景
由于西南巖溶地區含水介質的多重性和高度復雜性,巖溶地下河系統水資源的評價與預測一直是需要解決的重點與難點.運用傳統的水文地質方法來實現地下河流域水資源定量評價,無論在理論、方法和技術手段等方面都遇到了挑戰.在對西南巖溶地區水文地質條件分析的.基礎上,評價了傳統的流域水文模型應用于西南巖溶地下河系水量評價取得的成果及其局限性,并根據巖溶地下河和地表水在分布、變化等多方面的相似性,闡述了通過將巖溶地下河和表層巖溶帶的概化,對分布式水文模型地下水徑流模塊進行改進,并對該模型在西南巖溶地下河水資源評價的可行性和應用前景進行展望.
作 者:賈曉青 杜欣 陳植華 JIA Xiao-qing DU Xin CHEN Zhi-hua ?作者單位:賈曉青,杜欣,JIA Xiao-qing,DU Xin陳植華,CHEN Zhi-hua
刊 名:人民長江? PKU英文刊名:YANGTZE RIVER?年,卷:?39?分類號:P333?關鍵詞:巖溶地下河 ??分布式水文模型 ??水量評價 ??應用 ?篇5:VIC陸面水文模型在白蓮河流域徑流模擬中的應用<\/h2>
VIC陸面水文模型在白蓮河流域徑流模擬中的應用
本文從氣象與水文水資源學科交叉的角度引進VIC陸面水文模型,將其應用于湖北省白蓮河流域,探討模型在中小流域降雨徑流模擬中的適用性.本研究利用白蓮河流域DEM、植被、土壤等數字化資料,經過模型預處理,建立了白蓮河流域VIC模型框架.并進行了模型參數敏感性分析.模擬結果表明,模型基本能夠反映該流域的'日徑流水文過程,具有一定適用性.
作 者:宋星原 余海艷 張利平李丹穎 SONG Xing-yuan YU Hai-yan ZHANG Li-ping LI Dan-ying ?作者單位:宋星原,余海艷,張利平,SONG Xing-yuan,YU Hai-yan,ZHANG Li-ping李丹穎,LI Dan-ying
刊 名:水文? ISTIC PKU英文刊名:JOURNAL OF CHINA HYDROLOGY?年,卷:?27?分類號:P338+.9?關鍵詞:陸面水文模型 ??VIC模型 ??白蓮河流域 ??徑流模擬 ?篇6:SWAT模型及其在水環境非點源污染中的應用研究進展<\/h2>
SWAT模型及其在水環境非點源污染中的應用研究進展
摘要:非點源污染是水環境污染的主要來源之一,其過程機理復雜,應用水環境污染模型模擬是研究非點源污染的重要手段.SWAT模型是國際上著名的分布式流域水環境模型之一,結合了遙感、地理信息系統技術,能夠準確、長時間段連續地模擬復雜流域的各種水環境過程以及氣候變化、土地利用類型、管理措施對流域水平衡和非點源污染的影響,為監測、評價、研究流域水環境非點源污染狀況提供了強大的支持平臺.在大量調研國內外相關文獻的基礎上,圍繞模型的主要標志性改進及應用成果介紹了SWAT模型的發展歷程和現狀,論述了模型應用于水環境非點源污染研究的幾個主要方面和國內外研究新進展,分析了目前國內應用SWAT模型進行水環境非點源污染研究存在的問題,并對SWAT非點源污染子模型的.發展趨勢做了展望,以推廣這一先進模型在國內的應用范圍,提高非點源污染模擬、監測、評價工作的效率及結果的可靠性.作 者:楊菁薈 ?? 張萬昌 ?? YANG Jing-hui ?? ZHANG Wan-chang ?作者單位:楊菁薈,YANG Jing-hui張萬昌,ZHANG Wan-chang
期 刊:水土保持研究? ISTICPKU ?Journal:RESEARCH OF SOIL AND WATER CONSERVATION?年,卷:,?16?分類號:X522?關鍵詞:SWAT ?? 非點源污染 ?? 分布式模型 ?? 水環境 ??篇7:基于SRTM的SNOW-TOPMODEL模型在瑪納斯河流域的應用<\/h2>
基于SRTM的SNOW-TOPMODEL模型在瑪納斯河流域的應用
基于分辨率90m網格的.瑪河流域SRTM數據,提取了瑪納斯河流域的河網和地形指數,生成的河網與實際河網基本接近.將加入融雪模塊TOPMODE應用于瑪河流域,對模型計算結果進行誤差評價并分析誤差產生的原因.由瑪納斯河流域應用加入融雪模塊的TOPMODEL模型可以看出,該模型在瑪納斯河流域有較好的適應性,可以將此模型應用于瑪納斯河流域的洪水預報.
作 者:楊武建 姜卉芳 劉婧然 谷新保 YANG Wu-jian JIANG Hui-fang LIU Jing-ran GU Xin-bao ?作者單位:新疆農業大學水利與土木工程學院,新疆,烏魯木齊,830052?刊 名:地下水?英文刊名:UNDERGROUND WATER?年,卷:2009?31?分類號:P641.8?關鍵詞:瑪納斯河 ??SRTM ??TOPMODEL ??地形指數 ??融雪 ?篇8:水文水資源管理在水利工程中的運用論文<\/h2>
摘要:我國水資源豐富,但人均資源不足,且我國水資源污染問題嚴重,在此種情況下,水文水資源管理工作的開展至關重要。將水文水資源管理工作運用于水利工程實施的過程中,能夠為水利工程提供更加準確可靠的資料信息,促進水利工程的順利進行?;诖?,本文分析了水文水資源管理應用于水利工程中重要性,研究了現階段水利工程中水文水資源管理的應用現狀和水文水資源管理在水利工程的應用。
關鍵詞:水文水資源管理;水利工程;應用現狀;應用措施
1緒論
水利工程在我國社會經濟發展具有重要的作用和地位,在進行水利工程建設的過程中,為了提升水利工程建設方案的科學性、合理性與可行性,確保水利工程的質量,促進水利工程建設的順利進行,必須保證所獲取的相關資料信息的準確性。將水文水資源管理工作運用于水利工程中,能夠為水利工程項目的開展提供更加準確可靠的資料,促進水利工程的平穩可靠運行。
