資料庫驗收
❶ 數據匯交
數據匯交的最終方式是以網路的形式進行,為此必須 要建立一個基於網路的數據匯交系統。
數據匯交應以項目任務書中規定的研究任務和考核指標為主要依據,匯交的內容包括科學數據實體、科學數據描述信息和科學數據輔助工具軟體三個部分。 科學數據實體是在科技計劃形成的原始數據及基於原始數據或研究分析數據所形成的完整資料庫或數據文件。
拓展資料:
農業科學數據匯交管理辦法
第一章 總則
第一條 為了規范國家科技基礎條件平台建設項目中農業科學數據的匯交工作,加強對農業科學數據的管理,實現農業科學數據共享,依據根據國家科技基礎條件平台建設和科學數據共享工程的有關指導性文件,制定本辦法。
第二條 農業科學數據的匯交、保管以及科農業學數據匯交工作的管理和監督適用本辦法。
第三條 本辦法所稱農業科學數據是指在農業科技活動中產生的原始性、基礎性數據,以及按照不同需求系統加工整理的各類數據集。主要通過科技工作者所開展的研究活動、觀測、地面監測站(點)、自下而上的統計、各種實驗、宇宙空間的探測、從若干相關數據資源中整理選擇等手段和方法來獲取。
第五條 農業科學數據的匯交是在科技部科學數據共享工程統一指導下,在農業主管部門領導下,由農業科學數據共享中心承擔單位按照部門負責制和分級分類管理的原則組織實施。
第六條 涉及國家秘密或者知識產權的農業科學數據的匯交、保護、公開和利用,按照國家有關法律、法規的規定執行。
第二章 匯交農業科學數據的種類及范圍
第七條 依據本辦法匯交的農業科學數據應當是在農業科學數據共享中心統一規劃下的數據范圍,所有數據按農業科學數據中心總體設計要求,符合有關的技術標准和質量要求,具有科學價值和實用價值。
第八條 匯交的農業科學數據是在農科技活動中產生的原始性觀測數據、探測數據、試驗數據、實驗數據、調查數據、考察數據、統計數據以及按照某種需求系統加工的數據和相關的元數據等。
第九條 匯交的數據按照項目規定的格式以電子文件形式匯交。匯交前應呈送子課題合同書和數據匯交計劃。
第十條 對於涉及已經獲得專利或其他權利保護以及正在申請專利或其他權利保護的農業科學數據,應當提交有關證明材料。
❷ 空間資料庫質量
一、資料庫質量控制
資料庫建設工作進程及質量管理按照新疆地調院ISO9001—2000質量體系的規定運行的,嚴格按中國地質調查局全國地下水資源及其環境問題調查評價技術要求系列一、地下水資源調查數據錄入系統的要求進行資料整理及數據錄入。
為保證建庫數據的質量,項目組制定了一套完善的項目監理制度。建立由項目綜合研究組-項目負責人-項目組長「三級」負責制和與之對應的「三級」質量檢查制度。明確參加項目人員的工作職責,確保參加人員的基本專業素質,加強業務培訓工作。數據錄入過程中建立工作日誌制度,分階段進行數據檢查。以上檢查均進行自檢、互檢、質檢組檢查,檢查結果記錄下來,並進行修改,技術負責簽名認可。地調院信息中心派專家進行了全過程質量跟蹤監控,並組織了兩次全面檢查。最終由項目牽頭單位對空間資料庫建設完成的建庫數據進行檢查、驗收、匯總,完成空間資料庫的數據集成。
二、資料庫綜合質量分析
准噶爾盆地資料庫具體內容包括以原始資料為主體的屬性資料庫和圖形資料庫。屬性資料庫包括資料准備、數據採集、數據錄入及各類數據質量檢查工作。圖形資料庫主要為綜合成果圖完成的單圖層資料庫。最終由水文地質環境地信息應用系統將屬性數據與圖形數據集成。
(一)屬性資料庫質量分析
1.屬性卡片質量
屬性卡片包括本次工作實測資料及收集資料。首先對各類資料進行分類整理,並建立數據卡片。在工作中嚴格執行自檢互檢制度,並分別於2003年11月26日、2004年11月27~28日、2005年10月18日每年度野外工作結束由新疆地質調查院組織新疆地礦局第一水文隊、第二水文隊有關工作人員及專家於2004年11月27~28日對野外工作及收集資料進行檢查驗收,均評為優秀。野外工作全部結束,由中國地質科學院水文地質環境地質研究所及西安地調中心組織有關專家,於2005年10月25~28日對該項目進行了最終野外驗收,專家評分90分,評定為優秀級。項目組成員在每次野外驗收結束後均為對資料中存在的問題和不足之處進行了認真修改完善。
2.屬性資料庫數據質量
屬性數據錄入工作按中國地質調查局水文地質環境地質調查中心研究開發的《水文地質環境地質調查數據錄入系統》及其使用手冊的要求對各類資料進行數據錄入。為保證錄入數據的質量,項目組建立工作日誌,並開展自互檢及抽檢工作,對存在的問題及時修改。最終由新疆地調院組織專家對建庫數據進行最終檢查驗收,項目組對地調院專家組檢查提出的問題,進行了認真的檢查修改。在資料庫建設初步完成階段,由中國地質調查局水環部委託中國地質科學院水文地質環境地質研究所於2006年3月10~13日在石家莊對資料庫成果進行了檢查,檢查結束後,項目組於2006年3月17~4月30日對存在的問題進行了認真修改,對未完成的工作量進行補充。補充完成的數據有:野外照片數據表50張、野外調查路線表27張、農村灌溉用水及生活用水典型井核查表各15張,水源地綜合調查表50張、水源地開采量統計表50張、土地荒漠化野外調查表21張、土地鹽漬化野外調查表20張、物探測深成果匯總表689張、分區地下水開采量統計匯總表24張、古地磁測試綜合成果表517張,地質項目資料整理匯總表34張;並對補充資料進行了自互檢工作,對已錄入完成的鑽孔資料進行了補充。對所有掃描完成的插圖以JPG格式進行了導入,並對最終修改完善的數據進行了匯總。
(二)圖形資料庫質量分析
圖形數據按照全國地下水資源及其環境問題調查評價技術要(二)、(三)進行編制,並由新疆地質調查院組織專家對完成的各類圖件進行檢查驗收,驗收通過後的圖件按《地下水資源調查評價資料庫標准》進行圖紙掃描—分層矢量化—對照原圖校對(修改、補充)—誤差校正,採集校正控制點不低於13個點(由掃描圖紙變形帶來的誤差、設備誤差、採集誤差)—投影轉換—節點平差(設定容差)—線拓撲錯誤檢查—線轉弧段—拓撲重建—區拓撲錯誤檢查。
圖形屬性數據(內部屬性)的錄入是通過MAPGIS屬性庫管理系統輸入完成,完全遵照《地下水資源調查評價資料庫標准》的要求,按照不同圖層所反映的專業內容涉及的屬性欄位進行逐項填寫,此項工作由專題組統一組織項目組人員進行匯總完成。
❸ 數據中心集成項目驗收資料膠裝都包括哪些部分
不同的項目驗收時需要提交的資料也會有所不同。中檢賽辰的對數據中心集成項目驗收經驗,驗收時需要對文檔資料進行膠裝。比如:
一、軟體調研方案、調研培訓及模板制定、軟體需求調研(需求規格說明書) ,調研記錄,調研分析報告;
二、軟體概要設計,詳細設計及報審表;
三、資料庫設計、數據字典及報審表;
四、軟體開發項目季度進度報告單
五、初驗報審及支付憑證
六、第三方檢測報告(有些項目要求進行軟體安全測試)、等級保護等
七、系統試運行申請表;試運行記錄、試運行報告
八、軟體測試方案 、測試記錄、測試報告(功能、性能) ;
九、、軟體部署方案、配置、記錄、報告;
十、聯調、測試方案、記錄、報告;
❹ 檔案數字化流程大概是怎樣的
一、術語和定義
1、數字化
用計算機技術將模擬信號轉換為數字信號的處理過程。
2、紙質檔案數字化
採用掃描儀或數碼相機等數碼設備對紙質檔案進行數字加工,將其轉化為存儲在磁帶、磁碟、光碟等載體上並能被計算機識別的數字圖像或數字文本的處理過程。
3、數字圖像
表示實物圖像的整數陣列。一個二維或更高維的采樣並量化的函數,由相同維數的連續圖像產生。在矩陣(或其他)網路上采樣——連續函數,並在采樣點上將值最小化後的陣列。
4、黑白二值圖像
只有黑白兩級灰度的數字圖像。它對應於黑白兩種狀態的文字稿、線條圖等。
5、連續色調靜態圖像
以多於兩級灰度的不同濃淡層次或以不同顏色通道組合成的靜態數字圖像。在紙質檔案數字化過程中,通常表現為灰度掃描和彩色掃描兩種模式。
6、解析度
單位長度內圖像包含的點數或像素數,一般用每英時點數(dpi)表示。
7、失真度
對檔案進行數字化轉換後,數字圖像與檔案原件在色彩、幾何等方面的偏離程度。
8、可懂度
數字圖像向人或機器提供信息的能力。
9、圖像壓縮
清除圖像冗餘或圖像近似的任一種過程,其目的是對圖像以更緊湊的形式表示。
二、紙質檔案數字化基本要求
1、基本原則
紙質檔案數字化的基本原則是使檔案信息資源准確方便快捷地提供利用,使可以公開的檔案信息資源得到共享,以滿足社會對檔案利用的需求。
2、數字化對像的確定原則
應當對所要進行數字化的對象按照一定的原則和方法進行確認,只有符合一定要求的紙質檔案文獻才能進行數字化。
1)符合國家法律法規的原則
紙質檔案的數字化,必須符合國家檔案開放規定以及有關規定。
2)價值性原則
屬於歸檔范圍且應永久或長期保存的、社會利用價值高的檔案可列入數字化加工的范圍。
3、基本環節
紙質檔案數字化的基本環節主要包括:檔案整理、目錄建庫、檔案掃描、圖像處理、圖像存儲、數據質檢、數據掛接、數據驗收、數據備份、成果管理等。
4、 過程管理
1)應加強紙質檔案數字化各環節的安全保密管理機制,確保檔案原件和數字化檔案信息的安全.
2 )紙質檔案數字化的各個環節均應進行詳細的登記,並及時整理、匯總,裝訂成冊,在數字化工作完成的同時建立起完整、規范的記錄。
三、檔案整理
在掃描之前,根據檔案管理情況,按下述步驟對檔案進行適當整理,並視需要作出標識,確保檔案數字化質量。
1 目錄數據准備
2 拆除裝訂
3 區分掃描件和非掃描件
4 頁面修整
5 檔案整理登記
6 裝訂
四、檔案掃描
1、掃描方式
1)根據檔案幅面的大小(A4、A3、A0等)選擇相應規格的掃描儀或專業掃描儀(如工程圖紙可採用0號圖紙掃描儀)進行掃描。大幅面檔案可採用大幅面數碼平台,或者縮微拍攝後的膠片數字化轉換設備等進行掃描,也可以採用小幅面掃描後的圖像拼接方式處理。
2)紙張狀況較差,以及過薄、過軟或超厚的檔案,應採用平板掃描方式;紙張狀況好的檔案可採用高速掃描方式以提高工作效率。
2、掃描色彩模式
1)掃描色彩模式一般有黑白二值、灰度、彩色等。通常採用黑白二值。
2)頁面為黑白兩色,並且字跡清晰、不帶插圖的檔案,可採用黑白二值模式進行掃描。
3)頁面為黑白兩色,但字跡清晰度差或帶有插圖的檔案,以及頁面為多色文字的檔案,可採用灰度模式掃描。
4)頁面中有紅頭、印章或插有黑白照片、彩色照片、彩色插圖的檔案,可視需要採用彩色模式進行掃描。
3 、掃描解析度
1)掃描解析度參數大小的選擇,原則上以掃描後的圖像清晰、完整、不影響圖像的利用效果為准。
2)採用黑白二值、灰度、彩色幾種模式對檔案進行掃描時,其解析度一般均建議選擇≥100dpi。特殊情況下,如文字偏小、密集、清晰度較差等,可適當提高解析度。
3)需要進行OCR漢字識別的檔案,掃描解析度建議選擇≥200dpi。
4、掃描登登記
認真填寫紙質檔案數字化轉換過程交接登記表單,登記掃描的頁數,核對每份文件的實際掃描頁數與檔案整理量填寫的文件頁數是否一致,不一致時應註明具體原因和處理方法。
五、圖像處理
1 、圖像數據質量檢查
1)對圖像偏斜度、清晰度、失真度進行檢查。發現不符合圖像質量要求時,應重新進行圖像的處理。
2)由於操作不當,造成掃描的圖像文件不完整或無法清晰識別時,應重新掃描。
3)發現文件漏掃時,應及時補掃並正確插入圖像。
4)發現掃描圖像的排列順序與檔案原件不一致時,應及時進行調整。
5)認真填寫相關表單,記錄質檢結果和處理意見。
2、糾偏
對出現偏斜的圖像應進行糾偏處理,以達到視覺上基本不感覺偏斜為准。對方向不正確的圖像應進行旋轉還原,以符合閱讀習慣。
3、去污
對圖像頁面中出現的影響圖像質量的雜質如黑點、黑線、黑框、黑邊等應進行去污處理。處理過程中應遵循在不影響可懂度的前提下展現檔案原貌的原則。
4、圖像拼接
對大幅面檔案進行分區掃描形成的多幅圖像,應進行拼接處理,合並為一個完整的圖像,以保證檔案數字化圖像的整體性。
5、裁邊處理
採用彩色模式掃描的圖像應進行裁邊處理,去除多餘的白邊,以有效縮小圖像文件的容量,節省存儲空間。
六、圖像存儲
1、存儲格式
1)採用黑白二值模式掃描的圖像文件,一般採用TIFF(G4)格式存儲。採用灰度模式和彩色模式掃描的文件,一般採用JPEG格式存儲。存儲時的壓縮率的選擇,應以保證掃描的圖像清晰可讀的前提下,盡量減小存儲容量為准則。
2)提供網路查詢的掃描圖像,也可存儲為CEB、PDF或其他格式。
2、圖像文件的命名
1)紙質檔案目錄資料庫中的每一份文件,都有一個與之相對應的唯一檔號,以該檔號為這份文件掃描後的圖像文件命名。
2)多頁文件可採用該檔號建立相應文件夾,按頁碼順序對圖像文件命名。
七、目錄建庫
1、數據格式選擇
目錄建庫應選擇通用的數據格式。所選定的數據格式應能直接或間接通過XML文檔進行數據交換。
2、檔案著錄
按照《檔案著錄規則》(DA/T18)的要求進行著錄,建立檔案目錄資料庫。
3、目錄數據質量檢查
採用人工校對或軟體自動校對的方式,對目錄資料庫的建庫質量進行檢查。核對著錄項目是否完整、著錄內容是否規范、准確,發現不合格的數據應要求進行修改或重錄。
八、數據掛接
1、匯總掛接
檔案數字化轉換過程中形成的目錄資料庫與圖像資料庫,通過質檢環節確認為「合格」後,通過網路及時載入到數據伺服器端匯總。通過編製程序或藉助相應軟體,可實現目錄數據對相關聯的數字圖象的自動搜索、加入對應的電子地址信息等,實現批量、快速掛接。
2、數據關聯
以紙質檔案目錄資料庫為依據,將每一份紙質檔案文件掃描所得的一個或多個圖像存儲為一份圖像文件。將圖像文件存儲到相應文件夾時,要認真核查每一份圖象文件的名稱與檔案目錄資料庫中該份文件的檔號是否相同,圖像文件的頁數與檔案目錄資料庫中該份文件的頁數是否一致,圖像文件的總數與目錄資料庫中文件的總數是否相同等。通過每一份圖像文件的文件名與檔案目錄資料庫中該份文件的檔號的一致性和唯一性,建立起一一對應的關聯關系,為實現檔案目錄資料庫與圖像文件的批量掛接提供條件。
3、認真填寫紙質檔案數字化轉換過程交接登記表單,記錄數據關聯後的頁數,核對每一份文件關聯後的頁數與檔案整理、掃描時填寫的頁數是否一致,不一致時應註明具體原因和處理辦法。
九、數據驗收
1、數據抽檢
1)以抽檢的方式檢查已完成數字化轉換的所有數據,包括目錄資料庫、圖像文件及數據掛接的總體質量。
2)一個全宗的檔案,數據驗收時抽檢的比率不得低於5%。
2、驗收指標
1)目錄資料庫與圖像文件掛接錯誤碼,或目錄資料庫、圖像文件之一出現不完整、不清晰、有錯誤等質量問題時,抽檢標記為「不合格」。
2)一個全宗的檔案,數字化轉換質量抽檢的合格率達到95%以上(含95%)時,給予以驗收「通過」。
合格率:抽檢合格的文件數/抽檢文件總數×100%
3、驗收審核
驗收「通過」的結論,必須經分管領導審核、簽字後方有效。
4、驗收登記
認真填寫紙質檔案數字化驗收登記表單。
十、數據備份
1、備份范圍
經驗收合格的完整數據應及時進行備份。
2、備份方式
為保證數據安全,備份載體的選擇應多樣化,可採用在線、離線相結合的方式實現多套備份,並注意異地保存。
3、數據檢驗
備份數據也應進行檢驗。備份數據的檢驗的內容主要包括備份數據能否打開、數據信息是否完整、文件數量是否准確等。
4、備份標簽
數據備份後應相應的備份介質上做好標簽,以便查找和管理。
5、備份登記
填寫紙質檔案數字化備份管理登記表單。
十一、數字化成果管理
1、應加強對紙質檔案數字化成果的管理,確保其安全、完整和長期可用。
2、紙質檔案數字化成果提供網上檢索利用時,應有製作單位的電子標識,並根據具體情況分別採用可下載或不可下載的數據格式。
❺ 想請問做過資料庫管理的朋友幾個簡單的問題...
這個明顯是政府下管理的Library,招人一般都這樣條件的。我簡單說一說吧。
1、數據管理最基本的職能當然是錄入(導入)、查詢(導出、加工)、修改、刪除。
2、數據收割(Harvesting) 是在網際網路上分布式檢索不同的資源庫(repositories),獲取元數據在本地集中式建庫的一種做法。數據清洗的任務是過濾那些不符合要求的數據。驗收就是查驗錄入或提交的數據是否正確,合格,呈交是將正確的數據上報的程序。
3、質量控制就是通過完整校驗、關系校驗等控制輸入數據的正確,當然也包括錄入人員的培訓等。
4、這個比較泛。簡單理解用一些指標來評估質量,比如使用效率,產出效率,出錯率等。
5、參加抽調工作,幫領導修電腦和領導一起喝酒等。
❻ 資料庫到底指的是什麼幾個意思啥意思
簡單的說,資料庫就是存儲數據的地方(庫指倉庫):注意,是存儲!!!
資料庫一般使用sql語言進行增刪改查
基本上這就是資料庫
❼ 對成果地質調查資料接收和驗收的幾點體會與思考
於華
(天津地質礦產研究所,天津300170)
摘要 成果地質調查資料管理經歷了六年多的歷程,本文就接收、驗收工作中的情況,談了一些體會,並提出幾點相關建議。
關鍵詞 成果地質調查資料;體會;建議
自1999年開展國土資源大調查以來,在1:5萬和1:25萬區域地質調查、礦產資源評價、1:5萬和1:20萬化探、1:20萬區域重力、異常查證、技術方法、地下水資源調查評價、地質環境評價、地質災害調查、資料庫、遙感地質、科學研究等方面都取得了一大批成果。形成了大量的成果地質調查資料。
1 2002年以來成果地質調查資料接收和驗收現狀與體會
全國地質資料館及中國地質調查局天津、沈陽、南京、宜昌、成都、西安地質資料館作為中國地質調查局資料管理單位,對地質調查項目形成的成果地質調查資料,根據工作地區分屬,進行接收以及驗收、轉交、保管、服務工作。
圖1 大區成果地質調查資料接收、驗收流程
近六年工作以來,筆者積累了一定的工作經驗,先後對不同專業的資料狀況有了深刻的了解;對現代資料工作內容有了較深刻的理解;也已形成基本的接收、驗收工作程序(圖1)。
1.1 接收方面
目前地質調查項目的承擔單位是由不同行業的地質部門的項目組承擔,其對資料匯交規定不熟悉,資料崗位人員不健全,許多都是兼職,只能少部分精力用在資料管理上,無暇顧及新形式下資料管理的新任務及業務水平的提高,導致中國地質調查局資料管理單位接收工作產生許多障礙。如電子文件拷貝錯誤、輸出錯誤、裝訂錯漏頁等。
1.2 驗收方面
附圖的驗收:除特殊專業外,目前大部分都是使用MAPGIS製作的,很少部分是用AUTOCAD、CORELDRAW等制圖軟體製作的。對於用MAPGIS製作的圖,在驗收時,首先要搞清楚其對應的系統庫、漢字型檔,在正確設置其目錄路徑情況下,打開其工程文件,才能保證點、線、面文件是正確使用的,否則圖面上顯示的點、線、面內容是不正確的。現資料部門普遍注重系統庫的配套,經常忽視漢字型檔。其實與其製作時所用的漢字型檔配套也挺重要的,MAP GIS作圖時用到的漢字型檔基本有兩類,一是適量字型檔(即大家通常所說的MAPGIS自帶字型檔),另一種是Truetype字型檔(即Windows下的字體)。有許多情況是在電子文件中未將其製作時所用的漢字型檔附上,只說明其用的是MAPGIS自帶的漢字型檔,這只說明其使用的不是Truetype字型檔(即Windows下的字體),殊不知MAP GIS自帶的字型檔也有幾種,不是唯一的,曾經就出現過在驗收時,在用其說明中所註明的相同MAP GIS版本字型檔配套的情況下,打開文件後發現其文字顯示有疊加現象,重新配套上其製作時所用的MAP GIS漢字型檔後,一切正常。因此驗收時,在按電子文件的說明、註明正確配套的情況下,當發現圖面內容不正確時,首先對其系統庫、漢字型檔的正確性進行確定,其次是對其點、線、面文件的正確性的確定。一定不能籠統認為都是點、線、面文件本身的錯誤。在這個確認的過程中對驗收人員來說,就要有一定的地質專業基礎,不然是很難做出正確的結論的。對於驗收用AUTOCAD、CORELDRAW軟體製作的圖時也同樣需要關注類似上述方面的問題,只是配套方式不同罷了。還有對於用MAP GIS製作的圖件,在用比製作時的版本高的軟體進行驗收,發現多個圖中某類線型有同樣的異常,且沒有其他問題時,重新用其製作時的版本進行檢查,若正常的話,這是版本的差異,不是錯誤。另外還要注意在檢查矢量圖時要選擇還原顯示狀態。
上述所說的不正常情況有幾種:①矢量電子文件圖面顯示大批或個別圖式,與正常的紙介質和柵格圖像文件不同,是由提交的電子配套系統庫不正確導致。②柵格圖像文件和矢量電子文件圖面顯示大批或個別圖式,與正常的紙介質不同,是輸出柵格圖像文件時所用的和提交的電子配套系統庫不正確導致。③矢量電子文件圖面顯示缺失部分文字內容或部分字體、字間距與紙介質和柵格圖像文件的不同,是提交的漢字型檔不正確導致。④柵格圖像文件和矢量電子文件圖面顯示缺失部分文字內容或部分字體、字間距與紙介質不同,是在輸出柵格圖像文件時所用的和提交的電子配套漢字型檔不正確導致。⑤紙介質和兩種電子文件完全一致,但都不正常,大批或個別圖式不正常,紙介質和兩種電子文件完全一致,但都不正常,缺圖名、圖中部分注釋等文字內容,一是由於在輸出紙介質、柵格文件時所用的系統庫及提交的電子配套系統庫都不正確,不是製作電子文件時所用的。二是由於在輸出紙介質、柵格文件時所用的漢字型檔及提交的電子配套漢字型檔都不正確,不是製作電子文件時所用的。
資料庫的驗收:資料庫產品有多種形式,要視成果地質資料的情況而定,是空間資料庫就一定是屬性信息和空間信息並舉。資料人員通常根據其文字報告中基本數據信息的描述進行核對,如空間數據的文件格式、文件數量,各類外部屬性信息的記錄數、內部屬性有無等數量性、存在性檢查。對於純資料庫項目成果檢查要復雜許多,形式也多樣;總之因具體情況而進行基本數量性、存在性檢查。對於鑲嵌在系統中的資料庫,則要通過其軟體中的一些功能來實現對信息的檢查。
2 對成果地質調查資料接收和驗收的建議
2.1 提交和接收方式的建議
成果地質調查資料提交單位向中國地質調查局資料管理單位提交評委審查認定稿1份,包括蓋審查認定章的紙介質文件,專家認可的成果所有內容的電子文件;以及與之對應的資料報送單。該單類同現在的電子文件登記表或評審意見書中的提交技術文件目錄中的成果部分的細化。
2.2 成果資料製作的建議
集中製作電子文檔,由中國地質調查局資料管理單位組建製作團隊,按電子文件匯交格式要求及服務需求,承擔成果地質調查資料的電子文件及紙介質的製作、復制任務。製作、復制費由資料提交單位。每份成果要在合格後90天內完成製作、復制。
2.3 執行建議後大區成果地質調查資料接收、驗收流程(圖2)
2.4 執行上述建議的優點
減輕項目承擔單位的負擔;解決提交單位資料管理人力資源不足問題;消除了接收單位與提交單位在成果製作與提交之間的摩擦;提高製作效率;避免了轉手製作產生的錯誤;能達到服務的及時性,便於服務;不用解決長期以來形成的資料管理部門與成果認定技術管理部門之間的不銜接問題,因提交與接收之間消除了審查認定後重製作過程;提交期限可由現在的180天大大縮短;避免了目前反復製作修改、提交的現象,減少了成果地質調查資料的接收、驗收工作量,縮短了提交到合格的周期;提供服務的成果整齊劃一,同時便於成果資料製作質量的提高;資料接收單位的電子文件(集中)製作團隊,通過製作工作具備了一定的技術水平,在人員充足的情況下,可承擔下絕大部分電子文件的製作工作,個別特殊專業的可適當採取委託方式。十年大調查下來,積累了各個專業的資料,但製作成果資料的軟體在飛速發展,低版本軟體製作的成果電子文件急需進行升級遷移,才能保證其能正常使用,提供服務,不然現狀延續下去,到使用時,版本相差太大,低版本軟體或可遷移(轉換)軟體早已消失,那會將一些電子成果變成廢品,無法使用。
圖2 建議的成果資料接收、驗收流程
❽ 成果地質資料匯交中地質圖空間資料庫的檢查驗收
方 敏 蔡曉斌
(中國地質大學地調院)
摘 要 從源頭控制信息數據的質量,加強對成果地質圖空間資料庫的檢查驗收,使地質圖空間資料庫的數據屬性、格式達到相關標准,有利於今後的連圖與地質資料再利用。本文簡要介紹了空間資料庫的建庫過程,對在資料匯交的數據檢查驗收過程中遇到的一些普遍性問題及解決方法進行了探討。
關鍵詞 資料匯交 空間數據 庫檢查驗收
目前,數字填圖技術已在「新一輪國土資源大調查」和「礦產保障工程」中廣泛使用,「三維地質填圖」技術的試點工作也已經鋪開,為繼續「推進地質資料信息服務集群化、產業化」提供了強大的技術支持。
地質資料信息服務,基礎地質數據是關鍵,沒有數據,服務就是一句空話。各項目實施單位對區域地質調查數字填圖產生的基礎數據和最終提交的地質圖空間資料庫進行必要的質量檢查和把關,從源頭控制信息數據質量,成為提供高質量數據的必要措施。
在對我院承擔的區域地質調查項目成果資料的歸檔和匯交驗收過程中,特別是對地質圖空間資料庫的檢查工作中,發現一些普遍存在的問題。本文試圖通過簡要描述地質圖空間資料庫建庫直至最終形成的過程,來剖析這些問題產生的原因並及時糾正,實現匯交高質量數據的根本目標。
1 地質圖空間資料庫搭建的一般流程
數字地質填圖形成的地質圖空間資料庫是通過野外手圖庫、野外總圖資料庫、實際材料圖資料庫、剖面資料庫等不同階段數據互通、繼承、提取和凝練而成。因此,從編稿地質圖的數據繼承開始,到最終的成果提交的整個階段,主要應體現對空間數據、屬性數據的操作和數據質量的檢查。
首先,在野外數據採集和錄入階段,嚴格執行地調局項目管理辦法中的「三級管理」規定,對實際材料圖的製作進行反復檢查,使入庫的數據完全符合建庫的要求。進入空間資料庫以前,在實際材料圖中應將樣品、產狀、素描、同位素、照片及面、線等所有地質要素圖層添加至桌面工程編輯區。嚴格地按要求將基本要素類的屬性進行採集,是保證最終形成准確的空間資料庫最基礎、最關鍵的一步。
其次,將實際材料圖數據合並到空間資料庫。具體操作為:點擊實際材料圖上的功能菜單——自動合並實際材料圖到空間資料庫——自動合並到空間資料庫圖層或自動合並到空間資料庫(批註優先)。在進行更新空間資料庫實際材料圖內容的操作時,只是進行文件的備份和生成新文件,新生成的文件均無內容;執行自動合並實際材料圖到空間資料庫的操作,才能將實際材料圖中各圖層的內容合並到空間資料庫的相應圖層中。經過上述操作,地質圖中的部分要素類屬性會自動繼承到空間資料庫,此時除標注圖層和必要的地理圖層外,將不帶下劃線的控制圖框內的點、線、面的要素類文件刪除,並採用交互的方式再對地質圖圖面進行拓撲一致性處理。
再次,則按照《數字地質圖空間資料庫標准》(DD 2006—06)錄入的要求,對空間資料庫的基本要素類和綜合要素類中的圖元和數據屬性進行輸入編輯。這步操作完成後,根據系統功能自地質體面(基本要素類數據)中提取除圖幅基本信息和斷層對象類外的全部對象類數據。斷層對象類數據則從地質界線中提取,而圖幅基本信息則從綜合要素類的標注圖框中提取。對象類數據作為關系型資料庫中的二維表格存儲空間數據。隨後,利用系統自帶的輔助檢查工具對要素類和對象類進行邏輯一致性檢查,出現問題進行修改和再提取,直至兩者完全一致。
上述全部操作完成後,對既不屬於任何要素數據集的獨立要素類進行編輯和整理,並按照《地質元數據標准》(DD 2006—05)使用《元數據採集器》進行元數據輸入,生成空間數據元數據集。在系統內部執行從基本要素和綜合要素類中提取屬性的操作,即可生成Access數據表格,並刪除沒有意義的空文件。
最後,按照地質圖空間資料庫存放格式的要求存放各類數據,存放格式見表 1。
表 1 地質圖空間資料庫存放格式
2 資料檢查過程中應重點注意的幾個方面
從以上簡要流程描述可見,應從以下幾個方面對地質圖空間資料庫進行檢查,注意發現相應的問題,並及時處理解決。
利用國家測繪局地形數據中的水系投影,進行套合,檢查是否重合以核實精度。
對文件數據結構和內容的一致性進行檢查,通過在數字填圖軟體中新建該圖幅,把提交的數據填加到相應的新文件中,分別打開原始空間資料庫中的 MDB 文件中的對象類數據集和新建文件中空間資料庫中的 MDB 文件中的對象類數據集進行對比,對比檢查數據個數和地質體個數。
對地質體代號、注釋、產狀、圖層完整性、基本信息和圖框,分別檢查是否符合《數字地質圖空間資料庫標准》(DD 2006—06)的要求。
利用相關功能和輔助軟體,對地質圖數據的拓撲一致性、圖層套合進行檢查,如 chec-mapgis 等輔助檢查軟體。
MAP 文件夾下是否為輸出的全要素圖形文件、工程文件和角圖文件?全要素 MAP 圖要求底邊旋轉水平,且圖幅左下角平移到(0,0)點,MAP 文件夾包含點、線、面 3 個文件和工程文件,文件命名採用圖幅名稱所有漢字的拼音首字母縮寫,由全要素 MAP 圖噴繪出的全要素彩色噴墨圖要和正式出版的地質圖一致並符合出版規范。
MAPGIS 文件夾只包含內圖廓以內的內容,不包含獨立要素類,且底邊不旋轉水平。增加等高線、交通、居民地、境界、水系 5 個地理內容也放在該文件夾中,增加圖層的命名和屬性,採用原 1∶25 萬地理底圖的命名和屬性,地理圖層的注釋不必放入。增加圖內整飾圖層,如注記、引線、火山岩岩性界線、隱伏斷層、未經證實的遙感解譯斷層等,且分層整飾。整飾圖層的命名採用被整飾圖層名,前面加 a 表示,如 a-GeoPolygon.wl、a-GeoPolygon.wt;方里網的命名用 a-frame.wl、剖面線的命名用 a-profile.wl。系統自動生成而無內容的空文件要刪除。
對數據文件逐個檢查,包括命名的規范性、是否有多餘文件、元數據的准確性等方面。
3 地質圖空間資料庫較常出現的問題及原因
資料匯交過程中,對空間資料庫的檢查過程中出現問題較多的方面有以下幾種情況。
3.1 拓撲類錯誤
該類錯誤包含有無效弧段和懸掛弧段、線弧一致性錯誤、線面套合不一致、微小區等情況。這一類錯誤產生的原因,主要是由於在進行拓撲處理和檢查過程中不細致造成的。對於這類錯誤的解決方法,可通過重新設置「結點 / 裁剪搜索半徑」和利用相關功能和輔助軟體方法檢查並逐一處理。
3.2 屬性類錯誤
屬性是指類型的特徵,該類型的錯誤可分為大小寫錯誤、全半形錯誤、圖形與屬性不對應、屬性結構錯誤和圖元編號重復這幾種現象。屬性類錯誤查找相對困難,前面四種情況需要檢查人員仔細核對糾錯,最後一種情況也可通過輔助檢查工具,如:「屬性值與線型一致性」「要素類與對象類一致性」等系統自帶的檢查功能進行檢查修改。
3.3 圖形類錯誤
該類型的錯誤較為少見,基本上在進行野外數據檢查階段可以發現並進行修改調整。主要有地理地圖矢量化過程中造成點、線的重疊;各地質界線的連接過程失誤;地質體壓蓋關系錯誤等幾種現象造成,可通過拓撲檢查和輔助軟體檢查發現錯誤並相應調整。
3.4 其他類錯誤
在進行資料庫檢查時因制圖人員或資料交接人員的疏忽,也會造成以下一些問題。
(1)系統庫、字型檔、符號庫等文件因為實際工作需要進行了編輯,但資料提交檢查時沒有一並提交。
(2)部分文件路徑存在錯誤,造成文件打開提示不能正常顯示,需重新設置路徑。
(3)工程文件中點、線、區文件排列順序有誤,造成部分地質點代號和地質界線在紙介質中沒有顯示。
(4)注釋文件重疊,沒有進行出圖編輯。
(5)無投影參數或參數錯誤,造成部分文件不能打開。
(6)MDB 文件夾中有空表格文件沒有刪除。
避免該類型的錯誤,需要項目組與資料驗收人員保持充分的細心和耐心,對匯交的成果進行最終的復檢。
4 結語
地質圖空間資料庫作為區域地質調查的最終數據成果,蘊含巨大的潛在價值和廣泛的利用空間,不僅是國家找礦戰略的重要依據,對於地質理論創新也具有重大意義,是重要的科技信息資源。因此,數據質量必須從源頭控制、嚴格把關。除了按照《地調局項目管理辦法》實行「三級管理」的過程式控制制外,在最終的成果資料提交、匯交之前,項目實施單位的地質資料管理人員仍需仔細檢查驗收,切實保證數據質量符合中國地質調查局制定的技術標准,為今後各項地質工作打好堅實的數據基礎。
❾ 成果驗收程序
(1)建庫承擔單位提交預檢申請,並連同自檢報告、建庫技術報告和建庫工作報告以及所有的資料庫建設成果一並報省級建庫主管部門。
(2)省級建庫主管部門和有關單位組織人員成立成果預檢組,按照技術要求進行預檢。
(3)省級建庫主管部門組織驗收評委對提交的鑽孔資料庫成果進行全面的檢查,如有必要可請項目實施負責人向評委做說明,評委提出預檢結果。
(4)鑽孔資料庫建設成果,經過預檢和驗收程序後,由預檢組和驗收組提交預檢報告和驗收意見。驗收專家組根據《地質勘查規劃資料庫成果數據檢查記錄表》行評價打分。
(5)檢查驗收以有關規范為標准,凡按規定進行資料庫建設並達到質量要求的項目即為合格。
(6)如果成果驗收不合格,將驗收意見返回承擔單位,承擔單位對數據進行修改完善後再次提交驗收,直至驗收合格。
❿ 資料庫的質量控制
一、質量保證控制體系
在資料庫建設過程中,各工作單位和計劃項目綜合組均制定了相應的質量保證體系和措施,從資料的來源、整理錄入、檢查匯總層層嚴格控制。質量保證控制體系內容包括:質量保證組織體系和質量保證制度體系,組織體系和制度體系又由承擔單位和計劃單位綜合項目組兩套體系組成。承擔單位按照本單位全面質量管理制度和辦法建立了以全面質量管理辦公室、項目組和工作組為核心的質量保證組織體系以及完整的質量管理制度體系。以計劃單位為核心的綜合項目組的質量保證組織體系是由計劃項目負責人、工作項目負責人和工作組構成。建立了三級質量檢查監控體系:一是資料庫工作人員的自檢和互檢;二是承擔單位項目組組織的質量抽檢;三是計劃項目綜合組組織的階段性質量抽檢和驗收。在各級檢查過程中,對發現的問題都做了詳細的記錄,並進行了認真修改,保證了錄入資料的准確性。
二、質量保證措施
(一)屬性數據的質量保證措施
屬性數據就是要真實地反映原始資料,質量保證措施最主要的就是質量檢查、核對,形成錄入→檢查→修改→補充→匯總五個步驟的工作流程。每一項內容錄入完成以後,錄入人員必須將錄入數據與原始數據進行校對,自檢率為100%,發現問題及時解決之後,再開始下一項數據的錄入。工作每告一段落,要進行互檢,互檢率也是100%;同時承擔單位項目組進行質量抽檢,抽檢率為30%~50%;計劃項目綜合組的階段性質量抽檢和驗收,抽檢率為20%~30%。資料庫工作人員平時工作有記錄,每次檢查有記載,發現的問題修改情況也有記錄,做到出問題有據可查,責任有人承擔,確保數據錄入的准確和可靠。同時,還制定了安全防範措施,即防計算機病毒破壞、防資料庫數據誤刪除、防蓄意破壞。
(二)圖形數據的質量保證措施
1.地理底圖質量保證措施
本次使用的數字地理底圖是國家測繪局1∶25萬地理要素圖,利用Map GIS的裁剪功能以松嫩平原界線為范圍邊界裁剪而成,圖層要素有外圖廓、經緯網、境界線、水系、公路、鐵路、等高線、高程點等,並依據2005年11月中國地質調查局頒發的《1∶25萬地理底圖編輯要求》和水環所提供的圖庫進行了修編。原地理底圖自帶圖庫與水環所提供的圖庫有很大差別,都按圖層及圖元參數一一替換圖案號及更改參數,保證了更換圖庫前後地理底圖所示內容的一致性。
2.成果圖件數字化質量保證措施
成果圖件均由編圖人員在噴繪的地理底圖上繪制,然後採用300 dpi以上的解析度進行掃描,提高了柵格文件的清晰度,減小了誤差;制圖人員利用Map GIS將圖像配准到已矢量、修編好的地理底圖上,所有經緯網交叉點都作為控制點採集對象,保證了圖像配準的精度;矢量過程中窗口放大到40倍,滑鼠跟蹤輸入;各類成果圖件中松嫩平原邊界在空間上嚴格重合,在面元建立拓撲時,不能作結點平差,分區線元與邊界相交處分區線元用延長靠近母線、母線加點功能,在此基礎上建立拓撲關系形成面元,保證了公共邊界線元空間拓撲的一致性;對不同成果圖件有相同要素的,要將其單獨提取圖層,根據圖件要求予以增加,保證了不同圖件中相同內容的一致性。通過上述工作方法,使圖件數字化質量得到有效的控制。
矢量化後,噴出彩圖檢查圖元信息,圖元信息檢查是保證圖形數據質量的關鍵,這項檢查工作以自檢為主,檢查都在兩遍以上。圖形屬性數據通過MAPGIS屬性管理系統輸入完成,其屬性欄位按照《地下水資源調查評價資料庫標准》要求填寫。
3.提高資料庫工作人員的質量意識
人是保證質量的主動因素,提高資料庫工作人員的質量意識是保證資料庫質量的重要措施,因此在資料庫建設過程中,無論是承擔單位,還是綜合項目綜合組都開展了提高質量意識的重要性教育,使每一個工作人員在思想上重視資料庫質量,在行動上保證資料庫質量。