電 話:18937133779
網(wǎng) 址:http://oaoy.cn
郵 箱:zboao@qq.com
檔案數(shù)字化掃描分別率
檔案數(shù)字化掃描的分辨率取決于需要掃描的文本或圖片的大小和清晰度要求。一般來說,以下是常見的幾種分辨率:
1.150 DPI:適用于OCR文字識別,快速掃描需要轉換為文本的純文字文件。
2.300 DPI:適用于常規(guī)彩色掃描及黑白文本掃描。
3.600 DPI:適用于特別清晰的彩色掃描及高質量的黑白文本掃描。
4.1200 DPI:適用于非常高清晰的彩色掃描,如衛(wèi)星地圖等。
需要注意的是,分辨率越高,掃描文件體積也會相應增大,因此在選擇分辨率時需要根據(jù)實際需求和存儲容量進行權衡。
紙質檔案數(shù)字化有哪些基本要求
紙質檔案數(shù)字化有哪些基本要求
紙質檔案是以紙張作為載體的一種檔案,如保存?zhèn)洳榈墓膱D紙、信札、電報、戶籍、帳冊、契約、證書、書稿、日記、筆記、家譜的原本和原稿。以下我為大家整理了紙質檔案數(shù)字化有哪些基本要求的詳細內容,希望對大家有所幫助!
紙質檔案數(shù)字化基本要求
1、基本原則
紙質檔案數(shù)字化的基本原則是使檔案信息資源準確方便快捷地提供利用,使可以公開的檔案信息資源得到共享,以滿足社會對檔案利用的需求。
2、數(shù)字化對像的確定原則
應當對所要進行數(shù)字化的對象按照一定的原則和方法進行確認,只有符合一定要求的紙質檔案文獻才能進行數(shù)字化。
檔案數(shù)字化掃描分別率
1)符合國家法律法規(guī)的原則
紙質檔案的數(shù)字化,必須符合國家檔案開放規(guī)定以及有關規(guī)定。
2)價值性原則屬于歸檔范圍且應永久或長期保存的、社會利用價值高的'檔案可列入數(shù)字化加工的范圍。
3、基本環(huán)節(jié)
紙質檔案數(shù)字化的基本環(huán)節(jié)主要包括:檔案整理、目錄建庫、檔案掃描、圖像處理、圖像存儲、數(shù)據(jù)質檢、數(shù)據(jù)掛接、數(shù)據(jù)驗收、數(shù)據(jù)備份、成果管理等。
檔案掃描
1、掃描方式
1)根據(jù)檔案幅面的大?。ˋ4、A3、A0等)選擇相應規(guī)格的掃描儀或專業(yè)掃描儀(如工程圖紙可采用0號圖紙掃描儀)進行掃描。大幅面檔案可采用大幅面數(shù)碼平臺,或者縮微拍攝后的膠片數(shù)字化轉換設備等進行掃描,也可以采用小幅面掃描后的圖像拼接方式處理。
檔案數(shù)字化掃描分別率
2)紙張狀況較差,以及過薄、過軟或超厚的檔案,應采用平板掃描方式;紙張狀況好的檔案可采用高速掃描方式以提高工作效率。
2、掃描色彩模式
1)掃描色彩模式一般有黑白二值、灰度、彩色等。通常采用黑白二值。
2)頁面為黑白兩色,并且字跡清晰、不帶插圖的檔案,可采用黑白二值模式進行掃描。
3)頁面為黑白兩色,但字跡清晰度差或帶有插圖的檔案,以及頁面為多色文字的檔案,可采用灰度模式掃描。
4)頁面中有紅頭、印章或插有黑白照片、彩色照片、彩色插圖的檔案,可視需要采用彩色模式進行掃描。
3、掃描分辨率
1)掃描分辨率參數(shù)大小的選擇,原則上以掃描后的圖像清晰、完整、不影響圖像的利用效果為準。
2)采用黑白二值、灰度、彩色幾種模式對檔案進行掃描時,其分辨率一般均建議選擇≥200dpi。特殊情況下,如文字偏小、密集、清晰度較差等,可適當提高分辨率。
3)需要進行OCR漢字識別的檔案,掃描分辨率建議選擇≥300dpi。
檔案數(shù)字化工作流程是怎樣的?
檔案數(shù)字化加工流程
前期檔案整理
檔案借出
從檔案室接件,填寫檔案移交清冊,一式兩份。拿到檔案后,開始核對檔案數(shù)量,數(shù)量核對無誤后簽字確認,將檔案拿回加工現(xiàn)場。
目錄數(shù)據(jù)準備
按照各類檔案整理規(guī)定的要求,在檔案管理系統(tǒng)著錄目錄數(shù)據(jù)。如有錯誤或不規(guī)范的案卷題名、文件名、責任者、日期、起止頁號等,應進行修改。
拆除裝訂
在不去除裝訂物情況下,會影響掃描工作進行的檔案,應拆除裝訂物。拆除裝訂物時應注意保護檔案不受損害。
頁面修整
破損嚴重、無法直接進行掃描的檔案,應先進行技術修復,褶皺不平影響掃描質量的原件應先進行相應處理(壓平或熨平等)后再進行掃描。
檔案掃描
掃描方式
?。?)根據(jù)檔案幅面的大小(A4、A3、A0等)選擇相應規(guī)格的掃描儀或專業(yè)掃描儀(如工程圖紙可采用0號圖紙掃描儀)進行掃描。大幅面檔案可采用大幅面數(shù)碼平臺,或者縮微拍攝后的膠片數(shù)字化轉換設備等進行掃描。
?。?)紙張狀況較差,以及過薄、過軟或超厚的檔案,應采用平板掃描方式;紙張狀況好的檔案,可采用高速掃描方式以提高工作效率。
掃描色彩模式
?。?)掃描色彩模式一般有黑白二值、灰度、彩色等。通常采用彩色。
?。?)頁面為黑白兩色,并且字跡清晰、不帶插圖的檔案,可采用黑白二值模式進行掃描。
?。?)頁面為黑白兩色,但字跡清晰度差或帶有插圖的檔案,以及頁面為多色文字的檔案,可采用灰度模式掃描。
?。?)頁面中有紅頭、印章或插有黑白照片、彩色照片、彩色插圖的檔案,可采用彩色模式進行掃描。
掃描分辨率
?。?)掃描分辨率參數(shù)大小的選擇,原則上以掃描后的圖像清晰、完整、不影響圖像的利用效果為準。
?。?)采用黑白二值、灰度、彩色幾種模式對檔案進行掃描時,其分辨率一般應設為200-300dpi。特殊情況下,如文字偏小、密集、清晰度較差等,可適當提高分辨率。
圖像處理
圖像數(shù)據(jù)質量檢查
?。?)對圖像偏斜度、清晰度、失真度等進行檢查。發(fā)現(xiàn)不符合圖像質量要求時,應重新進行圖像的處理。
?。?)由于操作不當,造成掃描的圖像文件不完整或無法清晰識別時,應重新掃描。
?。?)發(fā)現(xiàn)文件漏掃時,應及時補掃并正確插入圖像。
(4)發(fā)現(xiàn)掃描圖像的排列順序與檔案原件不一致時,應及時進行調整。
糾偏、去污、圖像拼接、裁邊處理
?。?)對出現(xiàn)偏斜的圖像應進行糾偏處理,以達到視覺上基本不感覺偏斜為準。對方向不正確的圖像應進行旋轉還原,以符合閱讀習慣。
(2)對圖像頁面中出現(xiàn)的影響圖像質量的雜質,如黑點、黑線、黑框、黑邊等應進行去污處理。處理過程中應遵循在不影響可懂度的前提下展現(xiàn)檔案原貌的原則。
?。?)對大幅面檔案進行分區(qū)掃描形成的多幅圖像,應進行拼接處理,合并為一個完整的圖像,以保證檔案數(shù)字化圖像的整體性。
?。?)采用彩色模式掃描的圖像應進行裁邊處理,去除多余的白邊,以有效縮小圖像文件的容量,節(jié)省存儲空間。
圖像存儲
存儲格式
?。?)采用黑白二值模式掃描的圖像文件,一般采用PDF格式存儲。
?。?)采用灰度模式和彩色模式掃描的文件,一般采用PDF格式存儲。
圖像文件命名
(1)紙質檔案目錄數(shù)據(jù)庫中的每一份文件,都有一個與之相對應的檔號,以該檔號為這份文件掃描后的圖像文件命名。如圖像文件較大,不便于網(wǎng)絡瀏覽,可拆分為多個圖像文件,文件名后增加A、B、C等區(qū)別。
(2)分別建立文件夾,以文件檔號命名,并存儲對應圖像文件。
數(shù)據(jù)掛接
將每一份紙質檔案掃描所得的圖像存儲到相應檔號的文件夾后,認真核查每一份圖像文件的名稱與檔案目錄數(shù)據(jù)庫中該份文件的檔號是否相同,圖像文件的頁數(shù)與檔案目錄數(shù)據(jù)庫中文件的總頁數(shù)是否相同等。通過每一份圖像文件所在文件夾的名稱與檔案目錄數(shù)據(jù)庫中該份文件的檔號的一致性,建立起一一對應的關聯(lián)關系,為實現(xiàn)檔案目錄數(shù)據(jù)庫與圖像文件的批量掛接提供條件。
紙質檔案進行數(shù)字化轉換后原件可以銷毀嗎
能(A)紙質文件的數(shù)字化處理紙質文件的數(shù)字化處理方法主要有兩種:直接掃描法和縮微法。
1.直接掃描方法所謂直接掃描法,就是用掃描儀對原始紙質文件進行光學掃描,將圖像信息傳輸?shù)焦怆娹D換器中變成模擬電信號,再將模擬電信號轉換成數(shù)字電信號,再通過計算機接口傳輸?shù)接嬎銠C存儲器中。直接掃描可以分為兩種方式:
(1)對紙質文件進行掃描后,使用字符識別(OCR)軟件進行識別,最終生成文本文件。這種數(shù)字文件的優(yōu)點是:占用空間小,便于計算機全文檢索,文件使用時易于提取和編輯。其缺點是:不能保留原文件的排版格式,以及簽名、印章等原始信息;有時候OCR字符識別的準確率低,檢查修改困難,數(shù)字化效率很低,實際上已經(jīng)破壞了原始文件的真實性。
(2)掃描紙質文件,形成數(shù)字圖像文件。這種圖像文件的優(yōu)點是:能保持文件內容和排版的原貌,數(shù)字化速度快。缺點是:無法進行全文檢索,無法編輯文本內容,占用存儲空間大。以上兩種方法的優(yōu)缺點正好互補。現(xiàn)在有一種方法可以把兩種方法的優(yōu)點結合到一個文件里,就是做一個雙層PDF。
制作方法是:將原來的紙質文件掃描成數(shù)字圖像文件再轉換成文本文件,然后將兩個內容相同的文件放在同一個PDF文件中,圖像文件放在文本文件的上層,文本文件隱藏在圖像文件的下層。在查詢這個文件時,我們不僅可以看到上層的原始圖像文件,還可以全文搜索隱藏的文本文件。
2.縮微方法所謂縮微膠片轉換方法,就是對已經(jīng)縮微的文件,使用專用的掃描設備(即縮微膠片掃描儀),將縮微膠片上的模擬圖像轉換成數(shù)字圖像的方法。與直接掃描法相比,顯微掃描法更經(jīng)濟、簡單、高效。但是,這種方法必須建立在紙質文件的微細加工基礎上。
值得注意的是,掃描微縮膠片后,原微縮膠片應與紙質檔案一起保存,不得擅自銷毀。這樣,文件就形成了“三集”的存儲狀態(tài)。盡管縮微膠片不如數(shù)字文件易于保存、復制、查詢和傳播,但作為模擬信息,縮微膠片文件具有數(shù)字文件所不具備的優(yōu)點,如人類可讀、穩(wěn)定性好、體積小等,是紙質文件所不具備的,應成為檔案信息資源的重要補充形式。
(B)紙質文件的數(shù)字化工作流程紙質檔案數(shù)字化是一個復雜的過程,其基本環(huán)節(jié)主要包括:檔案整理、檔案掃描、圖像處理、圖像存儲、編目建庫、數(shù)據(jù)掛鉤、數(shù)據(jù)驗收、數(shù)據(jù)備份、成果管理。文件整理紙質檔案掃描前,根據(jù)檔案管理情況,按照以下步驟對檔案進行適當整理,并根據(jù)需要進行標記,以保證檔案的數(shù)字化質量。
(1)文件出庫一般來說,對大量紙質檔案進行數(shù)字化處理,首先要將待數(shù)字化的檔案從檔案倉庫搬到臨時周轉倉庫;然后,數(shù)字處理人員從周轉倉庫接收文件進行數(shù)字化。無論前者或后者,數(shù)字化處理人員都必須按預定計劃提出申請,經(jīng)審批后,向雙方移交檔案,登記并完成交接手續(xù)。
(2)目錄數(shù)據(jù)準備根據(jù)《檔案著錄規(guī)則》(DA/T18-1999)的要求,規(guī)范檔案的內容,包括確定檔案的著錄項目、字段長度和內容要求。然后,建立一個用于數(shù)字文件檢索的目錄數(shù)據(jù)庫。數(shù)據(jù)庫建設可以利用原有紙質檔案的編目基礎。如果原始紙質文件目錄存在錯誤或不規(guī)范,如標題、文件名、負責人、起止頁碼和頁數(shù)等。,應該修改。紙質檔案未建立機讀目錄數(shù)據(jù)庫的,應按檔案著錄規(guī)則重新錄入。
(3)解除捆綁文件可以在去除綁定前逐一貼上條形碼,以便在后續(xù)流程中通過識別條形碼對掃描的文件進行準確高效的控制。條形碼還可以為今后檔案借閱和利用的管理提供方便。然后,工作人員一卷一卷、一頁一頁地檢查檔案。對缺失內容、遺漏內容、顛倒頁碼、珍貴破損檔案進行登記,交檔案保管機構妥善處理。
對于不解除綁定會影響掃描工作的文件,應解除綁定。拆除裝訂時,應注意保護文件不受損壞。拆除裝訂后,應將原文件按順序排列,并用夾子夾住,以防散落。對于歷史悠久,紙質條件差,不方便拆封的,可以使用零頁邊距掃描儀進行掃描。
(4)區(qū)分掃描件和非掃描件。根據(jù)要求,將同一案卷中的掃描件和非掃描件分開,剔除無關和重復件。
(5)頁面修剪紙張的質量與掃描儀的選擇和掃描效果有關。因此,對于破損嚴重、褶皺不平、字跡模糊的檔案,必須分別登記處理。比如折疊的文件可以熨燙;對于被污染的紙張,可以在通風的環(huán)境下用軟刷輕輕刷掉漂浮的灰塵、污垢或霉菌;必須修復損壞和不完整的文檔。
(六)備案登記將整理后的原始文件移交給掃描人員,制作并填寫紙質文件數(shù)字化處理交接登記表,詳細記錄整理后每個文件的起始頁碼和頁碼。
(七)裝訂、修復和歸還掃描工作完成后,已拆除的檔案應按檔案保管要求重新裝訂?;謴脱b訂時,要注意保持文件的排列順序不變,做到安全、準確、不遺漏。更換嚴重損壞的輥和箱。裝訂人員會在裝訂好的文件上加蓋專用印章和專用數(shù)碼印章。文件的數(shù)字處理和重新裝訂完成后,應進行清點。清點無誤后,交回檔案管理部門,辦理檔案歸還手續(xù)。
2.文件掃描(1)掃描設備的選擇根據(jù)文件格式的大小(A4、A3、A0等。),選擇相應規(guī)格的掃描儀。大幅面文件可以用寬幅掃描儀掃描,縮微后用膠片數(shù)字轉換設備掃描,小幅面掃描后用圖像拼接。紙張狀況不好、太薄、太軟或太厚的文件,以及多色頁面的文件,都可以用普通平板掃描儀掃描。
紙張條件好的A4、A3文件可以用高速掃描儀掃描,提高工作效率。不適合拆包的文件可以用零頁邊距掃描儀掃描。(2)掃描顏色模式的選擇通常,有兩種掃描顏色模式:一種是掃描形成黑白二值圖像。這種圖像只有黑白兩級,沒有過渡灰度。其特點是黑白分明,字跡清晰,文件容量小。它適用于掃描筆跡清晰、線條清晰的文本或圖形文件。
二是掃描形成連續(xù)色調的靜態(tài)圖像。這類圖像分為灰度圖像和彩色圖像。灰度圖像由從最暗的黑色到最亮的白色的不同灰度組成。灰度表示一幅圖像從亮部到暗部的層次,也叫色階?;叶仍礁撸瑢哟卧截S富,文件容量越大?;疑J竭m合掃描黑白照片和圖像文件,色階的選擇要適中,只要不影響畫質即可。
顏色模式中的顏色數(shù)量表示顏色的范圍。顏色越多,圖像越生動真實,文件容量越大。同樣,色號的選擇也要適度,不是越多越好。彩色模式適用于掃描文件或頁面上帶有紅色抬頭和印章的彩色照片文件。需要永久保存或長期保存,或移交國家檔案館的檔案,一般應采用彩色模式掃描。
(3)掃描分辨率掃描分辨率參數(shù)的選擇原則上是基于掃描圖像的清晰度和完整性,不會影響圖像的利用效果。黑白二進制、灰度、彩色模式掃描文件時,分辨率一般建議大于等于200dpi。特殊情況下,如文字小、文字密、清晰度差等。,分辨率可以適當提高。對于需要OCR漢字識別的文件,掃描分辨率建議選擇300dpi。
(4)光學字符識別處理目前OCR技術已經(jīng)相當成熟,一般掃描儀都有自己的OCR軟件,使用起來也非常方便。但是OCR的識別準確率往往不盡如人意,影響檢索效果。手動修改稿件中的錯別字很麻煩。因此,提高OCR識別率是檔案數(shù)字化中的一個重要問題。
其實只要注意以下幾點,就可以明顯提高OCR識別率:一是選擇合適的掃描分辨率。過低的掃描分辨率往往會導致OCR識別率下降,過高的分辨率則會使圖像文件過大,降低識別速度。在實際操作中,操作者可以通過查看OCR識別后生成的文本中紅色錯別字的數(shù)量(如小于3%)來判斷可接受性,決定是否以此分辨率掃描,進行OCR識別。
二是盡量黑白二進制模式掃描。用掃描儀掃描文檔時,OCR通常接受灰色或黑白二進制模式,不接受彩色模式。如果稿件的印刷質量好,可以采用灰色模式,否則應采用黑白二進制模式。掃描時,您可以手動調整黑白閾值的大小。如果黑白二值圖像上的文字輪廓不完整,適當增加閾值。
如果文本的輪廓太粗,說明信息冗余較多,可以適當降低閾值。這樣調整后形成的黑白二值掃描圖像可以達到更好的OCR識別效果。
第三,在進行OCR識別時注意字符的傾斜校正。OCR識別允許文檔輕微傾斜,但過度傾斜會影響識別率。校正方法是在掃描軟件上點擊傾斜校正按鈕,識別軟件會在OCR識別前自動校正圖像。
四是稿件識別前的預處理。去除稿件中的雜物和圖片,因為雜物會干擾文字識別,圖片無法識別,會影響OCR的文字分割。針對稿件中的欄目,建議手動設置欄目區(qū)域,即用多個方框選擇要識別的文字,然后進行OCR識別。五是采取適當?shù)淖R別方法。簡體和繁體稿件混雜,中英文稿件識別率往往較低。如果簡體和繁體中英文分塊分布,可以用圖像處理軟件將不同的文本塊編輯成文本塊相似的文件,然后分別用OCR識別不同的字符。
(5)掃描注冊認真填寫紙質文件數(shù)字化轉換流程交接登記表,登記掃描頁數(shù),核對每份文件實際掃描頁數(shù)與歸檔時填寫的文件頁數(shù)是否一致。如不一致,應注明具體原因和處理方法。3.圖像處理掃描完成后,獲得的圖像必須按要求進行技術處理,以糾正掃描文件與原始文件之間的偏差,使掃描文件更清晰、更規(guī)范。
圖像處理一般包括以下內容:(1)影像數(shù)據(jù)質量檢查檢查圖像的偏斜、清晰度和失真。如果發(fā)現(xiàn)不符合質量要求,應對圖像進行重新處理。當掃描的圖像文件不完整或因操作不當無法清晰識別時,應重新掃描;如有漏掃描文件,及時補掃描,正確插入圖像;當發(fā)現(xiàn)掃描圖像的排列順序與原始文件不一致時,應及時調整。認真填寫相關表格,記錄質量檢查結果和處理意見。
(2)整改應該校正偏轉圖像,以便在視覺上感覺不到偏轉。方向不正確的圖片要旋轉還原,符合閱讀習慣。
(3)去污影響圖像質量的雜質,如黑點、黑線、黑框和黑邊,應該去除。在處理過程中,應注意不要破壞文件的原始信息。
(4)圖像拼接掃描不同區(qū)域的大幅面文件形成的多幅圖像應拼接合并成一幅完整的圖像,以保證文件數(shù)字圖像的完整性。
(5)修剪彩色模式下掃描的圖像應進行修剪,去除多余的白邊,以有效減少圖像文件的容量,節(jié)省存儲空間。以上的整改、去污、修整等處理都可以根據(jù)肉眼手動完成。也可以使用專門設計的軟件,預先進行一定的設置,然后由計算機自動處理。計算機處理當然效率高,但不如手工處理靈活。
比如,一旦污漬的大小被設計得太小,電腦會自動把一些標點符號作為污漬去掉。因此,掃描圖像的處理也需要采用手動和自動相結合的處理方式。
4.圖像存儲(1)存儲格式以黑白二進制模式掃描的圖像文件通常以TIFF(G4)格式存儲。以灰色模式和彩色模式掃描的圖像文件通常以JPEG格式存儲。存儲時壓縮比的選擇應以保證掃描圖像易讀性的前提下最小化存儲容量為基礎。提供網(wǎng)絡查詢的掃描圖像,也可以存儲為CEB,PDF或其他格式的文件。
(2)圖像文件的命名數(shù)字檔案資源應以檔案號或唯一標識符命名。用檔案號命名數(shù)字檔案資源的,按卷排序的,應按《檔案號編制規(guī)則》(DA/T 13-1994)編制檔案號,建議增加檔案類別碼作為類別號的子項;若按件排序,案卷號可采用“全宗號-案卷類別碼年份-保管期限-機構(問題)碼-件號-分件號”的結構。
5.目錄數(shù)據(jù)庫建設(1)數(shù)據(jù)格式選擇目錄數(shù)據(jù)庫建設應選擇通用數(shù)據(jù)格式,所選數(shù)據(jù)格式應能通過XML文檔直接或間接交換數(shù)據(jù)。這個數(shù)據(jù)庫的建立可以通過專門的檔案管理系統(tǒng)或者掃描處理管理軟件錄入,也可以通過EXCEL專門設計的檔案目錄表錄入,然后將數(shù)據(jù)導入檔案管理系統(tǒng)。
(2)檔案描述根據(jù)《檔案著錄規(guī)則》(DA/T18-1999)的要求,建立檔案目錄數(shù)據(jù)庫,錄入檔案目錄數(shù)據(jù)。
(3)目錄數(shù)據(jù)的質量檢查為保證數(shù)據(jù)的準確性,可采用“單機錄入-人工校對”或“雙機錄入-計算機自動校對”的方法。無論是人工校對還是計算機校對,都要檢查描述項目是否齊全,描述內容是否規(guī)范準確,如發(fā)現(xiàn)不合格數(shù)據(jù),應進行修改或重新記錄。
6.數(shù)據(jù)掛鉤(1)匯總掛鉤檔案數(shù)字化轉換過程中形成的編目數(shù)據(jù)庫和影像文件,經(jīng)質量檢查合格后,通過網(wǎng)絡及時加載到數(shù)據(jù)服務器進行匯總。目錄數(shù)據(jù)庫和鏡像文件要避免慢且容易出錯的手動掛接,盡量批量使用電腦自動掛接。只要將掃描的數(shù)字文件按照紙質文件的文件號進行命名,就可以通過編制掛鉤程序或借助相應的軟件,實現(xiàn)相關數(shù)字圖像的自動搜索和相應電子地址信息的添加,從而實現(xiàn)批量、快速掛鉤。
(2)數(shù)據(jù)關聯(lián)基于紙質文件目錄數(shù)據(jù)庫,從每個紙質文件掃描的一個或多個圖像被存儲為圖像文件。將圖像文件存儲在相應的文件夾中時,需要仔細檢查每個圖像文件的名稱是否與歸檔目錄數(shù)據(jù)庫中的文件號相同,圖像文件的頁數(shù)是否與歸檔目錄數(shù)據(jù)庫中的文件頁數(shù)相同,圖像文件的總數(shù)是否與歸檔目錄數(shù)據(jù)庫中的文件數(shù)相同。
利用每個圖像文件的文件名與該文件在歸檔目錄數(shù)據(jù)庫中的文件號建立一一對應的關系,為歸檔目錄數(shù)據(jù)庫與圖像文件的自動批量連接提供了條件。
(3)交接登記認真填寫紙質文件數(shù)字化轉換過程交接登記表,記錄數(shù)據(jù)關聯(lián)后的頁數(shù),檢查每次文件關聯(lián)后的頁數(shù)與文件整理掃描時填寫的頁數(shù)是否一致。如不一致,應注明具體原因和處理方法。
7.數(shù)據(jù)接受檢查所有已經(jīng)采樣數(shù)字化的數(shù)據(jù),包括目錄數(shù)據(jù)庫、圖像文件和數(shù)據(jù)掛鉤的整體質量。當目錄數(shù)據(jù)庫和圖像文件鏈接出現(xiàn)錯誤,或者目錄數(shù)據(jù)庫和圖像文件中有一個不完整、不清晰、有錯誤時,抽檢將標記為“不合格”。一個全宗文件,當數(shù)字轉換質量抽檢合格率達到95%以上(含95%)時,將被驗收為“通過”。
合格率=通過抽樣檢查的文件數(shù)/通過抽樣檢查的文件總數(shù)×100%。認真填寫紙質檔案數(shù)字化驗收登記表。驗收“通過”的結論必須經(jīng)過審核簽字才能生效。
8.數(shù)據(jù)備份完整、合格的數(shù)據(jù)應及時備份。為保證數(shù)據(jù)安全,備份載體的選擇應多樣化,可采用線上線下相結合的方式實現(xiàn)多套備份,并注意遠程存儲。
還應該檢查備份數(shù)據(jù)。備份數(shù)據(jù)的檢查內容主要包括備份數(shù)據(jù)是否可以打開,數(shù)據(jù)信息是否完整,文件數(shù)量是否準確。數(shù)據(jù)備份后,應在相應的備份介質上做好標記,以便于查找和管理。填寫紙質文件數(shù)字備份管理登記表。
9.數(shù)字結果管理應加強紙質檔案數(shù)字化成果的管理,確保其安全性、完整性和長期可用性。提供紙質檔案數(shù)字化成果在線檢索利用時,應當有制作單位的電子標識,并根據(jù)具體情況采用可下載或不可下載的數(shù)據(jù)格式。
紙質檔案進行數(shù)字化轉換后原件可以銷毀
能(A)紙質文件的數(shù)字化處理紙質文件的數(shù)字化處理方法主要有兩種:直接掃描法和縮微法。
1.直接掃描方法所謂直接掃描法,就是用掃描儀對原始紙質文件進行光學掃描,將圖像信息傳輸?shù)焦怆娹D換器中變成模擬電信號,再將模擬電信號轉換成數(shù)字電信號,再通過計算機接口傳輸?shù)接嬎銠C存儲器中。
直接掃描可以分為兩種方式:(1)對紙質文件進行掃描后,使用字符識別(OCR)軟件進行識別,最終生成文本文件。這種數(shù)字文件的優(yōu)點是:占用空間小,便于計算機全文檢索,文件使用時易于提取和編輯。
其缺點是:不能保留原文件的排版格式,以及簽名、印章等原始信息;有時候OCR字符識別的準確率低,檢查修改困難,數(shù)字化效率很低,實際上已經(jīng)破壞了原始文件的真實性。
(2)掃描紙質文件,形成數(shù)字圖像文件。這種圖像文件的優(yōu)點是:能保持文件內容和排版的原貌,數(shù)字化速度快。缺點是:無法進行全文檢索,無法編輯文本內容,占用存儲空間大。以上兩種方法的優(yōu)缺點正好互補?,F(xiàn)在有一種方法可以把兩種方法的優(yōu)點結合到一個文件里,就是做一個雙層PDF。
制作方法是:將原來的紙質文件掃描成數(shù)字圖像文件再轉換成文本文件,然后將兩個內容相同的文件放在同一個PDF文件中,圖像文件放在文本文件的上層,文本文件隱藏在圖像文件的下層。在查詢這個文件時,我們不僅可以看到上層的原始圖像文件,還可以全文搜索隱藏的文本文件。
2.縮微方法所謂縮微膠片轉換方法,就是對已經(jīng)縮微的文件,使用專用的掃描設備(即縮微膠片掃描儀),將縮微膠片上的模擬圖像轉換成數(shù)字圖像的方法。與直接掃描法相比,顯微掃描法更經(jīng)濟、簡單、高效。但是,這種方法必須建立在紙質文件的微細加工基礎上。
值得注意的是,掃描微縮膠片后,原微縮膠片應與紙質檔案一起保存,不得擅自銷毀。這樣,文件就形成了“三集”的存儲狀態(tài)。盡管縮微膠片不如數(shù)字文件易于保存、復制、查詢和傳播,但作為模擬信息,縮微膠片文件具有數(shù)字文件所不具備的優(yōu)點,如人類可讀、穩(wěn)定性好、體積小等,是紙質文件所不具備的,應成為檔案信息資源的重要補充形式。
(B)紙質文件的數(shù)字化工作流程紙質檔案數(shù)字化是一個復雜的過程,其基本環(huán)節(jié)主要包括:檔案整理、檔案掃描、圖像處理、圖像存儲、編目建庫、數(shù)據(jù)掛鉤、數(shù)據(jù)驗收、數(shù)據(jù)備份、成果管理。文件整理紙質檔案掃描前,根據(jù)檔案管理情況,按照以下步驟對檔案進行適當整理,并根據(jù)需要進行標記,以保證檔案的數(shù)字化質量。
(1)文件出庫一般來說,對大量紙質檔案進行數(shù)字化處理,首先要將待數(shù)字化的檔案從檔案倉庫搬到臨時周轉倉庫;然后,數(shù)字處理人員從周轉倉庫接收文件進行數(shù)字化。無論前者或后者,數(shù)字化處理人員都必須按預定計劃提出申請,經(jīng)審批后,向雙方移交檔案,登記并完成交接手續(xù)。
(2)目錄數(shù)據(jù)準備根據(jù)《檔案著錄規(guī)則》(DA/T18-1999)的要求,規(guī)范檔案的內容,包括確定檔案的著錄項目、字段長度和內容要求。然后,建立一個用于數(shù)字文件檢索的目錄數(shù)據(jù)庫。數(shù)據(jù)庫建設可以利用原有紙質檔案的編目基礎。如果原始紙質文件目錄存在錯誤或不規(guī)范,如標題、文件名、負責人、起止頁碼和頁數(shù)等。,應該修改。紙質檔案未建立機讀目錄數(shù)據(jù)庫的,應按檔案著錄規(guī)則重新錄入。
(3)解除捆綁文件可以在去除綁定前逐一貼上條形碼,以便在后續(xù)流程中通過識別條形碼對掃描的文件進行準確高效的控制。條形碼還可以為今后檔案借閱和利用的管理提供方便。然后,工作人員一卷一卷、一頁一頁地檢查檔案。
對缺失內容、遺漏內容、顛倒頁碼、珍貴破損檔案進行登記,交檔案保管機構妥善處理。對于不解除綁定會影響掃描工作的文件,應解除綁定。拆除裝訂時,應注意保護文件不受損壞。拆除裝訂后,應將原文件按順序排列,并用夾子夾住,以防散落。對于歷史悠久,紙質條件差,不方便拆封的,可以使用零頁邊距掃描儀進行掃描。
(4)區(qū)分掃描件和非掃描件。根據(jù)要求,將同一案卷中的掃描件和非掃描件分開,剔除無關和重復件。
(5)頁面修剪紙張的質量與掃描儀的選擇和掃描效果有關。因此,對于破損嚴重、褶皺不平、字跡模糊的檔案,必須分別登記處理。比如折疊的文件可以熨燙;對于被污染的紙張,可以在通風的環(huán)境下用軟刷輕輕刷掉漂浮的灰塵、污垢或霉菌;必須修復損壞和不完整的文檔。
(六)備案登記將整理后的原始文件移交給掃描人員,制作并填寫紙質文件數(shù)字化處理交接登記表,詳細記錄整理后每個文件的起始頁碼和頁碼。
(七)裝訂、修復和歸還掃描工作完成后,已拆除的檔案應按檔案保管要求重新裝訂?;謴脱b訂時,要注意保持文件的排列順序不變,做到安全、準確、不遺漏。更換嚴重損壞的輥和箱。裝訂人員會在裝訂好的文件上加蓋專用印章和專用數(shù)碼印章。文件的數(shù)字處理和重新裝訂完成后,應進行清點。清點無誤后,交回檔案管理部門,辦理檔案歸還手續(xù)。
2.文件掃描(1)掃描設備的選擇根據(jù)文件格式的大小(A4、A3、A0等。),選擇相應規(guī)格的掃描儀。大幅面文件可以用寬幅掃描儀掃描,縮微后用膠片數(shù)字轉換設備掃描,小幅面掃描后用圖像拼接。紙張狀況不好、太薄、太軟或太厚的文件,以及多色頁面的文件,都可以用普通平板掃描儀掃描。紙張條件好的A4、A3文件可以用高速掃描儀掃描,提高工作效率。不適合拆包的文件可以用零頁邊距掃描儀掃描。
(2)掃描顏色模式的選擇通常,有兩種掃描顏色模式:一種是掃描形成黑白二值圖像。這種圖像只有黑白兩級,沒有過渡灰度。其特點是黑白分明,字跡清晰,文件容量小。它適用于掃描筆跡清晰、線條清晰的文本或圖形文件。二是掃描形成連續(xù)色調的靜態(tài)圖像。
這類圖像分為灰度圖像和彩色圖像?;叶葓D像由從最暗的黑色到最亮的白色的不同灰度組成?;叶缺硎疽环鶊D像從亮部到暗部的層次,也叫色階。灰度越高,層次越豐富,文件容量越大。灰色模式適合掃描黑白照片和圖像文件,色階的選擇要適中,只要不影響畫質即可。
顏色模式中的顏色數(shù)量表示顏色的范圍。顏色越多,圖像越生動真實,文件容量越大。同樣,色號的選擇也要適度,不是越多越好。彩色模式適用于掃描文件或頁面上帶有紅色抬頭和印章的彩色照片文件。需要永久保存或長期保存,或移交國家檔案館的檔案,一般應采用彩色模式掃描。
(3)掃描分辨率掃描分辨率參數(shù)的選擇原則上是基于掃描圖像的清晰度和完整性,不會影響圖像的利用效果。黑白二進制、灰度、彩色模式掃描文件時,分辨率一般建議大于等于200dpi。特殊情況下,如文字小、文字密、清晰度差等。,分辨率可以適當提高。對于需要OCR漢字識別的文件,掃描分辨率建議選擇300dpi。
(4)光學字符識別處理目前OCR技術已經(jīng)相當成熟,一般掃描儀都有自己的OCR軟件,使用起來也非常方便。但是OCR的識別準確率往往不盡如人意,影響檢索效果。手動修改稿件中的錯別字很麻煩。因此,提高OCR識別率是檔案數(shù)字化中的一個重要問題。
其實只要注意以下幾點,就可以明顯提高OCR識別率:一是選擇合適的掃描分辨率。過低的掃描分辨率往往會導致OCR識別率下降,過高的分辨率則會使圖像文件過大,降低識別速度。在實際操作中,操作者可以通過查看OCR識別后生成的文本中紅色錯別字的數(shù)量(如小于3%)來判斷可接受性,決定是否以此分辨率掃描,進行OCR識別。
二是盡量黑白二進制模式掃描。用掃描儀掃描文檔時,OCR通常接受灰色或黑白二進制模式,不接受彩色模式。如果稿件的印刷質量好,可以采用灰色模式,否則應采用黑白二進制模式。掃描時,您可以手動調整黑白閾值的大小。
如果黑白二值圖像上的文字輪廓不完整,適當增加閾值。如果文本的輪廓太粗,說明信息冗余較多,可以適當降低閾值。這樣調整后形成的黑白二值掃描圖像可以達到更好的OCR識別效果。第三,在進行OCR識別時注意字符的傾斜校正。OCR識別允許文檔輕微傾斜,但過度傾斜會影響識別率。
校正方法是在掃描軟件上點擊傾斜校正按鈕,識別軟件會在OCR識別前自動校正圖像。
四是稿件識別前的預處理。去除稿件中的雜物和圖片,因為雜物會干擾文字識別,圖片無法識別,會影響OCR的文字分割。針對稿件中的欄目,建議手動設置欄目區(qū)域,即用多個方框選擇要識別的文字,然后進行OCR識別。
五是采取適當?shù)淖R別方法。簡體和繁體稿件混雜,中英文稿件識別率往往較低。如果簡體和繁體中英文分塊分布,可以用圖像處理軟件將不同的文本塊編輯成文本塊相似的文件,然后分別用OCR識別不同的字符。
(5)掃描注冊認真填寫紙質文件數(shù)字化轉換流程交接登記表,登記掃描頁數(shù),核對每份文件實際掃描頁數(shù)與歸檔時填寫的文件頁數(shù)是否一致。如不一致,應注明具體原因和處理方法。3.圖像處理掃描完成后,獲得的圖像必須按要求進行技術處理,以糾正掃描文件與原始文件之間的偏差,使掃描文件更清晰、更規(guī)范。
圖像處理一般包括以下內容:(1)影像數(shù)據(jù)質量檢查檢查圖像的偏斜、清晰度和失真。如果發(fā)現(xiàn)不符合質量要求,應對圖像進行重新處理。當掃描的圖像文件不完整或因操作不當無法清晰識別時,應重新掃描;如有漏掃描文件,及時補掃描,正確插入圖像;當發(fā)現(xiàn)掃描圖像的排列順序與原始文件不一致時,應及時調整。認真填寫相關表格,記錄質量檢查結果和處理意見。
(2)整改應該校正偏轉圖像,以便在視覺上感覺不到偏轉。方向不正確的圖片要旋轉還原,符合閱讀習慣。
(3)去污影響圖像質量的雜質,如黑點、黑線、黑框和黑邊,應該去除。在處理過程中,應注意不要破壞文件的原始信息。
(4)圖像拼接掃描不同區(qū)域的大幅面文件形成的多幅圖像應拼接合并成一幅完整的圖像,以保證文件數(shù)字圖像的完整性。
(5)修剪彩色模式下掃描的圖像應進行修剪,去除多余的白邊,以有效減少圖像文件的容量,節(jié)省存儲空間。以上的整改、去污、修整等處理都可以根據(jù)肉眼手動完成。也可以使用專門設計的軟件,預先進行一定的設置,然后由計算機自動處理。計算機處理當然效率高,但不如手工處理靈活。比如,一旦污漬的大小被設計得太小,電腦會自動把一些標點符號作為污漬去掉。因此,掃描圖像的處理也需要采用手動和自動相結合的處理方式。
4.圖像存儲(1)存儲格式以黑白二進制模式掃描的圖像文件通常以TIFF(G4)格式存儲。以灰色模式和彩色模式掃描的圖像文件通常以JPEG格式存儲。存儲時壓縮比的選擇應以保證掃描圖像易讀性的前提下最小化存儲容量為基礎。提供網(wǎng)絡查詢的掃描圖像,也可以存儲為CEB,PDF或其他格式的文件。
(2)圖像文件的命名數(shù)字檔案資源應以檔案號或唯一標識符命名。用檔案號命名數(shù)字檔案資源的,按卷排序的,應按《檔案號編制規(guī)則》(DA/T 13-1994)編制檔案號,建議增加檔案類別碼作為類別號的子項;若按件排序,案卷號可采用“全宗號-案卷類別碼年份-保管期限-機構(問題)碼-件號-分件號”的結構。
5.目錄數(shù)據(jù)庫建設(1)數(shù)據(jù)格式選擇目錄數(shù)據(jù)庫建設應選擇通用數(shù)據(jù)格式,所選數(shù)據(jù)格式應能通過XML文檔直接或間接交換數(shù)據(jù)。這個數(shù)據(jù)庫的建立可以通過專門的檔案管理系統(tǒng)或者掃描處理管理軟件錄入,也可以通過EXCEL專門設計的檔案目錄表錄入,然后將數(shù)據(jù)導入檔案管理系統(tǒng)。
(2)檔案描述根據(jù)《檔案著錄規(guī)則》(DA/T18-1999)的要求,建立檔案目錄數(shù)據(jù)庫,錄入檔案目錄數(shù)據(jù)。
(3)目錄數(shù)據(jù)的質量檢查為保證數(shù)據(jù)的準確性,可采用“單機錄入-人工校對”或“雙機錄入-計算機自動校對”的方法。無論是人工校對還是計算機校對,都要檢查描述項目是否齊全,描述內容是否規(guī)范準確,如發(fā)現(xiàn)不合格數(shù)據(jù),應進行修改或重新記錄。
6.數(shù)據(jù)掛鉤(1)匯總掛鉤檔案數(shù)字化轉換過程中形成的編目數(shù)據(jù)庫和影像文件,經(jīng)質量檢查合格后,通過網(wǎng)絡及時加載到數(shù)據(jù)服務器進行匯總。目錄數(shù)據(jù)庫和鏡像文件要避免慢且容易出錯的手動掛接,盡量批量使用電腦自動掛接。只要將掃描的數(shù)字文件按照紙質文件的文件號進行命名,就可以通過編制掛鉤程序或借助相應的軟件,實現(xiàn)相關數(shù)字圖像的自動搜索和相應電子地址信息的添加,從而實現(xiàn)批量、快速掛鉤。
(2)數(shù)據(jù)關聯(lián)基于紙質文件目錄數(shù)據(jù)庫,從每個紙質文件掃描的一個或多個圖像被存儲為圖像文件。將圖像文件存儲在相應的文件夾中時,需要仔細檢查每個圖像文件的名稱是否與歸檔目錄數(shù)據(jù)庫中的文件號相同,圖像文件的頁數(shù)是否與歸檔目錄數(shù)據(jù)庫中的文件頁數(shù)相同,圖像文件的總數(shù)是否與歸檔目錄數(shù)據(jù)庫中的文件數(shù)相同。利用每個圖像文件的文件名與該文件在歸檔目錄數(shù)據(jù)庫中的文件號建立一一對應的關系,為歸檔目錄數(shù)據(jù)庫與圖像文件的自動批量連接提供了條件。
(3)交接登記認真填寫紙質文件數(shù)字化轉換過程交接登記表,記錄數(shù)據(jù)關聯(lián)后的頁數(shù),檢查每次文件關聯(lián)后的頁數(shù)與文件整理掃描時填寫的頁數(shù)是否一致。如不一致,應注明具體原因和處理方法。
7.數(shù)據(jù)接受檢查所有已經(jīng)采樣數(shù)字化的數(shù)據(jù),包括目錄數(shù)據(jù)庫、圖像文件和數(shù)據(jù)掛鉤的整體質量。當目錄數(shù)據(jù)庫和圖像文件鏈接出現(xiàn)錯誤,或者目錄數(shù)據(jù)庫和圖像文件中有一個不完整、不清晰、有錯誤時,抽檢將標記為“不合格”。
一個全宗文件,當數(shù)字轉換質量抽檢合格率達到95%以上(含95%)時,將被驗收為“通過”。合格率=通過抽樣檢查的文件數(shù)/通過抽樣檢查的文件總數(shù)×100%。認真填寫紙質檔案數(shù)字化驗收登記表。驗收“通過”的結論必須經(jīng)過審核簽字才能生效。
8.數(shù)據(jù)備份完整、合格的數(shù)據(jù)應及時備份。為保證數(shù)據(jù)安全,備份載體的選擇應多樣化,可采用線上線下相結合的方式實現(xiàn)多套備份,并注意遠程存儲。還應該檢查備份數(shù)據(jù)。備份數(shù)據(jù)的檢查內容主要包括備份數(shù)據(jù)是否可以打開,數(shù)據(jù)信息是否完整,文件數(shù)量是否準確。數(shù)據(jù)備份后,應在相應的備份介質上做好標記,以便于查找和管理。填寫紙質文件數(shù)字備份管理登記表。
9.數(shù)字結果管理應加強紙質檔案數(shù)字化成果的管理,確保其安全性、完整性和長期可用性。提供紙質檔案數(shù)字化成果在線檢索利用時,應當有制作單位的電子標識,并根據(jù)具體情況采用可下載或不可下載的數(shù)據(jù)格式。
干貨:檔案數(shù)字化加工,核心7大步驟,檔案管理人必備!
檔案數(shù)字化具體流程:從檔案的收集、掃描錄入、整理、歸檔入庫、利用、統(tǒng)計、編研、鑒定等過程實現(xiàn)全生命周期的自動化管理。
1、檔案收集:按照檔案形成的規(guī)律,把各企業(yè)單位分散的材料進行接收、征集、集中起來。
2、檔案整理:根據(jù)不同需求,對收集起來的檔案分類組成有序體系,規(guī)范化處理。
3、掃描錄入:將有價值的檔案進行分類掃描錄入系統(tǒng)歸檔,采用中博奧檔案管理系統(tǒng),分類保管檔案。
4、歸檔入庫:根據(jù)國家檔案分類要求標準,建立標準檔案分類,進行歸檔。
5、檔案利用:通過中博奧檔案管理系統(tǒng)的借閱手續(xù),是檔案資料直接可以為各企業(yè)單位提供檔案利用服務工作。
6、檔案統(tǒng)計:運用中博奧統(tǒng)計技術和方法,通過表冊和數(shù)字的形式描述和分析檔案工作的各種現(xiàn)象、狀態(tài)和趨勢情況,可以了解和掌握檔案工作總體情況。
7、檔案鑒定:利用系統(tǒng)甄別檔案文件的現(xiàn)實價值和歷史價值以及年限,進行存毀的判斷條件。
8、檔案銷毀:根據(jù)不同年限檔案、不具有保存價值的檔案,在系統(tǒng)上導出目錄,將相對應的檔案消除或銷毀。
利用中博奧檔案管理系統(tǒng),一款專業(yè)的檔案管理軟件,中博奧功能涵蓋檔案收集、檔案著錄、檔案查詢、檔案借閱、檔案利用、檔案統(tǒng)計、檔案鑒定、檔案銷毀的全生命周期管理,適用于科技檔案管理、人力資源信息管理、證照管理、客戶資料管理、文件資料管理等等,同時還適用于自動化辦公應用?;旧弦粋€軟件就能夠滿足一個企業(yè)當中,不同人員的辦公需求。