www.91av.cn_亚洲精品国产精品国自产_亚州av一区二区_欧美成人精品一区

夜間模式
  • 145022閱讀
  • 9回復

[活動]當人工智能遇上“之乎者也” [復制鏈接]

上一主題 下一主題
離線電丁丁
級別: 初來乍到
發帖
6
昆幣
84 枚
只看樓主 使用道具 電梯直達
樓主  發表于: 2022-10-12 , 來自:江蘇省0==
中國是全球擁有古籍最多的國家,國內現存漢文古籍300萬部,散居在海外的古籍超過40萬部。然而,紙質古籍損毀是不可逆轉的,雖然古籍原生性保護有很大改善,“紙”的脆弱卻依然無法改變,人們也并沒有太多機會接觸到艱澀難懂的古籍文本。


不過在數字時代,這種情況正在發生變化,古籍的“再生性”保護,逐漸向數字化、平臺化、智能化的方向發展。當人工智能遇上“之乎者也”,會擦出怎樣的火花?



━━━━━
人工智能改變古籍存續形式

“整理國故,再造文明”,胡適在一百年前說。國故也即是古籍,古代的書,一般指1911年之前歷朝寫本、刻本、稿本、拓本等。這些紙質文獻在悠悠歷史長河中其命運可謂顛沛流離。紙質古籍損毀是不可逆轉的。如明代《永樂大典》,永樂時期的原本已經完全湮滅不見,嘉靖重抄本11000冊現存不到5%。這樣的損失難以估量。

哲學家羅素曾說:“中華文明是唯一的歷史文化從未間斷的文明。”古籍作為中華文化的一支重要血脈,便是文明未斷的依據之一,今年,國家圖書館藏清宮“天祿琳瑯”歷時8年修復成功,在標準的存藏條件下,能保存200年。

盡管古籍原生性保護有很大改善,但依然改變不了“紙”的脆弱。2015年年初,位于莫斯科西南部的俄羅斯科學院社會科學信息研究所圖書館突發火災,約有200萬冊文獻資料遭到損毀。俄羅斯科學院院長稱“這是俄羅斯科學界的切爾諾貝利事件”。

在很多人的印象里,古籍文本往往艱澀難懂,而且接觸機會不多。但在數字時代,這種情況正在發生轉變,目前數字化、平臺化、智能化成為古籍“再生性”保護的方向。在國外,哈佛燕京圖書館和美國國會圖書館,已經將他們收藏的中華古籍掃描完成,并對外公開。但它們僅僅是圖片掃描版,并未利用智能技術實現文本化,無法復制粘貼,只能服務于少數研究者。

國內較為有名的古籍智能平臺,如“漢典重光”古籍平臺,讓一批珍藏于加州大學伯克利分校的中文古籍善本,以數字化的形式回歸,該平臺涵蓋的古籍數量為20萬頁。再如浙江大學的“古籍智慧平臺”,其利用OCR光學字符識別技術,將圖片中的文字換成文本格式,它的識別準確率在90%以上。

這些平臺有著各自的優勢,但也各有各的局限性,如網速慢、智能化程度低。比如“書同文古籍數據庫”收費較高,“中國哲學書”電子化計劃目前囊括了超過三萬部著作,用戶卻常常無法正常訪問。

今年3月,字節跳動與北京大學聯合成立“北大——字節數字人文開放實驗室”,雙方協作研發推出古籍數字化平臺——識典古籍。10月,識典古籍測試版已上線,目前,已整理上傳390本古籍經典(均為四部叢刊書目),3000卷,3000多萬字,預計在3年內將整理10000種古籍,基本覆蓋儒家、道家和佛家的經典書目,對用戶免費開放。

圖片

▲識典古籍平臺主頁面截圖


━━━━━
古籍是如何實現數字化的?

識典古籍有何技術特點?項目負責人介紹,識典古籍主要運用了三種技術,文字識別、自動標點、命名實體識別。

文字識別技術,即使用OCR技術對古籍的影印版文字進行單個切分、文字識別、順序識別。所謂文字切分,是指古籍掃描件中的單字檢測技術,能夠獲取每個字符的具體位置;文字識別,將切分的圖片送入文字識別模型,獲取每個文字的具體編碼;順序識別,結合文字內容和文字位置,獲取整張古籍掃描件的閱讀順序。

圖片

▲古籍數字化過程視頻截圖

OCR的應用流程,是用電子設備對紙本古籍進行掃描,內容轉錄到計算機中,并生成相應的數字文檔,效率與人工錄入不可同日而語。目前行業內OCR識別準確率平均為93%至94%,識典古籍的準確率為96%至97%。

自動標點技術,是通過序列標注的方式對古籍自動進行標點劃分,支持“,。?!、:;”七種常用標點。舉例來說,“學而時習之不亦說乎”,自動標點后的結果是“學而時習之,不亦說乎?”命名實體識別,則是通過序列標注識別古籍文本中的命名實體,支持識別人名、地名、書籍、時間、官職這五種類型的實體。

圖片

▲自動標點技術解析視頻截圖

人工智能識別的工作完成后,為了方便用戶閱讀,整理平臺要進一步對成型的文本進行整理。

首先,是對3%和4%錯誤率進行人工修改,分出段落和標題,然后再賦予不同的格式。而對于不同質量的古籍文獻,整理標準不一,人力承擔著不同的職能,大致流程為制定整理標準、人工整理、審核、上架,相關管理者是有古籍知識經驗的北大團隊。

其次,是對用戶訪問數據進行統計。然后是資源管理的功能,用戶可以更清晰地看到每本書的基礎信息,具體內容,以及當前所處的整理狀態。

最后,將古籍劃分等級,如經典書目、常讀書目、基礎書目,像《論語》這種經典書目,對正確率、標點和注釋的要求都較高。負責人介紹,目前這些功能有的已經成型,有的還需要進一步增強,古籍數字化并非易事。


━━━━━
古籍數字化的現實困境

中國是全球擁有古籍最多的國家,國內現存漢文古籍300萬部,散居在海外的古籍超過40萬部,它們依然面臨著衰朽,而已完成數字化的古籍為7.4萬部,數字化進程仍處于初步階段。

其中面臨幾大難點。首先是部分古籍在數字化之前要先完成修復,但古籍修復工序復雜,難以完全用科技手段,且培養古籍修復人員需要極高的時間成本。其次,花費高昂,有專家估算,如果將全國尚未數字化的古籍全部數字化,采集、組織、加工、存儲、管理等費用大約需要60億元。第三,技術難度高,現有的數字化很多是由縮微膠片轉換而成,呈黑白影像且分辨率較低,難以切實滿足讀者的需求。

過去,古籍內容轉化為數字文本主要依靠專家人工錄入,耗時費力。北京大學數字人文研究中心主任王軍算過一筆賬:我國現存古籍約有20萬種,從1949年到2019年,共修復整理出版了近38000種,要將現存古籍全部修復整理出來,可能需要三百年的時間。若利用人工智能技術輔助修復整理,大概二三十年就能完成。

相關負責人介紹說,目前古籍的使用人數眾多,一些高校斥資買古籍數據庫,但是訪問不是很方便。建立數字化平臺,各類學科的專業人士能更容易查看古籍文獻。一些潛在的古籍愛好者,數字化平臺可將這部分用戶迅速連接起來。

目前,識典古籍測試版的句讀錯誤率在3%到4%,文字識別也有一定的錯誤率存在,影響閱讀體驗。在人工智能機器學習一段時間后,準確率將會提升到98%左右。

圖片

▲古籍修復師在工作

作為北京大學-字節跳動數字人文開放實驗室的成員,王軍有著豐富的古籍數字化經驗,他曾研發過“《宋元學案》知識圖譜可視化系統”,對240萬字的《宋元學案》進行了文本處理和分析,將2000多位宋元理學學者、近100個學術流派所涉及的人物、時間、地點、著作等提取出來構造成知識圖譜。

據他介紹,對于識典古籍的開發和應用,北京大學主要從三方面入手,第一,聯絡國內的圖書館尋求公版資源,保障版本的正當性;第二,聯系北師大、復旦、南大、陜西師大等高校的學者和文獻專家,進行人工審核與校對,彌補人工智能有識別錯誤率的短板;第三,北大利用自有的學術平臺,鏈接學術界和高校的年輕用戶,對識典古籍進行推廣。


━━━━━
古籍保護的更多可能

字節跳動旗下有多個信息分發平臺,沉淀著大量關于內容平臺的經驗和技術,這些技術可以逐漸向古籍智能數字化的方向上遷移。過去半年,識典古籍技術開發團隊整合了包括字節跳動人工智能實驗室、今日頭條的設計團隊和抖音的開發、測試團隊成員加入,其中有不少是古文獻專業和文史哲專業的成員。

識典古籍在使用性上強調用戶體驗,網頁打開流暢。主頁有檢索欄,用戶可直接搜索書目;右上方是書庫,點進去可看到經、史、子、集四個欄目;下方是古籍書樣,如《周易》、《荀子》、《左傳》,主頁下方是“儒家經典”“道家經典”“文學經典”三個欄目。點開一本書,左邊是目錄,右邊是正文,上方有四個功能項,依次點擊可看到古籍原本的影像、注疏、繁簡字體切換以及書庫,且每部古籍都有精校和粗校的標簽提示。

圖片

▲“識典古籍”網頁截圖

目前識典古籍只有網頁版,相關技術負責人預測,今年11月份識典古籍將會推出移動端,到時會鏈接到抖音和今日頭條,活化更多的古籍內容。

在數字化之外,一年多來,字節跳動在古籍修復和活化上也有所進展。現在,字節跳動資助國家圖書館定向修復的珍貴古籍104冊件,現已完成50多冊件,包括一批稀有的樣式雷圖檔。在活化方面,抖音平臺推出“尋找古籍守護人”計劃,四大名著、二十四史、四書五經相關的視頻播放量超過600億次,涵蓋漫畫、影視、美食、音樂等多種內容體裁。

古籍承載著中華文明,它的傳播是需要大眾參與。未來,通過識典古籍,向全社會開放古籍閱讀檢索研究能力,還將實現全自動整理校對,更高效地實現存量古籍全部數字化。同時,鼓勵擁有文獻的學者自行上傳文獻,豐富平臺內容,用戶甚至可參與再創作和再闡釋,與平臺形成一種良性互動,助力古籍文化傳承和研究。

來源:新京報

爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
沙發  發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖,
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
板凳  發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
地板  發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
4樓 發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
5樓 發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖,親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖,
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
6樓 發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖,親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖,親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
7樓 發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90,
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
8樓 發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖,好
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
帥哥離線昆山小新秀
發帖
589
昆幣
982 枚
9樓 發表于: 2023-03-21 , 來自:江蘇省0==
親愛的昆山小新秀,我們非常高興地告訴你,你剛剛升到了昆山過客級別。你離下一級昆山新人級別還有90帖,四五個
爆料有獎!關注昆山論壇抖音號,抖音搜索“昆山論壇”,或搜索抖音號:ksbbs
 
快速回復
限76 字節
如果您提交過一次失敗了,可以用”恢復數據”來恢復帖子內容
 
上一個 下一個
      电影一区二区三区久久免费观看| 777久久精品一区二区三区无码| 亚洲精品在线视频观看| 亚欧美在线观看| 美国黄色小视频| 最近中文字幕av免费高清| 天天做夜夜操| 毛片大全在线观看| 国产成人精品一区二区免费看京| 久久精品久久精品| 狠狠色香婷婷久久亚洲精品| 久久久精品影院| 色综合天天狠狠| 久久国产精品亚洲| 日韩av电影免费在线观看| 免费在线观看日韩av| 国产一区二区三区在线观看| 九色蝌蚪在线观看| 福利小视频在线| 欧美激情欧美| 中文一区二区在线观看 | 精品国产一区二区三区久久| 久久久综合免费视频| 亚洲日本无吗高清不卡| 国产三级av在线播放| 亚洲av成人精品一区二区三区在线播放| 午夜激情影院| 国产成人免费av一区二区午夜| 99久久精品一区二区| av电影在线观看完整版一区二区| 欧美日韩国产精品一区| 911国产网站尤物在线观看| 每日在线观看av| 中文字幕中文在线| 波多野结衣毛片| 福利在线国产| 羞羞答答一区二区| 国产精品毛片久久久久久久| 久久精品国产成人| 国产美女主播在线| 岛国av中文字幕| 粉嫩粉嫩芽的虎白女18在线视频| 久久精品福利| 国产精品丝袜黑色高跟| 欧美老女人性生活| 又粗又黑又大的吊av| 中文字幕在线观看高清| 日本福利片在线| 97国产成人高清在线观看| 国产亚洲精品免费| 久久久精品视频成人| 好吊妞无缓冲视频观看| 在线观看国产精品视频| 成人av毛片| 99在线观看免费视频精品观看| 欧美日本一道本| 欧美日韩一区二| 久久国产免费观看| 情趣网站在线观看| 亚洲人metart人体| 91国偷自产一区二区三区观看| 99re6热在线精品视频播放速度| mm131丰满少妇人体欣赏图| 日本爱爱网站| 国产ts一区| heyzo一区| 福利一区福利二区| 欧美精品午夜视频| 亚洲第一区第二区第三区| 亚洲视频日韩| 99久久久国产| 亚洲人妖av一区二区| 国产精品久久久久久五月尺| 谁有免费的黄色网址| 女人体1963| 欧美日本一区二区视频在线观看 | jizz免费看| 手机亚洲手机国产手机日韩| 色婷婷综合久久久久中文 | 色琪琪综合男人的天堂aⅴ视频| 国产精品午夜一区二区欲梦| 成人一级片网站| 亚洲在线视频免费| 国产精选久久| 午夜欧美视频在线观看| 欧美日韩第一视频| 亚洲国产欧美91| www.女人的天堂.com| 色喇叭免费久久综合网| 91精品国产品国语在线不卡| 黄网站色视频免费观看| 一本岛在免费一二三区| 精品一区二区三区视频在线播放| 麻豆成人91精品二区三区| 亚洲午夜精品视频| 红桃视频 国产| 天天爱天天色| 亚洲黄色天堂| 色偷偷av一区二区三区乱| 中文字幕人妻一区| 91网页在线看| 精品一区二区成人精品| 韩国福利视频一区| 粉嫩av性色av蜜臀av网站| 又爽又大又黄a级毛片在线视频| 成人午夜av影视| 亚洲欧洲国产一区| 天天综合天天添夜夜添狠狠添| 被陌生人带去卫生间啪到腿软| 欧美99在线视频观看| 欧美日韩一本到| 欧美视频在线播放一区| 色视频免费观看| 亚洲午夜在线| 丝袜美腿精品国产二区| 成人免费黄色av| 亚洲一区在线日韩在线深爱| 国产精品亚洲а∨天堂免在线| 国产精品入口免费视频一| 波多野结衣在线电影| 日韩综合av| 欧美日韩一区国产| 日韩视频www| 国产成人一二片| 日韩午夜在线影院| 亚洲精品在线网址| 在线观看污网站| wwwwxxxxx欧美| 日韩成人在线资源| 欧美高清3dfreexxxx性| 欧美激情亚洲| 91禁外国网站| 一级黄色在线观看| 91精品入口| 亚洲一区二区国产| 制服丨自拍丨欧美丨动漫丨| 日本大胆在线观看| 日韩欧美在线观看| 激情黄色小视频| 国产三级电影在线| 亚洲精品国产品国语在线app| 国产毛片久久久久久国产毛片| 成看片vvv222| 不卡一区二区在线| 亚洲一区二区三区加勒比| 天堂视频在线免费观看| 久久成人羞羞网站| 国产在线精品一区二区三区》| 永久久久免费浮力影院| 香蕉国产精品偷在线观看不卡| 91精品久久久久久久久久另类 | 亚洲在线观看网站| 毛片免费不卡| 欧美日韩国产黄| 成人性生交视频免费观看| 日本黄色片在线观看| 欧美三级欧美成人高清www| 中文字幕亚洲影院| 国产经典自拍视频在线观看| 一区二区三区欧美在线观看| 亚洲精品第三页| 1区2区3区在线视频| 欧美日韩一区二区三区在线| 亚洲av无码一区二区三区人| 欧美黄色三级| 亚洲三级免费看| 无码人妻精品一区二区50| 欧美日韩激情在线一区二区三区| 国产99久久精品一区二区永久免费| 婷婷国产成人精品视频| 91在线高清| 欧美性xxxxx极品少妇| 精品人妻少妇嫩草av无码| 天天噜天天色| 亚洲乱码国产乱码精品精98午夜| 久热在线视频观看| 国产精品一二三产区| 亚洲国产天堂久久国产91| 午夜毛片在线观看| 亚洲精品a级片| 国产伦精品一区二区三区照片91| 免费毛片大全| 国产精品成人一区二区三区夜夜夜| 在线观看av免费观看| 黄色亚洲网站| 久久网福利资源网站| 亚洲第一页在线观看| 久久精品一区二区国产| 一级做a爰片久久| 国产精品99999| 精品免费国产一区二区三区四区| 久久久久久久极品| 在线成人av| 在线视频福利一区| h视频在线免费| 亚洲激情在线视频| 亚洲xxxx天美| 国产福利一区二区三区在线视频| 穿情趣内衣被c到高潮视频| 成年人视频在线免费观看|