查看: 1684|回复: 15
打印 上一主题 下一主题

[讨论] 云ocr复刻纸质词典内容为电子词典的一些探索

  [复制链接]
  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    跳转到指定楼层
    1
    发表于 2019-2-5 14:32:40 | 只看该作者 |只看大图 回帖奖励 |倒序浏览 |阅读模式
    为什么要将纸质内容转成电子内容?
    1,  词条索引,便于查询
    2,  全文搜索,便于快速查询词组等内容
    电子化前步骤:
    1,  词典的扫描版图片
    2,  云ocr
    3,  文本编辑器和html标签插入插件
    电子化过程:
    1,  由无到有,目标的词典,利用云ocr得到英文和中文的内容,需要各自校对中英的内容数据和插入html标签
    2,  由一半到有,有英文全文内容但缺中文,只需校对中文的数据和插入中文部分的html标签即可
    怒怼一个词条(由一半到有):
    《ENCARTA英汉双解大词典》:
    《译文版牛津英汉双解词典》:

    评分

    2

    查看全部评分

    本帖被以下淘专辑推荐:

  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    推荐
     楼主| 发表于 2019-2-5 23:08:08 | 只看该作者
    y8888 发表于 2019-2-5 22:37
    目前也可能只有这种方法快点。若有英文则可以云翻译后再校对,这样可以省打好多字,速度上快些。那本韦氏我 ...

    还有就是韦氏高街不是手打的数据,而是插入云ocr的中文数据到html相应英文解释和句子后面的,手打不可能一个月完成的。我的猜想:如果能用云ocr的数据利用英文内容模糊匹配原本的英文内容并自动插入相应的中文到原本的英文内容后面,利用这样的脚本速度会快很多,当然这个匹配准确率估计还是低,需要人工干预校对。

    评分

    1

    查看全部评分

    该用户从未签到

    123

    主题

    1719

    回帖

    3万

    积分

    翰林院编修

    Rank: 11Rank: 11Rank: 11Rank: 11

    积分
    30382

    灌水大神章小蜜蜂章笑傲江湖章翰林院专用章管理组专用章

    2
    发表于 2019-2-5 16:29:51 | 只看该作者
    和 @Android 的方法如出一辙呢  好方法!多个云OCR平台 根据平台要求将图片处理成合适的大小(甚至是切图为小块) 进行多次OCR 后比较差别
  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    3
     楼主| 发表于 2019-2-5 16:52:19 | 只看该作者
    chigre3 发表于 2019-2-5 16:29
    和 @Android 的方法如出一辙呢  好方法!多个云OCR平台 根据平台要求将图片处理成合适的大小(甚至是切图为 ...

    本人有参与韋氏那本的录入(也提了一些意见),所以和Android方法一样,搜狗的ocr的api确实有尺寸限制,不同云ocr的数据用来对比文档用于校对可以省力气。

    评分

    1

    查看全部评分

  • TA的每日心情
    郁闷
    2018-5-17 09:15
  • 签到天数: 1 天

    [LV.1]初来乍到

    56

    主题

    490

    回帖

    1万

    积分

    分区版主

    Rank: 11Rank: 11Rank: 11Rank: 11

    积分
    12730

    翰林院专用章灌水大神章笑傲江湖章小蜜蜂章管理组专用章

    4
    发表于 2019-2-5 22:37:48 | 只看该作者
    目前也可能只有这种方法快点。若有英文则可以云翻译后再校对,这样可以省打好多字,速度上快些。那本韦氏我有这样做好,本来计划有空校对的,结果你们人肉先出来了及无私贡献让我捡了个现,再次感谢!
  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    5
     楼主| 发表于 2019-2-5 22:57:17 | 只看该作者
    y8888 发表于 2019-2-5 22:37
    目前也可能只有这种方法快点。若有英文则可以云翻译后再校对,这样可以省打好多字,速度上快些。那本韦氏我 ...

    云翻译倒是没想到。我们校对的方法是利用两个云ocr的数据,对比出有差异的中文“字形”部分,然后根据纸质词典内容进行校对的。
  • TA的每日心情
    奋斗
    2020-7-12 05:59
  • 签到天数: 97 天

    [LV.6]常住居民II

    16

    主题

    585

    回帖

    2万

    积分

    禁止发言

    积分
    21266
    7
    发表于 2019-2-6 10:58:52 | 只看该作者
    这样的市面上所有的电子词典都可以得以mdx化。
    就海笛为例:
    1.使用外接的设备,投射到电脑屏幕上(使用虚拟分辨器,把整张app界面全部呈现出来)
    2.按键精灵对自动化词条输入,截图或者直接多平台ocr云识别,脚本处理整合插入标签
    3.保存数据批量对比,找出差异人工校对
    4.mdx呈现
  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    8
     楼主| 发表于 2019-2-6 12:06:35 | 只看该作者
    yaknow 发表于 2019-2-6 10:58
    这样的市面上所有的电子词典都可以得以mdx化。
    就海笛为例:
    1.使用外接的设备,投射到电脑屏幕上 ...

    电子版词典优先解密出来,不行再进行ocr(数据准确率问题。)
  • TA的每日心情
    开心
    2019-2-2 20:37
  • 签到天数: 1 天

    [LV.1]初来乍到

    1

    主题

    11

    回帖

    181

    积分

    童生

    Rank: 2

    积分
    181
    9
    发表于 2019-2-7 01:26:45 | 只看该作者
    用了天若集合云ocr,但是总提示说该区域无文字。改了win7运行模式也不行,目前还没找到对中英文复合文字ocr识别比较强的软件
  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    10
     楼主| 发表于 2019-2-7 09:26:41 | 只看该作者
    likittyli 发表于 2019-2-7 01:26
    用了天若集合云ocr,但是总提示说该区域无文字。改了win7运行模式也不行,目前还没找到对中英文复合文字ocr ...

    天若ocr开始收费了,免费版的百度api需要申请,默认的搜狗api有图片尺寸限制,将图片截的范围缩小,云ocr主要解决的是中文识别准确率和中文空格问题。
  • TA的每日心情
    开心
    2018-8-8 03:13
  • 签到天数: 1 天

    [LV.1]初来乍到

    254

    主题

    4264

    回帖

    7万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    79050

    小蜜蜂章笑傲江湖章灌水大神章QQ 章

    QQ
    11
    发表于 2019-2-7 13:00:13 来自手机 | 只看该作者
    請流星兄多加闡述云OCR,其原理和工具,小弟不甚了解,能否有圖解說,因其應用頗廣,或許能解殊多自行掃描的一些文件,謝謝
  • TA的每日心情
    开心
    2018-8-8 03:13
  • 签到天数: 1 天

    [LV.1]初来乍到

    254

    主题

    4264

    回帖

    7万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    79050

    小蜜蜂章笑傲江湖章灌水大神章QQ 章

    QQ
    12
    发表于 2019-2-7 13:10:22 来自手机 | 只看该作者
    yaknow 发表于 2019-2-6 10:58
    这样的市面上所有的电子词典都可以得以mdx化。
    就海笛为例:
    1.使用外接的设备,投射到电脑屏幕上 ...

    請yaknow兄多加闡釋其想法,其外接設備?投射到屏幕,?謝謝啦!
  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    13
     楼主| 发表于 2019-2-7 13:28:39 | 只看该作者
    喬治兄 发表于 2019-2-7 13:00
    請流星兄多加闡述云OCR,其原理和工具,小弟不甚了解,能否有圖解說,因其應用頗廣,或許能解殊多自行掃描 ...

    云ocr可以用于车牌号,身份证号等等的识别。原理么,我只知道英文的,就是光学符号识别外加词典数据库用于匹配(估计中文和其他语言类似吧),识别准确率本身可以训练的,Google的tesseract就可以训练,当然,我只是使用者,没有深入研究。

    工具就是云ocr的api,你可以设置一些参数,例如用于身份证的,车牌号的,用于书籍的代码就需要自己编写了,也可以DIY用于其他用途的。
    云ocr,顾名思义,ocr的工作交给云端处理,中文的识别准确率在90%,比本地ocr要好太多了。
    我用天若ocr免费版,双击图标后使用自带截图功能截图后交给云ocr处理,然后返回识别数据,使用很简单,不用动到代码的部分,全程就是截图+手动复制内容。


  • TA的每日心情
    开心
    2019-2-2 20:37
  • 签到天数: 1 天

    [LV.1]初来乍到

    1

    主题

    11

    回帖

    181

    积分

    童生

    Rank: 2

    积分
    181
    14
    发表于 2019-2-7 15:43:40 | 只看该作者
    流星冲击 发表于 2019-2-7 09:26
    天若ocr开始收费了,免费版的百度api需要申请,默认的搜狗api有图片尺寸限制,将图片截的范围缩小,云ocr ...

    目前国内对中文ocr识别据说最好的还是汉王商用。主要是图书馆录入文献用的。特别是繁体竖排。老旧古籍。

    我主要是用来处理大部古籍电子书。所以单张截图的这种方式工作量太大。谢谢分享。如果君以后找到其他思路来解决这个问题还请不吝分享。
  • TA的每日心情
    开心
    2019-3-26 21:36
  • 签到天数: 178 天

    [LV.7]常住居民III

    16

    主题

    549

    回帖

    2万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    26462

    QQ 章

    15
     楼主| 发表于 2019-2-7 17:44:42 | 只看该作者
    likittyli 发表于 2019-2-7 15:43
    目前国内对中文ocr识别据说最好的还是汉王商用。主要是图书馆录入文献用的。特别是繁体竖排。老旧古籍。
    ...

    繁体竖版,天若有竖版插件,不过云ocr对繁杂的汉字识别率会低,未测试过竖版文字的效果。
  • TA的每日心情
    开心
    2018-8-8 03:13
  • 签到天数: 1 天

    [LV.1]初来乍到

    254

    主题

    4264

    回帖

    7万

    积分

    状元

    Rank: 9Rank: 9Rank: 9

    积分
    79050

    小蜜蜂章笑傲江湖章灌水大神章QQ 章

    QQ
    16
    发表于 2019-2-7 18:20:44 来自手机 | 只看该作者
    流星冲击 发表于 2019-2-7 13:28
    云ocr可以用于车牌号,身份证号等等的识别。原理么,我只知道英文的,就是光学符号识别外加词典数据库用 ...

    謝謝流星兄詳細的解惑