【2019/7/14】英文喂鸡百科20190401文字试用版

邱海波 · 发表于 2016-6-30 19:09:20

本帖最后由邱海波于 2022-9-6 21:47 编辑

===========================================
*提示：如本帖关闭，无法回复，交流讨论，敬请移步专帖。
===========================================
(1)2019.7.14，更新英文喂鸡文库20190701文字试用版:
下载地址：百度网盘 https://pan.baidu.com/s/1sCvtNOi0bpvbZdJCRvAJsA 提取码x5ni
===========================================
(2)2019.4.21，更新英文喂鸡百科20190401文字试用版：

（一）.制作说明：大家好，时隔两年十个月，应大家积极要求，Mdict版本英文喂鸡百科再度更新。

英文喂鸡百科20190401
数据版本：2019年4月1日
(1)制作信息：
·词条：14589846词条，416901公式
·日期：2019年4月21日
·数据：http://dumps.wikimedia.org/enwiki
·工具：wikicafe 1.0 & Mdxbulider 3.0 beta2
(2)更新日志：
·2019/4/17：20190401数据第一个版本

复制代码

a.简介：
采用最新数据，使用wikicafe引擎转换制作。页面效果尚可，总计1459万词条+41.7万个公式内容。mdx文件总计14.9GB，mdd文件总计186M（X5）。
b.制作说明：
#起因：制作英文喂鸡百科的起因，是因为几个论坛的朋友问我除了中文百科，能不能制作英文喂鸡。因为没有经验，且耗时耗力巨大，没想到自己这么有耐心和恒心，竟然完成了英文喂鸡百科词典的制作。
#过程：词典源数据文件.bz2约14.9 GB，下载约一天半。不解压，直接采用wikicafe引擎处理文本约一天，得到约56GB txt数据文本。再分割成6GB文本文件10个，
单个6GB文本文件处理首尾行词条内容，然后解决数百万个词条内链问题（详见）。2个6GB文本文件合并为12GB文本文件，这样共5个大文本文件：5个12GB。5个大文本文件再经mdxbulider处理，于是便是得到5个mdx，暂称为分卷一至五。对应5个mdd由于用的同一data数据文件夹，故内容、大小完全一致。下载时下载一个即可。
转制mdx、mdd约一天。上传耗时约两天，大约15.8GB文件。
#其他：
wikicafe引擎处理效率高，但对词条内容模板形式几乎未作处理，所以可能导致某些页面尤其是人名词条排版效果较差。介意效果者请勿使用。
该版本为文字试用版，无图有公式，仅供试用！不保证后续能对词条页面效果有所改善和及时更新。
效果图：（点击图片可以查看大图）

（二）.下载地址：
英文喂鸡百科20190401：一共五个分卷mdx，001-005。搜索时联合使用。
下载地址：百度网盘https://pan.baidu.com/s/1fVCKI-Ot_XZIAroceqp9RA 提取码29hi
制作十分不易，欢迎大家积极赞助！

（三）.联系本人：
邮箱[email protected]

（四）.输出日志：
MDX：

1、

Begining loading source file...
Done
Time used for this section: 181 seconds
Sorting dictionary...
Done!
Begin processing index...
Done!
Original index size = 32516KB, compressed size = 12471KB, compression ratio = 38%
Time used for this section: 20 seconds
Begin processing data contents...
Done!
Original text size = 12507470KB, compressed size = 3656348KB, compression ratio = 29%
Time used for this section: 2396 seconds
Number of entries: 1265107
Conversion succeed!

复制代码

2、

Begining loading source file...
Done
Time used for this section: 249 seconds
Sorting dictionary...
Done!
Begin processing index...
Done!
Original index size = 78394KB, compressed size = 29495KB, compression ratio = 37%
Time used for this section: 47 seconds
Begin processing data contents...
Done!
Original text size = 12390924KB, compressed size = 3428278KB, compression ratio = 27%
Time used for this section: 2786 seconds
Number of entries: 2886884
Conversion succeed!

复制代码

3、

Begining loading source file...
Done
Time used for this section: 66 seconds
Sorting dictionary...
Done!
Begin processing index...
Done!
Original index size = 110349KB, compressed size = 40231KB, compression ratio = 36%
Time used for this section: 6 seconds
Begin processing data contents...
Done!
Original text size = 12317878KB, compressed size = 3204491KB, compression ratio = 26%
Time used for this section: 1115 seconds
Number of entries: 3904764
Conversion succeed!

复制代码

4、

Begining loading source file...
Done
Time used for this section: 69 seconds
Sorting dictionary...
Done!
Begin processing index...
Done!
Original index size = 105024KB, compressed size = 38623KB, compression ratio = 36%
Time used for this section: 7 seconds
Begin processing data contents...
Done!
Original text size = 12324338KB, compressed size = 3069390KB, compression ratio = 24%
Time used for this section: 1044 seconds
Number of entries: 3640568
Conversion succeed!

复制代码

5、

Begining loading source file...

Done

Time used for this section: 215 seconds

Sorting dictionary...

Done!

Begin processing index...

Done!

Original index size = 88722KB, compressed size = 31612KB, compression ratio = 35%

Time used for this section: 46 seconds

Begin processing data contents...

Done!

Original text size = 8721117KB, compressed size = 2117537KB, compression ratio = 24%

Time used for this section: 1737 seconds

Number of entries: 2892523

Conversion succeed!
复制代码

MDD：

Begining scaning data directory ...
Done
Begin processing data file index...
Done!
Original index size = 36641KB, compressed size = 11521KB, compression ratio = 31%
Begin processing data file contents...
Done!
Original text size = 219289KB, compressed size = 179648KB, compression ratio = 81%
Number of entries: 416901
Conversion succeed!

复制代码

===========================================

tcpip · 发表于 2018-6-1 15:48:47

本来以为是旧贴子，打开网盘以后，直接惊呆了，难得楼主一直在维护数据，赞赞赞！！！什么是工匠精神，这就是工匠精神！！！不沽米数，不设门槛，是真名士自风流！！！

邱海波 · 发表于 2022-9-6 21:43:17

mauvesesame@163 发表于 2022-9-5 23:35
请问，为什么7月版和4月版大小相差那么多。楼主说4月版的五个mdd下那个都行是什么意思？4月累加后文件很大 ...

4月是百科，7月是文库啊

macrosnow · 发表于 2019-4-25 15:12:44

又一杰作再度更新了

kyletruman · 发表于 2016-7-4 21:22:55

本帖最后由 kyletruman 于 2016-7-4 21:38 编辑

感谢楼主制作分享，但我发现了一个问题：2016.6.1的英文维基百科缺Donald Trump词条

arisaema · 发表于 2016-7-2 09:34:33

本帖最后由 arisaema 于 2016-7-2 09:50 编辑

工程浩大，必须支持！微信已捐Cam***_KBG

Learne · 发表于 2022-10-1 09:44:31

FTGDYRTYTFUYUJTYUJ

邱海波 · 发表于 2022-9-6 21:41:30

mauvesesame@163 发表于 2022-9-5 23:35
请问，为什么7月版和4月版大小相差那么多。楼主说4月版的五个mdd下那个都行是什么意思？4月累加后文件很大 ...

五个mdd文件完全相同。但是每一个mdx需要对应一个mdd。所以你下载一个，复制四份，相应改名即可。

mauvesesame@163 · 发表于 2022-9-5 23:35:16

请问，为什么7月版和4月版大小相差那么多。楼主说4月版的五个mdd下那个都行是什么意思？4月累加后文件很大，是比7月的内容更多更全吗

lion1 · 发表于 2022-7-18 20:56:30

11111122222333

[email protected] · 发表于 2022-7-17 18:38:59

这个是wiki离线版？

kessy · 发表于 2016-7-2 08:32:43

多謝波波分享。

sculiuchang · 发表于 2016-7-2 10:00:14

感谢感谢，必须下载的。

邱海波 · 发表于 2016-7-6 20:15:21

arisaema 发表于 2016-7-2 09:34
工程浩大，必须支持！微信已捐Cam***_KBG

谢谢你的支持！

邱海波 · 发表于 2016-7-6 20:15:52

kyletruman 发表于 2016-7-4 21:22
感谢楼主制作分享，但我发现了一个问题：2016.6.1的英文维基百科缺Donald Trump词条

好的，回头我看看。

3xyz · 发表于 2016-7-18 20:00:39

楼主威武，坚韧不拔。谢谢

sabrina2111 · 发表于 2018-3-24 22:21:50

手机不够用啦，电脑下。谢谢楼主！！！

565079101 · 发表于 2018-5-25 14:30:58

楼主辛苦了，真心不容易啊，感谢分享

shirleyma7996 · 发表于 2018-5-27 19:35:41

请问为什么在欧陆词典上排版很乱？

shirleyma7996 · 发表于 2018-5-27 19:47:44

请问大神，为什么这个用在欧陆词典上排版很乱，是因为不兼容吗？

邱海波 · 发表于 2018-5-28 10:29:58

shirleyma7996 发表于 2018-5-27 19:47
请问大神，为什么这个用在欧陆词典上排版很乱，是因为不兼容吗？

不是，排版原本很差。建议你下载硕数阅读版本。

shirleyma7996 · 发表于 2018-5-28 19:26:10

邱海波发表于 2018-5-28 10:29
不是，排版原本很差。建议你下载硕数阅读版本。

谢谢老大了，我试试看看。

pangchunxi · 发表于 2018-7-2 01:13:19

多谢楼主无私分享制作

55487754 · 发表于 2018-7-6 15:54:54

工程浩大，必须支持

yenloowong · 发表于 2019-4-20 12:27:31

看一下，谢谢楼主

邱海波 · 发表于 2019-4-21 04:53:04

yenloowong 发表于 2019-4-20 12:27
看一下，谢谢楼主

已经上传完毕

邱海波 · 发表于 2019-4-23 18:11:36

lcasd8 发表于 2019-4-21 18:09
已赞助，10.

谢谢你的支持

psldd · 发表于 2019-4-23 18:48:33

这个现在不装也得装了

gttwork · 发表于 2019-4-24 11:33:51

感谢楼主辛勤制作，我发现中英喂鸡百科词条对照查询表非常有用，不知道是怎么制作的，我想自己制作一份。

macrosnow · 发表于 2019-4-25 15:11:44

又一杰作再度更新了

[英语] 【2019/7/14】英文喂鸡百科20190401文字试用版

评分

本帖被以下淘专辑推荐: