查看: 1191|回复: 12
打印 上一主题 下一主题

[筹划] 本人也想制作百度百科

[复制链接]

该用户从未签到

1

主题

3

回帖

98

积分

童生

Rank: 2

积分
98
跳转到指定楼层
1
发表于 2012-10-21 20:43:12 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
一直以来,我都希望能在电脑上离线使用百度百科,我曾经用离线浏览器下载几天几夜,但是效果不是很理想,一天才下十来万条,太慢了,后来,我发现了本网站,发现还可以将百度百科制作成词典,这是个很不错的方法,我会VBS编程,我想自己制作,9.10月份用了一百多个小时,下载完了五百多万个词条(HTM源代码),大小达到了190G,这个百度百科的数据真很大,我花了很多的时间来写文本处理程序,已经成功了,我是个追求完美的人,我把我下载的所有数据全部删掉了,包括我下载的高达百G的百科图片,我要重新开始,我要最新的数据,但是现在百度已经限制了同一个IP下载过多的数据,下载十分钟左右就会让你输图片验证码,不过我也有我的方法,那就是换IP,当检测到不能下载时我就自动更换IP,我试了下,一个小时也能下五六万个词条,用时估计在一百个小时左右,本人打算先制作一个纯文本版的,保留了网页中的词条连接,目前文件下载了一百五十万个词条,还在下载中。。。本来想上传一个测试文件的,我一看小于512kb,我看还是算了吧,我的文件50M啊!
  • TA的每日心情
    慵懒
    2021-12-21 09:52
  • 签到天数: 85 天

    [LV.6]常住居民II

    0

    主题

    631

    回帖

    2352

    积分

    解元

    Rank: 5Rank: 5

    积分
    2352

    灌水大神章

    2
    发表于 2012-10-21 21:24:34 | 只看该作者
    楼主真神人也!190GB ! 百度词条虽多而全,但其质量着实不高。 倘若楼主能制作出有图维基百科就更好了。
  • TA的每日心情
    慵懒
    2021-12-21 09:52
  • 签到天数: 85 天

    [LV.6]常住居民II

    0

    主题

    631

    回帖

    2352

    积分

    解元

    Rank: 5Rank: 5

    积分
    2352

    灌水大神章

    3
    发表于 2012-10-21 21:25:54 | 只看该作者
    翘盼阁下的大作!

    该用户从未签到

    13

    主题

    454

    回帖

    3027

    积分

    贡士

    Rank: 6Rank: 6

    积分
    3027

    灌水大神章

    4
    发表于 2012-10-21 23:45:20 | 只看该作者
    欢迎加入。
    空间不足,我一直都是保存tgz包的。
    近期没时间,有空时测下百度的限制。

    该用户从未签到

    26

    主题

    418

    回帖

    3370

    积分

    贡士

    Rank: 6Rank: 6

    积分
    3370

    灌水大神章小蜜蜂章笑傲江湖章

    5
    发表于 2012-10-22 01:51:07 | 只看该作者
    都是神一般的耐性

    该用户从未签到

    0

    主题

    2

    回帖

    2

    积分

    童生

    Rank: 2

    积分
    2
    6
    发表于 2012-10-22 07:56:31 | 只看该作者
    加油

    该用户从未签到

    45

    主题

    1420

    回帖

    1万

    积分

    管理员

    Rank: 13Rank: 13Rank: 13Rank: 13

    积分
    10971

    管理组专用章

    7
    发表于 2012-10-22 08:41:24 | 只看该作者
    500K附件是这个免费论坛的限制,没办法。另外纯文本的会不会不好用,表格、跳转什么的都没有了。不过150G的源文件,再怎么压缩估计也要15G。。。还有人愿意放这么大的文件在手机上么?

    该用户从未签到

    47

    主题

    360

    回帖

    831

    积分

    举人

    Rank: 4

    积分
    831
    8
    发表于 2012-10-24 23:15:51 | 只看该作者
    支持离线图文版的研制。

    该用户从未签到

    0

    主题

    6

    回帖

    56

    积分

    白身

    Rank: 1

    积分
    56
    9
    发表于 2012-10-26 21:20:00 | 只看该作者
    你好!我想要离线版的百度百科,希望能在电脑和iphone4s上使用,谢谢!我的QQ:645915600

    该用户从未签到

    93

    主题

    314

    回帖

    1642

    积分

    解元

    Rank: 5Rank: 5

    积分
    1642

    灌水大神章小蜜蜂章笑傲江湖章

    10
    发表于 2012-10-27 18:12:29 | 只看该作者
    够 厉害的 。。。

    该用户从未签到

    93

    主题

    314

    回帖

    1642

    积分

    解元

    Rank: 5Rank: 5

    积分
    1642

    灌水大神章小蜜蜂章笑傲江湖章

    11
    发表于 2012-10-27 18:13:57 | 只看该作者
    中国 的网速 不是 很给力 啊

    该用户从未签到

    0

    主题

    19

    回帖

    57

    积分

    白身

    Rank: 1

    积分
    57
    12
    发表于 2012-10-31 15:42:59 | 只看该作者
    支持一下!

    该用户从未签到

    0

    主题

    1

    回帖

    1

    积分

    童生

    Rank: 2

    积分
    1
    13
    发表于 2012-12-2 12:43:32 | 只看该作者
    支持,楼主的代码能不能看下,很想学习一下