主题:
字号:
16
行距:
2.0

第1765章 遇到问题,分析问题,解决问题[2 / 3]

网页的出链,一个记录入链。

然后迭代计算,直到收敛。”

“收敛条件呢?”

“每个网页的分数变化小于某个阈值。”

“计算量还是大。”张涛摇头,“十万网页,矩阵就是一百亿个元素。

现在的服务器算不动。”

第三天,陈浩打电话来了。

“遇到困难了?”他问。

贾瀞雯实话实说:“算力不够。

团队说矩阵太大,迭代计算需要的时间太长。”

电话那头沉默了一会儿。

“可以简化。”陈浩说,“第一,不需要算所有网页。

只计算有入链的网页,那些孤立页面直接给最低分。

第二,迭代可以分批进行,不需要一次性算完。

第三,分数不需要精确到小数点后很多位,整数就行。”

贾瀞雯把这些记下来,转告给团队。

李明听了,一拍大腿:“对啊!我们可以分块计算!先把网页按链接关系分组,组内迭代,组间再迭代。

这样内存占用能降下来。”

思路打开了,进展就快了。

第一周结束时,他们做出了简化版的超链分析算法。

测试数据很小,只有一千个网页,但结果令人鼓舞——重要网页的分数确实高,垃圾网页的分数确实低。

第二周,开始集成到真实数据里。

问题又来了:十万网页的链接关系太复杂,计算一次要八个小时。

“太慢了。”张涛盯着屏幕,“如果每天都要重新计算,根本跟不上网页更新的速度。”

贾瀞雯给陈浩打电话。

这次陈浩的建议很直接:“增量更新。

每天只计算新增网页和发生变化的部分,其他的用缓存。”

又是新的挑战。

但团队已经适应了这种节奏——遇到问题,分析问题,解决问题。

第二周周四晚上,李明从座位上跳起来。

“出来了!第一次完整计算完成!”

所有人围过去。

屏幕上显示着计算结果:十万网页,每个都有一个分数。

排在前面的,确实是那些权威网站,新闻门户,高校主页。

排在后面的,大多是个人主页或者广告页面。

“集成到排名算法里测试一下。”贾瀞雯说。

李明敲了几行代码,启动测试程序。

输入几个关键词,搜索结果按新算法排序。

效果明显。

之前搜“电脑价格”,前排结果里总有几个堆关键词的垃圾页面。

现在那些页面不见了,取而代之的是真正的电脑报价网站。

“准确率!”张涛喊,“测试集准确率升到百分之六十二了!”

办公室响起掌声。

本章未完,请点击下一页继续阅读!

龙啸天下陈平耿姗姗
韩三千
重生95流金岁月
愤怒刺猬
林枫苏月夕
旺仔老馒头
太古龙象诀林枫苏月夕
旺仔老馒头
修炼武功,道果永固!
火星火锅
狂徒!
不吃葱花
唯我独法:东京奇幻日常
黑枪叁号
龙渊剑神
夜辰寒
1990:刑侦档案
纯白小郎君
重生的我超有追求
鲸鱼禅师
从武林门派到长生仙门
任我笑
我在北美当地主
陶良辰
蜀山玄阴教主
蓬国公
别惹她!江总的心尖宝贝会打架
花惊鹊
今天他飞升了吗
裴不了
东京:你管这叫正常装备?
我吃维生素
前夫下跪时,我被他小叔揽腰缠吻
天降紫薇星
重生魔修,开局捡到一颗丧尸星球
天下墨矣
美利坚,我的系统来自1885年
照松间
美利坚:疾速追杀1924
漱梦实
我,枪神!
如水意
从趋吉避凶开始顺势成神
叮叮小石头
从开启族谱开始打造长生仙族
飞翔的天空城
同时穿越,但是反派科学家
命运的王牌
国潮1980
镶黄旗
从高校学霸到科研大能
不吃小南瓜
苟在修仙世界练武长生
牧童听竹
斗罗:武魂方天画戟,我孝出强大
朕没有病啊
重回1982小渔村
米饭的米
公若不弃,愿拜为义父
辣酱热干面
修仙界只有妖女了是吗
月下千早
四合院之扮猪吃老虎
戈壁孤狼夜
青山
会说话的肘子
仙命在我
杜养吾
半岛头号玩咖!
HKDoll
秦时小说家
偶米粉
重生鉴宝:我真没想当专家
眀智
工业克苏鲁,从海岛领主开始
刀如故
娱乐:我就是顶峰
疑似风月
以一龙之力打倒整个世界!
唐宋元明氢
美警生存实录:以德服人
夜叶总差
循规蹈矩能叫重生吗?
法学院新生
全球觉醒:开局加入聊天群
飞翔的四眼
发薪就能变强,我有十亿员工!
今月曾经照古河
大明:从战场捡属性开创诸天大明
无谅888
税收只在机枪射程内!
践行践远
混沌天帝诀凌峰苏琳
剑轻阳
魔王大人深不可测
晨星LL
穿越,然后被富家JK堵门
晚不鸽
路明非,成为艾尔登之王吧!
苏三十二