主题:
字号:
16
行距:
2.0

第1765章 遇到问题,分析问题,解决问题[2 / 3]

阵。

一个记录每个网页的出链,一个记录入链。

然后迭代计算,直到收敛。”

“收敛条件呢?”

“每个网页的分数变化小于某个阈值。”

“计算量还是大。”张涛摇头,“十万网页,矩阵就是一百亿个元素。

现在的服务器算不动。”

第三天,陈浩打电话来了。

“遇到困难了?”他问。

贾瀞雯实话实说:“算力不够。

团队说矩阵太大,迭代计算需要的时间太长。”

电话那头沉默了一会儿。

“可以简化。”陈浩说,“第一,不需要算所有网页。

只计算有入链的网页,那些孤立页面直接给最低分。

第二,迭代可以分批进行,不需要一次性算完。

第三,分数不需要精确到小数点后很多位,整数就行。”

贾瀞雯把这些记下来,转告给团队。

李明听了,一拍大腿:“对啊!我们可以分块计算!先把网页按链接关系分组,组内迭代,组间再迭代。

这样内存占用能降下来。”

思路打开了,进展就快了。

第一周结束时,他们做出了简化版的超链分析算法。

测试数据很小,只有一千个网页,但结果令人鼓舞——重要网页的分数确实高,垃圾网页的分数确实低。

第二周,开始集成到真实数据里。

问题又来了:十万网页的链接关系太复杂,计算一次要八个小时。

“太慢了。”张涛盯着屏幕,“如果每天都要重新计算,根本跟不上网页更新的速度。”

贾瀞雯给陈浩打电话。

这次陈浩的建议很直接:“增量更新。

每天只计算新增网页和发生变化的部分,其他的用缓存。”

又是新的挑战。

但团队已经适应了这种节奏——遇到问题,分析问题,解决问题。

第二周周四晚上,李明从座位上跳起来。

“出来了!第一次完整计算完成!”

所有人围过去。

屏幕上显示着计算结果:十万网页,每个都有一个分数。

排在前面的,确实是那些权威网站,新闻门户,高校主页。

排在后面的,大多是个人主页或者广告页面。

“集成到排名算法里测试一下。”贾瀞雯说。

李明敲了几行代码,启动测试程序。

输入几个关键词,搜索结果按新算法排序。

效果明显。

之前搜“电脑价格”,前排结果里总有几个堆关键词的垃圾页面。

现在那些页面不见了,取而代之的是真正的电脑报价网站。

“准确率!”张涛喊,“测试集准确率升到

本章未完,请点击下一页继续阅读!

玄幻:天牢三年,那个纨绔出狱了
屠戮苍生
刷抖音成首富,各类绝色争来家住
幸运的精灵
穿成冒领恩情的恶毒女配,她跑了
沚阿情
堂妹抢婚?爽,禁欲首长馋上我!
茶叶香
半生凑合
一个傻女子
穿成财阀太子爷的捞子前男友
猫同学
替嫁残疾英雄,婆家宠我青云志
哈哈小姐
获得中医传承后,我无敌了
我才不会深情
火影:当迈特凯学会少林72绝技
两百斤的猫
穿成诡异后联盟派我去当boss
墨墨无痕
满门忠烈,祖母逼我纳八嫂续香火
不会玩游戏的小西瓜
年代:村霸,娶不上媳妇怎么了?
宁离火
我靠死人吃饭
王一帆
乡村神医林辰
六月斜阳
我,废物皇子,开局选择项羽模板
南风追光
绝密工程:从上古的馈赠开始
咸吃萝卜淡心
多我一个后富怎么了
渔雪
快穿之我家宿主又作妖了
康红
GB不女扮男装不舒服
可以但我不
沈亦安叶漓烟
纸包
东北天城之礼铁祝
礼铁祝
四合院:重生52年,逃荒四九城
咸鱼小子
武侠穿越,开局学会杨家枪
沉若冰
噬恶演武,诸天除魔
温茶米酒
大明:从边军开始覆明灭清
就爱啃鸡翅
穿成废灵根:捡的夫君个个是大佬
四月的十月
林枫苏慕白
惜若黄
秦时:我在天宗误入歧途
夜静不语
人中之龙
葫芦村人
徒儿,为师求你了,快下山去吧!
银眸沙皇
哈利波特之法神
无照司机
武侠之至尊升级系统
星海
天道烬长生
孤泠泪
木筏求生,3S鱼竿带飞六个校花
炫麦
汉东:沙李要政绩?我停摆全省
空山新鱼
华娱97:从歌手开始
充满智慧的猫
人在柯南,系统钦点蝙蝠侠
笑容要消失了
神诡制卡师:开局百鬼夜行
平欧子
虎贲郎
中更
斗破苍穹之雷霆震碎
一贫如洗羊羊
穿书女频,大婚当日被女主杀死
孤山放牛娃
重生后,自己养成小青梅
曹瞒君
五代风华
怪诞的表哥
从满仓A股开始成为资本
辣条鲨手
叶楚月夜墨寒
非我良人
绝世萌宝要翻天叶楚月夜墨寒
佚名
少林侠影:无敌武僧闯江湖
天魔圣
无限天神君临
九四或跃在渊
大明:我鄢懋卿真的冒青烟
我知鱼之乐
参加武考后,我一路无敌
云青天水在瓶