主题:
字号:
16
行距:
2.0

第1765章 遇到问题,分析问题,解决问题[2 / 3]

阵。

一个记录每个网页的出链,一个记录入链。

然后迭代计算,直到收敛。”

“收敛条件呢?”

“每个网页的分数变化小于某个阈值。”

“计算量还是大。”张涛摇头,“十万网页,矩阵就是一百亿个元素。

现在的服务器算不动。”

第三天,陈浩打电话来了。

“遇到困难了?”他问。

贾瀞雯实话实说:“算力不够。

团队说矩阵太大,迭代计算需要的时间太长。”

电话那头沉默了一会儿。

“可以简化。”陈浩说,“第一,不需要算所有网页。

只计算有入链的网页,那些孤立页面直接给最低分。

第二,迭代可以分批进行,不需要一次性算完。

第三,分数不需要精确到小数点后很多位,整数就行。”

贾瀞雯把这些记下来,转告给团队。

李明听了,一拍大腿:“对啊!我们可以分块计算!先把网页按链接关系分组,组内迭代,组间再迭代。

这样内存占用能降下来。”

思路打开了,进展就快了。

第一周结束时,他们做出了简化版的超链分析算法。

测试数据很小,只有一千个网页,但结果令人鼓舞——重要网页的分数确实高,垃圾网页的分数确实低。

第二周,开始集成到真实数据里。

问题又来了:十万网页的链接关系太复杂,计算一次要八个小时。

“太慢了。”张涛盯着屏幕,“如果每天都要重新计算,根本跟不上网页更新的速度。”

贾瀞雯给陈浩打电话。

这次陈浩的建议很直接:“增量更新。

每天只计算新增网页和发生变化的部分,其他的用缓存。”

又是新的挑战。

但团队已经适应了这种节奏——遇到问题,分析问题,解决问题。

第二周周四晚上,李明从座位上跳起来。

“出来了!第一次完整计算完成!”

所有人围过去。

屏幕上显示着计算结果:十万网页,每个都有一个分数。

排在前面的,确实是那些权威网站,新闻门户,高校主页。

排在后面的,大多是个人主页或者广告页面。

“集成到排名算法里测试一下。”贾瀞雯说。

李明敲了几行代码,启动测试程序。

输入几个关键词,搜索结果按新算法排序。

效果明显。

之前搜“电脑价格”,前排结果里总有几个堆关键词的垃圾页面。

现在那些页面不见了,取而代之的是真正的电脑报价网站。

“准确率!”张涛喊,“测试集准确率升到

本章未完,请点击下一页继续阅读!

求求了,快回家练琴吧
莫扎特别
发薪就能变强,我有十亿员工!
今月曾经照古河
华娱拯救意难平
大熊二熊
御兽:我的灵宠拥有游戏面板
小河向西流
一夕千悟,从杂役弟子开始
歪歪小虫
1986:我的普罗旺斯幸福生活
一池浅芽
唯我道
路过二次元
战争宫廷和膝枕,奥地利的天命
七年之期
不能开高达那我还参什么军!
幽灵从不迷路
斗罗:制霸斗罗从召唤孔德明开始
小乔已隐居
神话版三国陈曦陈兰
坟土荒草
人在斗破,预支成帝
白鹤赛羔
至高盗窃
湖月照影
林阳王欣欣
湖月照影
至高盗窃林阳王欣欣
湖月照影
至尊天帝凌峰苏琳
剑轻阳
民国江湖二十年
征子有利
至尊神瞳凌峰苏琳
剑轻阳
百无禁忌
石三
大赤仙门
古顽石
仙命在我
杜养吾
操控祖宗,从东汉开始创不朽世家
鱼羽渔钰
新概念诡道升仙
残酷厕纸天使
凌峰苏琳
剑轻阳
混沌天帝诀凌峰
剑轻阳
半岛:影帝从分手开始
我家有个橘子园
原神,长枪依旧
八千里云海
至尊魔瞳凌峰苏琳
剑轻阳
混沌天帝诀
剑轻阳
文娱:1990
嗷世巅锋
瘤剑仙
芬芳老马
美漫:家父超人,我只是NPC?
朱果很红
道成诡仙
二九白羊
修仙从返老还童开始
中华聚宝盆
斗罗:我能培育魂兽,还能超进化
沐沐蛇
1988从蔬菜大棚开始
跑盘
圣域乐园
墨中取炭
无限轮回:我才是怪物
柳水剑心
穿越者纵横动漫世界
龙之宫
神秘复苏之诡相无间
三笑留佛
我是如何当神豪的
幼儿园高手
从海贼开始横推万界
燕云因陀罗
帝皇的告死天使
莫格卓根
我,混沌圣体,开局和女帝双修
月夜无声
都市大妖医
红透半边天
四合院:重生52年,逃荒四九城
咸鱼小子
我死后,嫡兄们都疯了
君如月
九天轮回诀
天上无鱼
末日:我能无限抽卡加成
凉茶煮酒
瞎眼五年,出世已无敌
一叶凌天