第四百九十七章 有些人一出生就不一样啊第(2/2)页
的技术人员都走了进来，他补充了一句，“你们都过来，我和你们说点事情。”

    克里斯道：“什么事我们还要忙着研发产品，昨晚稍微有点眉目。”

    罗曼嘿道：“是啊，或许这是一个突破也说不准。”

    泰勒打了个哈欠，道：“可把我累坏了，昨晚两点多才睡，清早六点多就爬起来了。”

    看得出来大家都非常疲劳。

    张伟和郑文对视了一眼，也没有上楼，直接把众人拉到一旁角落的办公桌，又叫人拿来椅子。

    众人坐下。

    “那我就说一下我猜测的流程，你们听听有什么启发没有。”张伟拿出小本子翻开。

    闻言，克里斯一愕。

    泰勒也愣了愣。

    罗曼和其他人也有些呆。

    你说什么你猜测的流程这他妈也能猜测啊还能对我们有启发昨天还说要找人问问，怎么现在又变成你自己猜测了这么多精英技术人员攻克了许久的都只是稍有眉目而已，你一个连互联网都不懂的人光靠猜测就行了我去，你以为你是上帝啊是造物主啊怎么想都能变成现实

    众人已经全部无语。

    克里斯憋了半天，也没好意思说别的，“那你说我们听听。”

    张伟也知道他们不相信，道：“反正你们就听听看又没什么损失对不对”

    泰勒难以置信道：“会对我们有启发”

    “应该会有吧。”张伟瞟了眼本子上的文字，说道：“需要根据一定的网页分析算法过滤与主题无关的链接，保留有用的链接并将其放入等待抓取的资源管理器队列。”

    郑文不太懂，瞟了瞟众人。

    可是眼前这些人懂啊，他们乍一听的感觉简直惊艳按照张伟所说的里面包含了三个步骤，一，用户提供种子ur；二，种子ur进入kbase中新ur队列中；三，调度模块选取ur进入到抓取模块的待抓取队列中，大家都是专业人士，一听就知道完全可行啊张伟这个推测简直太棒了听着这个推测，他们都面面相觑，怎么这么简单的事情他们就没想到呢在场十几个精英都没想到的事情，居然让一个不懂网络的人想到了

    克里斯忍不住赞叹道：“好创意”

    张伟笑眯眯道：“我继续说下去，然后根据一定的搜索策略从队列页资源，并重复上述过程，直到达到系统的某一条件时停止，另外，所有被抓取的网页西药存贮，再进行一定的分析、过滤，并建立索引，以便之后的查询和检索。”

    克里斯兴奋了起来，道：“那就是抓取模块读取站点的配置文件，可以按照执行的频率进行抓取，等到抓取到结果就返回pipee接口中，这就是完成了抽取”

    罗曼也道：“然后把新发现的连接在kbase里面进行dedup，并ph到kbase的新ur模块里面，最后让调度模块选取ur进入抓取模块的待抓取队列，之后就能反馈了啊”

    张伟和郑文不懂这些，听得雨里雾里，可是接下来这些专业人士说的话让他们至少明白一点，这个推测可行

    泰勒结结巴巴道：“这这就是抓取流程了”

    克里斯非常坚定道：“我觉得有百分之八十的成功率可以试试看”

    听到最专业的克里斯这么说，十几个人都非常惊奇地看了一眼张伟，他们怎么也想不明白，一个网络上的外行，却能大致推算出流程难道这就是天生的妖孽怪不得人家十几岁就能执掌庞大的资产怪不得华金资本被经营的有模有样上天果然是有区别的，有些人一出生就他妈和别人不一样啊

『加入书签，方便阅读』