辦公室的白板上寫滿了字。
李明的粉筆停在半空,眉頭皺成一個疙瘩。
他轉身看向另外四個同伴,又看看坐在會議桌旁的賈瀞雯。
“賈總,這個‘網頁爬蟲’的概念……我們研究了三天,還是有點不明白。”他放下粉筆,拍了拍手上的粉灰,“文件上說,要讓程式像蜘蛛一樣在網上爬,自動發現和收集網頁。
但具體怎麼實現?”
張濤推了推眼鏡,翻開陳浩寫的技術框架文件:“這裡寫了一些思路--從幾個種子網站開始,提取頁面上的連結,然後訪問這些連結,再提取新連結。
理論上可行,但實際做起來問題很多。”
“什麼問題?”賈瀞雯問。
“比如,有些網站不允許被訪問。”說話的是王磊,團隊裡最年輕的一個,北大研究生在讀,“還有,網頁格式千奇百怪,怎麼準確提取連結?再比如,如果程式陷入死迴圈怎麼辦?”
賈瀞雯點點頭。
這些她也不懂,但她知道該問誰。
“今天先到這裡。”她看看錶,“晚上我打電話問問陳總。
大家繼續研究其他部分,分詞演算法那邊有進展嗎?”
張濤搖搖頭:“更難。
英文有空格分隔單詞,中文是連在一起的。
‘中華人民共和國’怎麼分?是‘中華’‘人民’‘共和國’,還是‘中華人民’‘共和國’?不同的分法,意思差別很大。”
會議室裡一陣沉默。
五個年輕人你看看我,我看看你,都從對方眼裡看到同樣的困惑--這個專案,比他們想象的要難得多。
晚上八點,賈瀞雯在辦公室撥通了陳浩的電話。
“喂?”陳浩的聲音有點喘,背景裡有嘈雜的人聲。
“在忙?”
“剛下戲,換衣服呢。”陳浩走到安靜的地方,“說吧,今天遇到什麼問題了?”
賈瀞雯把白天的討論複述了一遍。
陳浩聽完,笑了:“正常,這些確實是難點。
你記一下,我一個個說。”
賈瀞雯拿起筆。
“第一,爬蟲的倫理問題。
我們要遵守robots協議,就是網站根目錄下的一個文字檔案,告訴爬蟲哪些頁面可以訪問,哪些不行。
”。煩麻惹會們我然不,守遵須必個這
。題問式格頁網,二第“
。的定固是構結本基但,樣一不法寫家各然雖,TH是要主頁網在現
”。取提以可式示表則正用,裡籤標>=ferh a<在都結連
”?麼什是式示表則正“:斷打雯瀞賈
‘以有所找要你如比“,釋解浩陳”。法方的配匹字文種一“
”。懂們他,料資查去員人技讓個這
。圈迴死止防,三第“
。過跳接直就到遇次下,來下錄記要都結連的過問訪個每
”。去下爬限無能不,制限度深定設要還
。著記地快飛雯瀞賈
。題問是不都題難些這像好,靜平很音聲的浩陳
”。難別特得覺們他個這“,問”?呢詞分文中那“
。兒會一了默沉頭那話電
。語詞的義意有分切子句把先須必文中,配匹詞單按接直以可尋搜文英“,認承浩陳”。難實確個這“
”。分切慧智的後義語解理是而,分切械機是不的要需們我
”?做麼怎“
。配匹後然,庫典詞做詞的用常把,典詞於基是一“,說浩陳”。路思種兩“
。合組字的現出起一在連常經出找,字文量大析分,計統於基是二
”。合結者兩是法辦的好最
”。機算計過學沒又你?懂都麼怎你念概些這,哥浩“:頓了頓尖筆,字個幾後最下記雯瀞賈
。理原懂,輯邏懂我但,計設式程懂不是我“:了笑浩陳








