沒錯,當寧為看著視頻中霍志恒的字幕,聽著他擲地有聲的聲音時,大腦里突然出現了一個在解決N-S方程過程中衍生出的互聯網實用技術——湍流算法。
這種感覺又很奇特。
就好像視頻中視頻主的那些言語不停的啟發著他,然后一個完整算法結構便結合著之前他所汲取的知識,展現在他的腦中。
緊跟著便又是靈感迸發的感覺。
如果不把這靈感記錄下來,寧為感覺自己會立刻瘋掉。
于是他從床上跳了起來。
“咋了,寧娃娃,是不是被我的文采斐然嚇尿了?”
“呸,你們聊你們的,別理我,我有個想法要記錄下來!”寧為隨口應付了徐瑞軒一句,然后坐到了自己的電腦前,飛快的打開了電腦,然后點開瀏覽器。
首先他要確定的是,他腦海中突然出現的這個依托于N-S方程衍生出的湍流算法的確還沒被發明出來。
很快,寧為便確定了,的確沒有!
因為如果這個湍流算法已經問世,大家就不會依然對那些惡意網絡爬蟲無計可施,只能縫縫補補的處理。
沒錯,此時寧為腦海中蹦出的湍流算法就是專門針對處理惡意網絡爬蟲的一種智能算法。
互聯網時代的網絡上充斥著各種網絡爬蟲。
所謂網絡爬蟲其實就是一種按照一定規則,自動批量抓取網絡信息的程序跟腳本。最廣泛的應用大概就屬搜索引擎,通過網絡爬蟲技術,這些搜索引擎會以一定的頻率,通過這些網絡爬蟲將搜集到的信息錄入到數據庫中,以保證用戶從引擎入口檢索時,能更多更準確的從互聯網龐雜的信息中找到仔細想要的東西。
這種類型的網絡爬蟲一般稱為通用網絡爬蟲。
另一類則是聚焦爬蟲。
這是一種針對特定網站或者特定信息不停抓取的技術。
一般來說能夠遵守robots協議來使用這項技術都是沒問題的。
但事實上,網絡上遍布的許多網絡爬蟲,干的都不是人事。
跟所有人息息相關網絡爬蟲案例就是黃牛搶票。
比如全球被各種網絡爬蟲光顧最多的就是12306。
每到節假日,尤其是五一、十一、春運這樣的出行高峰,熱門地區的火車票總會特別難搶,甚至是秒空。而且這個時候12306軟件都很難打開,基本也都是拜這種網絡爬蟲所賜。
根據統計,華夏12306點擊量最高峰曾達到59億次/小時,平均每秒就有160多萬次點擊。顯然不是正常用戶能刷出來的數字。
官方程序也通過各種升級驗證碼,來防止黃牛搶票,甚至有一段時間,那些堪稱變態級別的驗證碼甚至難到讓一個普通人無所適從。
即便現在推出人票合一的功能了,但無數搶票軟件依然利用加價購買搶票包的方式提供這種服務。