也就是說，就算加黑名單了，也可以利用技術繞開協(xié)議，強行爬取。

        那些搜索引擎都是正規(guī)公司正規(guī)網(wǎng)站，都會遵守君子協(xié)議。國內(nèi)正規(guī)企業(yè)不遵守的案例，也就是360爬取百度百科的內(nèi)容了。

        盜版網(wǎng)站才不管這些。

        這是非法網(wǎng)站。

        這伙人連法律都不遵守，會遵守君子協(xié)議？

        直接繞開協(xié)議，強行爬取。就可以很容易地把正版網(wǎng)站上的付費內(nèi)容，爬取到盜版網(wǎng)站中來。

        現(xiàn)在的問題是，網(wǎng)站的技術不夠，不能利用技術反爬蟲。奢望加入黑名單遵守君子協(xié)定是不可能的。

        可是，紫微星有！

        郭鵬飛自信滿滿的說：“這都是小意思，如果想技術性的反爬蟲，咱們這邊搞個技術小組，一周就能解決。問題是，有沒有這個必要。”

        張一明皺皺眉頭，“現(xiàn)在的情況有點復雜。頭條文學的內(nèi)容，除了在自家網(wǎng)站上，也會在今日頭條的頻道里出現(xiàn)。這沒問題，都是紫微星的集團渠道。可問題是，第三方渠道怎么辦？咱們已經(jīng)運作好了，要把頭條文學的推廣到搜狐讀書頻道、企鵝讀書頻道和網(wǎng)易讀書頻道。”

        郭鵬飛點了點頭，“問題就在這，第三方平臺不可控。”

        內(nèi)容未完，下一頁繼續(xù)閱讀