盜版問題。
“我研究了,現在的網站有防復制功能,但技術還是差點,缺少反爬蟲技術。盜版網站直接利用爬蟲,就能強行把內容扒下來,掛在自家網站上。”
郭鵬飛現在是網絡媒體事業部的總裁,旗下的核心業務就是今日頭條,也包括頭條文學、微知和糗事百科。
周不器不太理解。
郭鵬飛就給解釋了一下。
這其實跟搜索引擎的爬蟲技術一樣。比如百度和微點合作,屏蔽了所有同行搜索引擎,反對別的搜索引擎抓取百度知道、百度百科、微點百科、微點知道等自家生態內容。
這對別的搜索引擎就是致命打擊。
但這里有一個問題。
爬蟲協議是一個君子協議。
百度和微點說:“同行們,我把你們加黑名單了,不許來爬取我們的內容了。”然后,同行們就遵守約定,就不爬取了。
這是一個承諾屏蔽,而不是技術屏蔽。
內容未完,下一頁繼續閱讀