我們在對比人工手動與機器自動誰更靠譜之前，我們先說說數據挖掘與信息收集分析這兩個事兒，好吧。

數據挖掘 想象一下，你什么時候需要挖掘數據？你最近一次去尋找數據是什么時候？在做SEO或者推廣中，你用到過數據挖掘嗎？做運營或者市場分析也會用到嗎？如果你回答是，那么請繼續往下看。 比如拿白楊SEO自己來說，我寫公眾號文章都會用到數據挖掘。為什么？因為我寫作需要【主題】。主題是什么？就是一篇文章要寫的中心思想，比如本文，主題就是數據挖掘重要性，如果關鍵詞就是數據挖掘與收集。 那么，你可能會問，白楊SEO，你的主題是如何進行數據挖掘的呢？那我這里分享三點給你： 1、收集各類信息平臺 比如白楊SEO的谷歌書簽欄里有各大排行榜，比如百度風云榜、知乎熱榜、微博熱榜、搜狗熱榜、新榜熱門文章排名，還有各大搜索引擎，如百度、360、搜狗、微博搜索、頭條搜索、微信搜一搜、淘寶搜索等。 甚至還有我關注的SEO、流量、運營、科技相關的網站。如圖。為什么收集這些，很多人不知道，你寫作的思路也許就在這里。

2、查看當下熱門詞匯 比如百度風云熱搜榜就有最近一天，最近七天熱搜排名關鍵詞。比如知乎，就有最近熱搜問答，再比如打開微信搜一搜也能看到最近熱詞。 每一個關鍵詞背后都是需求。不知道你明白這句話不？比如我拋一個問題，“如何”與“怎樣”兩個關鍵詞，你覺得哪個指數大？公眾號留言給我。 再比如，我之前朋友圈發過，如果你不知道搜索引擎背后的流量，你可以打開手機百度，你只需要輸入類似“20歲”、“30歲”“40歲”都會提示不同的需求。再比如，你把副業兩個字，放到知乎里，你能找到很多副業項目。

3、驗證主題需求 如果上面1、2點你都做了，比如像白楊SEO本篇文章主題一樣，確定是數據挖掘與收集，那么，你就可以驗證是否是真需求了。 先從流量驗證，如果你有百度競價后臺，關鍵詞規劃師工具打開，放入數據挖掘，或信息收集看流量如何。如果沒有，可能用5118、愛站之類的工具來看。比如我之前寫過這篇實操舉例： 白楊SEO：如何利用關鍵詞數據，挖掘出流量及渠道 其次從用戶需求驗證，去微信搜索、知乎、百度知道里，放入關鍵詞，看有沒有人提問，嗯找到提問的共性，那么這就是用戶需求！

信息收集分析 我們再說一下信息收集分析。為什么先說數據挖掘再說收集呢？因為只有先挖掘出來，然后才有信息收集整理進行分析。 信息收集過來存儲也有很多種方式，不過白楊SEO最喜歡還是用EXCEL表格，因為這樣處理方便。可能對于技術的朋友來說，應該是他們喜歡的格式。比如最近火熱的Python，但沒基礎學會它不簡單哈哈哈。 關于數據分析這塊，我覺得如果你想往這方面發展，白楊SEO給你兩個建議：一是你得見過好的數據分析案例，你得見過有大量數據分析需求，二是你得實操。這個數據分析能力是需要不斷在實戰中提升的。 講個真實故事。2016年7月，我受公司委派去湖北聯通公司做SEO營銷顧問，第一次接觸到大量數據，我們合作團隊一個同事那處理數據真的強，比如數據引用，數據透視表，還有函數。感覺比別人用技術代碼處理都快。 你也許會說，我又不會遇到。一般人如果想往高處走，這些基礎技能可能會讓你事半功倍，信么？ 人工與機器誰更靠譜？ 說明下，這里的前提是數據挖掘與信息收信及分析處理。這里的機器，主要指的是“爬蟲”。爬蟲是什么東東，是搜索引擎那個蜘蛛么，原則可以這么理解。不過這里指的是技術人員寫的采集某網站的規則的一串代碼。 比如大家做SEO寫內容都聽說過【火車頭】采集工具吧。再比如5118站長工具，這些工具來的數據就是爬蟲采集。對，你要學會寫采集規則。

問題來了，到底是用人工來挖掘收集更好還是用爬蟲呢？ 白楊SEO以前一直是人工派，就是那種所謂要眼見為實，或者理解為保守派。比如2013年幫公司開淘寶店時，為了寫標題找關鍵詞，還有看排名，都是手動一個一個找。 比如現在寫文章，或者去找藍海市場都會手動人工，確實很花時間。為什么我說我寫文章一般2-4小時，因為至少有一小時要花在找主題確定及素材上面啊。 雖然我是人工保守派，但我也不是否定技術流。比如在白楊SEO付費星球我就邀請了Python數據采集大牛明白老師做嘉賓，如下圖。

再來說說機器爬蟲數據采集的能力。去年白楊SEO實戰培訓第二期來了一個大學專業是學Python的同學伯勁，那是我第一次知道這個東東。 有一次，我記得是阿波跟我說，他說我的公眾號被朋友全部采集了，但并未對外，他們說只是用于他們內部學習，我第一次感覺很神奇。所以特意邀請了伯勁做了個入門分享。知道了后羿采集器以及Webscraper。 后面才知道，原來明白老師已經開了一堂課叫《不用寫代碼的爬蟲課》，里面正好講了webscraper，而且寫了好多采集模板，恰好他也在我的星球里。 數據挖掘與信息收集分析，人工還是爬蟲誰更靠譜，其實是我故意拋出的問題。其實你心里應該也知道，二者是缺一不可！就算爬蟲，那個邏輯規則如果沒有人寫，不可能找到想要的。 如果只是人工呢，有時真的太慢了。你可以現在網上隨便搜一搜會數據挖掘工具的工作工資待遇就知道了。

本文轉載于微信公眾號：白楊SEO優化教程（ID：baiyangseo），未經作者授權，禁止轉載。

【轉載說明】?? 若上述素材出現侵權，請及時聯系我們付費及進行處理：shanliqiang@aiyingli.com