close
很多時後，我們需要用快速的方試來蒐集網路商店的資料，做為陌生開發或商業合作的來源
這裡直接教大家使用我們的軟體快速取得這些有用的資料
先舉樂天市場的例子:
首先，開啟我們的大數據採集軟體，先進入樂天市場所有店家的列表頁
▲這一頁有樂天所有店家的列表，將近五千家的連結
▲然後我們從Chrome瀏覽器開同一頁，然後按右鍵切換成HTML原始碼模式，本來的網址前面會被加上view-source:，整段再貼回行銷軟體，按下【網址瀏覽】
▲這裡有點難，我們在前面HTML原始碼模式裡面，要先找到我們要截取店家id的前後特徵
▲然後如上圖，在行銷軟體的蒐集自訂資料 => 過濾格式，把前後特徵字符輸入，這樣軟體才知道要截取哪一段資訊
▲設定完字符後按【確認】
▲回到軟體第一頁，按下【網址蒐集】，這樣行銷軟體就開始採集整頁大量的資料，把前後字符特徵相符合的資訊全部抓下來。
▲這一頁因為資料太多，所以抓的有點久，看電腦的速度，我擺了快10分鐘才抓完
▲採集到的資料都記錄在右上角的【Line帳號管理】裡面
▲一共4743筆，每一筆都是一家店家的帳號
▲再來是重點了，採集這些店家的帳號要幹麻?
在這裡我的目地是要蒐集每個店家的手機電話號碼來加Line
但是電話號碼是在這些店家的【店家資訊】頁面裡面，所以我先採集店家的帳號
然後看一下上面的網址結構，最後面加個/info，就是店家的資訊頁了
▲我用Excel把所有的店家帳號，跟樂天網址結構整理一下，然後整合成每一筆都是店家資訊的網址，這裡看的懂吧?基本文書處理而以，不懂我也沒辦法喔
▲每個店家資訊頁，裡面都會有個店家電話號碼欄位，這裡我只想抓手機號碼，所以如果是室內電話我就跳過了
seo
▲現在因為我要採集的是手機號碼，所以蒐集字訂資料 => 過濾格式，這裡原本抓帳號的設定我刪除，改成抓號碼的前後特徵，因為是要抓門號，所以前導字元我設定 09 ，後導字元設空格
▲設定完後再回到軟體首頁，然後將我們蒐集到的近五千家商店的店家資訊網址輸入在【網址瀏覽】
其實這裡需要配合類似按鍵精靈的輔助軟體來協助我們一筆一筆輸入這數千家的網址
不然手動太多了，會輸入不完
然後按確定後，再按【網址蒐集】
▲我這邊示範抓一筆，然後軟體出現找到2個
▲然後回到右上角帳號管理裡面去看，就把號碼給採集下來了
但是因為我設定的前導特徵跟後導字元不夠嚴謹，所以不相關的一筆資料也被抓進來了
不過沒關系，等全部資料都抓下來後，透過Office文書功能去把09加回去，跟其它的處理即可完成
這樣我就輕易取得了樂天上面所有店家的手機號碼，並拿來做行銷(發信件，加Line之類的)
透過這個大數據採集系統，我可以採集 :
特定族群的電話號碼
特定族群的email
特定族群的帳號
只要能找到共同的網頁字元前後特徵，什麼都可以抓
同樣的做法可以套用在各大平臺
Yahoo,Google,各大商城
至於採集的這些資料，每個人的目地都不同，就看聰明的你打算做些什麼事囉!
大數據採集軟體下載
這裡直接教大家使用我們的軟體快速取得這些有用的資料
先舉樂天市場的例子:
首先，開啟我們的大數據採集軟體，先進入樂天市場所有店家的列表頁
▲這一頁有樂天所有店家的列表，將近五千家的連結
▲然後我們從Chrome瀏覽器開同一頁，然後按右鍵切換成HTML原始碼模式，本來的網址前面會被加上view-source:，整段再貼回行銷軟體，按下【網址瀏覽】
▲這裡有點難，我們在前面HTML原始碼模式裡面，要先找到我們要截取店家id的前後特徵
▲然後如上圖，在行銷軟體的蒐集自訂資料 => 過濾格式，把前後特徵字符輸入，這樣軟體才知道要截取哪一段資訊
▲設定完字符後按【確認】
▲回到軟體第一頁，按下【網址蒐集】，這樣行銷軟體就開始採集整頁大量的資料，把前後字符特徵相符合的資訊全部抓下來。
▲這一頁因為資料太多，所以抓的有點久，看電腦的速度，我擺了快10分鐘才抓完
▲採集到的資料都記錄在右上角的【Line帳號管理】裡面
▲一共4743筆，每一筆都是一家店家的帳號
▲再來是重點了，採集這些店家的帳號要幹麻?
在這裡我的目地是要蒐集每個店家的手機電話號碼來加Line
但是電話號碼是在這些店家的【店家資訊】頁面裡面，所以我先採集店家的帳號
然後看一下上面的網址結構，最後面加個/info，就是店家的資訊頁了
▲我用Excel把所有的店家帳號，跟樂天網址結構整理一下，然後整合成每一筆都是店家資訊的網址，這裡看的懂吧?基本文書處理而以，不懂我也沒辦法喔
▲每個店家資訊頁，裡面都會有個店家電話號碼欄位，這裡我只想抓手機號碼，所以如果是室內電話我就跳過了
seo
▲現在因為我要採集的是手機號碼，所以蒐集字訂資料 => 過濾格式，這裡原本抓帳號的設定我刪除，改成抓號碼的前後特徵，因為是要抓門號，所以前導字元我設定 09 ，後導字元設空格
▲設定完後再回到軟體首頁，然後將我們蒐集到的近五千家商店的店家資訊網址輸入在【網址瀏覽】
其實這裡需要配合類似按鍵精靈的輔助軟體來協助我們一筆一筆輸入這數千家的網址
不然手動太多了，會輸入不完
然後按確定後，再按【網址蒐集】
▲我這邊示範抓一筆，然後軟體出現找到2個
▲然後回到右上角帳號管理裡面去看，就把號碼給採集下來了
但是因為我設定的前導特徵跟後導字元不夠嚴謹，所以不相關的一筆資料也被抓進來了
不過沒關系，等全部資料都抓下來後，透過Office文書功能去把09加回去，跟其它的處理即可完成
這樣我就輕易取得了樂天上面所有店家的手機號碼，並拿來做行銷(發信件，加Line之類的)
透過這個大數據採集系統，我可以採集 :
特定族群的電話號碼
特定族群的email
特定族群的帳號
只要能找到共同的網頁字元前後特徵，什麼都可以抓
同樣的做法可以套用在各大平臺
Yahoo,Google,各大商城
至於採集的這些資料，每個人的目地都不同，就看聰明的你打算做些什麼事囉!
大數據採集軟體下載
文章來源 : http://www.line88.tw
全站熱搜
文章出自: https://ihack168.pixnet.net/blog/post/464071241-%E3%80%90%E6%95%99%E5%AD%B8%E3%80%91%E5%A6%82%E4%BD%
全站熱搜
留言列表
