262 字
1 分鐘
Python 爬104及1111人力銀行並運用Pandas

介紹#

現在找工作幾乎都是使用人力銀行,104 及 1111 比較多工作機會,使用者較多,這個爬蟲非常簡單將每頁的資料儲存成 CSV 檔案,在使用 Pandas 將 104 及 1111 資料接起來,過濾篩選資料,想要多少薪水、地區,包含的關鍵字。

程式碼:https://github.com/kobojp/scraper_104_1111(在新分頁開啟)

要求#

Python 3

Jupyter notebook

推薦使用 anaconda(在新分頁開啟)

需要的套件#

  1. requests
  2. beautifulsoup4
  3. selenium
  4. pandas

安裝指令#

pip install requests
pip install beautifulsoup4
pip install selenium
pip install pandas

快速說明#

將資料全部下載,使用 Jupyter notebook 開啟104-1111 人力銀行爬蟲.ipynb(在新分頁開啟)(如果沒有請 google 一下很多教學文)

下載 ChromeDriver 與你的 Chrome 版本一樣的 Driver

(在新分頁開啟)https://chromedriver.chromium.org/(在新分頁開啟)

每個程式碼都要 Ran 一次

執行爬蟲 ./scraper_104_1111_01.jpg

過濾結果,可以依需求新增更多判斷。 ./scraper_104_1111_02.jpg

Python 爬104及1111人力銀行並運用Pandas
https://aishuafei.com/posts/python-爬104及1111人力銀行並運用pandas/
作者
愛耍廢
發佈於
2020-04-21
許可協議
CC BY-NC-SA 4.0