這一個月來,我透過Python開發超大型網路爬蟲程式,第一個碰到的就是我的筆電跑的速度不夠快,還有需要整天掛網抓資料!我找了好久的資訊,直到前天星期六,才發現Google Compute Engine的好用,且可使用12個月不收費!
下圖就是我跑我的程式碼,使用6個VCPU,還有記憶體15GB,既然使用CPU的效率還高達100%!
很想找人一起開發,不過我可沒經費付薪水,就招募志工吧!
有興趣可連絡我!先感謝囉!
#超大型網路爬蟲程式
#第一組專屬NCHLA的程式
#GCP真的很好用
Google Compute Engine