codingbobo的博客

實現 將本地端mongodb server的數據進行打包，上傳至AWS ec2的mongodb server 使用 local：win10 ec2：ubuntu18.04 mongodb(local & cloud)：4.4 流程 本地端打包 "C:\Program Files\MongoDB\Server\4.2\bin\mongodump.exe" -d data -c sns -o C:\sns.json -雙括號內的是default mongodump location -d : <

項目來由 相信很多人都很喜歡聽音樂，也有自己喜歡的藝人，而我也是如此。但我無法時時人眼監測QQ音樂榜的變化，因此想實作一個web scraping項目， 幫助我事半功倍地蒐集資料。   項目紀錄 目標網址：https://i.y.qq.com/n2/m/share/details/toplist.html?ADTAG=newyqq.toplist&type=0&id=16 (*註：因為電腦版只能看到韓國榜的top 20，須將頁面調整為手機板，即可順利爬取) 欲達成目標 - 蒐集QQ

啟動新實例: AWS EC2 Ubuntu 點選Launch Instance 選擇AMI (Ubuntu 18.04) 選擇Instance type後，接續步驟按自行需求調整 點選add rule，==新增自定義TCP: PORT Range: 27017(MongoDB使用), Source: (Custom) 0.0.0.0/0 (此為IPV4) (若用::/0 為IPV6)。==點選Review & Launch 完成實例的新增。     Instance相關設定 點選