golang环境和第三方爬虫包下载安装一把成

发布时间 2023-11-20 15:32:38作者: 酸奶盖儿

复制代码在CentOS7.6中命令行中全部粘贴执行,golang环境和第三方爬虫包全部安装一把成。

wget https://golang.google.cn/dl/go1.21.4.linux-amd64.tar.gz
tar -zxvf go1.21.4.linux-amd64.tar.gz -C /usr/local/
cat >> .bash_profile << "EOF"
export GOROOT=/usr/local/go
export PATH=$PATH:$GOROOT/bin
EOF
source .bash_profile 
go version
go env -w GOPROXY=https://goproxy.cn,direct
mkdir golib && cd golib && mkdir pkg src bin
go mod init golib
go get github.com/gocolly/colly/v2
go get github.com/PuerkitoBio/goquery
go get github.com/tidwall/gjson
go get github.com/xuri/excelize/v2

操作系统为CentOS7.6

golang版本为1.21.4

第三方包为:

goquery用于爬取网络信息

colly是爬虫框架

Gjson用于解析json

excelize用于操作Excel