前端技术架构
nodejs egg、koa2、expres pm2
爬虫工具 Puppeteer
开发环境准备
node > 14 npm egg 安装
安装pm2(用于守护node服务) 【注意：安装pm2前必须安装npm，如果只是非正式环境可以不用安装pm2】
npm install pm2 -g
容器化部署
Puppeteer
node框架选型
egg项目初始化 npm init egg –type=simple
playwright
惊天大坑
playwright firefox未释放，导致爬虫请求无法触达，处于等待队列