1. 针对爬虫单独制作页面
2. prerender.io
万金油的 prerender.io.也就是根据用户请求的UA类型,普通用户请求,按照正常流程走.而蜘蛛爬虫之类的用户请求,采用由prerender执行页面js后生成的静态页面发送给爬虫.从而达到通用的单页面seo.不关乎于框架.(注意游戏直播的鼻祖 twitch也是采用prerender.io的)
https://prerender.io
万金油的 prerender.io.也就是根据用户请求的UA类型,普通用户请求,按照正常流程走.而蜘蛛爬虫之类的用户请求,采用由prerender执行页面js后生成的静态页面发送给爬虫.从而达到通用的单页面seo.不关乎于框架.(注意游戏直播的鼻祖 twitch也是采用prerender.io的)
https://prerender.io