传统页面和框架开发的区别

  • 传统html是通过a标签跳转来作为切换的,每一个页面都是一个html,这样百度很容易抓取到的,也能顺着a链接到你的子级页面。
  • 像vue、react、angular开发的都是spa应用,他只有一个页面index,他们都是内加载,动态加载切换路由的,所以你再多页面百度蜘蛛只能爬到首页,这就是spa的一大痛点

解决方案
说完了区别说下怎么解决这个问题,目前我所了解的两种:

  1. vue.js官网提供的 SSR(服务端渲染) 这种方案呢学习成本高,对于刚开始的新手来说可能有点难度,基本还得重构项目,为了节约开发成本推荐选择第二种方案;
  2. 预渲染:用vue官方的一句话来说,它无需使用 web 服务器实时动态编译 HTML,而是使用预渲染方式,在构建时 (build time) 简单地生成针对特定路由的静态 HTML 文件。优点是设置预渲染更简单,并可以将你的前端作为一个完全静态的站点。

prerender-spa-plugin它所做的预渲染就是当vue-cli构建的项目进行npm run build 的时候,会按照路由的层级进行动态渲染出对应的html文件,这样爬虫在爬取页面的时候就不会再是一个简简单单的 index.html 入口文件了。

1.安装prerender-spa-plugin

npm config set puppeteer_download_host=https://npm.taobao.org/mirrors
npm i puppeteer
npm i prerender-spa-plugin --save -dev

2.在router.js看下路由模式是不是 ‘history’,不是的请换成history

mode : 'history',

3.在vue.config.js配置(本人使用的是3.0脚手架自行创建的)

const PrerenderSPAPlugin = require('prerender-spa-plugin');
const Renderer = PrerenderSPAPlugin.PuppeteerRenderer;
configureWebpack: {
	 plugins: [
  		new PrerenderSPAPlugin({
	 	// 生成文件的路径,也可以与webpakc打包的一致。
	 	// 下面这句话非常重要!!!
	 	// 这个目录只能有一级,如果目录层次大于一级,在生成的时候不会有任何错误提示,在预渲染的时候只会卡着不动。
			staticDir: path.join(__dirname,'dist'),
	  		// 对应自己的路由文件,比如a有参数,就需要写成 /a/param1。
	 		routes: ['/', '/team', '/analyst','/voter','/sponsor',],
	 		// 这个很重要,如果没有配置这段,也不会进行预编译
			renderer: new Renderer({
		         inject: {
					foo: 'bar'
		 		},
	   			headless: false,
			// 在 main.js 中 document.dispatchEvent(new Event('render-event')),两者的事件名称要对应上。
	 			renderAfterDocumentEvent: 'render-event',
				renderAfterTime: 10000,//超时时间
				timeout: 0,
				maxConcurrentRoutes: 20,//打包页面的最大数
				navigationParams: {
					timeout: 0
 				}
			})
		}),
 	]
}

这里 publicPath得注释掉,否则打包后图片和资源链接会失效

4.使用vue-meta-info插件,改变link、title、meta等

npm i vue-meta-info
new Vue({
  router,
  render: h => h(App),
  mounted () {
  	document.dispatchEvent(new Event('render-event'))
  }
}).$mount("#app");

5.使用vue-meta-info插件,改变link、title、meta等

main.js

import MetaInfo from 'vue-meta-info'
Vue.use(MetaInfo);

在你的路由页面中加 

export default {
    metaInfo: {
    //改变当前路由的title
      title: 'title',
       //改变当前路由的link
      link: [
        {
          rel: 'baidu',
          href: 'https://www.baidu.com/'
        },
      ],
    },
    data(){
    	return{}
    }
}

6.npm run build 打包

看到单独的metaInfo也注入进去了

7.完成
根据以上步骤,正确配置完毕即可实现,如发现刷新后404,我的这个问题本地存在,部署到到服务器就不存在了。
如果涉及到发请求,配置一个serve代理就可以了。

8.链接
prerender-spa-plugin:https://www.npmjs.com/package/prerender-spa-plugin
vue-meta-info:https://www.npmjs.com/package/vue-meta-info

Logo

前往低代码交流专区

更多推荐