做者:帅哥红javascript
在平日的工做中前端 badjs 是一个比较常见的问题, badjs 除了咱们自身业务 js 脚本里比较明显的报错外还有依赖其余资源的一些报错,对于自身业务 js 里出现的错误很容易进行定位并修复,但对于依赖资源的错误即常见的 script error (外部 js、接口错误)定位就没那么容易了。css
前端开发的工做除了完成平常的业务特性外还有一项重要的工做就是线上页面质量的运营(其中 badjs 监控及异常分析是工做内容的重要部分),本文主要讲述 script error 采集、定位、统计以及分析的的一些方法及思路,但愿对你们在分析定位问题时有必定的帮助。html
咱们的页面每每将静态资源( js、css、image )存放到第三方 CDN,或者依赖于外部的静态资源。当从第三方加载的 javascript 执行出错时,因为同源策略,为了保证用户信息不被泄露,不会返回详细的错误信息,取之返回 script error。前端
webkit 源码:vue
bool ScriptExecutionContext::sanitizeScriptError(String& errorMessage, int& lineNumber, String& sourceURL) { KURL targetURL = completeURL(sourceURL); if (securityOrigin()->canRequest(targetURL)) return false; // 非同源,将相关的错误信息设置成默认,错误信息置为 Script error,行号置成0 errorMessage = "Script error."; sourceURL = String(); ineNumber = 0; return true; } bool ScriptExecutionContext::dispatchErrorEvent(const String& errorMessage, int lineNumber, const String& sourceURL) { EventTarget* target = errorEventTarget(); if (!target) return false; String message = errorMessage; int line = lineNumber; String sourceName = sourceURL; sanitizeScriptError(message, line, sourceName); ASSERT(!m_inDispatchErrorEvent); m_inDispatchErrorEvent = true; RefPtr<ErrorEvent> errorEvent = ErrorEvent::create(message, sourceName, line); target->dispatchEvent(errorEvent); m_inDispatchErrorEvent = false; return errorEvent->defaultPrevented(); } 复制代码
外部 script error 常见的上报详细错误日志如如下两种方法:java
a) 添加 crossorigin="anonymous" 属性:react
<script src="http://domain/path/*.js" crossorigin="anonymous"></script> 复制代码
当有 crossorigin="anonymous",浏览器以匿名的方式获取目标脚本,请求脚本时不会向服务器发送用户信息( cookie、http 证书等)。jquery
b) 此时静态服务器须要添加跨域协议头:c++
Access-Control-Allow-Origin: *
复制代码
完成这两步后 window.onerror 就可以捕获对应跨域脚本发生错误时的详细错误信息了。web
crossorigin="anonymous" 确实能够完美解决 badjs 上报 script error 问题,可是须要服务端进行跨域头支持,而每每在大型企业,域名多的使人发指,致使跨域规则配置很是复杂,因此很难所有都配置上,并且依赖的一些外部资源也不能确保支持,因此咱们在调用外部资源方法以及一些不确认是否配置跨域头的资源方法时采用 try catch 包装,并在 catch 到问题时上报对应的错误。
function invoke(obj, method, args) { try { return obj[method].apply(this, args); } catch (e) { reportBadjs(e); // report the error } } 复制代码
一、对于拥有静态服务器的配置权限的资源咱们能够统一配置支持跨域头信息,而且请求时统一增长 crossorigin="anonymous",这样能够完美将对应的错误堆栈信息进行上报。
二、jsonp 请求问题。
为了解决页面请求中的跨域问题,每每咱们页面接口以 jsonp 的方式进行数据获取,对于 jsonp 请求的方式通常引发 badjs 的有两种状况:
// 资源加载完成触发 onload 事件 el.onload = el.onreadystatechange = function () { if(!cgiloadOk) { // 没有正常的回调,则上报对应的错误信息 report(cgi, 'servererror'); } } window.newFunction = function(rsp) { cgiloadOk = true; window.originFunction(rsp); } 复制代码
如上伪代码,咱们拦截用户的回调函数,在回调函数进行打标,当资源加载完后会触发 onload,而后在 onload 里判断接口是否正常回调了,若是没有正常回调那就上报对应的 cgi 跟定义的错误信息。这样就能够在监控系统里结合 servererror 来分析是不是因为接口致使的页面 badjs 上涨,同时将对应的问题反馈给对应的接口负责人,避免接口上线,或者线上运行出现问题时致使的页面异常。
对于这种状况咱们能够改造对应的接口将 json 数据以 json string 类型的形式进行返回,而后在回调中进行转换解析数据,在解析时采用 try catch 进行包装,当捕获到错误时进行错误上报。
let sc = document.createElement('script'); let head = document.getElementsByTagName('head')[0]; sc.setAttribute('charset', charset || 'utf-8'); sc.src = url; head.appendChild(sc); window.newFunction = function(text) { // 采用try catch捕获异常 try { let jsonStr = JSON.parse(text) } catch(e) { // 出现转换异常,则将对应的错误数据进行上报 reportBadjs(text); } } 复制代码
jsonp 请求数据方式的缺点就是只支持 get,而且出现异常时不可以获取对应的返回状态码。
三、ajax 请求方法。
ajax 方法就比较灵活了,可以获取接口返回的状态码、返回数据,进而区分两种错误并进行上报,伪代码以下:
let xmlHttp = new XMLHttpRequest(); xmlHttp.onreadystatechange = function() { if (xmlHttp.readyState == 4 && xmlHttp.status == 200) { let str = xmlHttp.responseText; try { let json = JSON.parse(jsonstr); //TODO,渲染对应的数据 } catch(e) { report(jsonstr, 'data parse err'); // 数据解析错误,则将原数据进行上报,用于错误分析,修正接口返回 } } else if (xmlHttp.readyState == 4) { report(cgi, xmlHttp.status); // 接口返回重定向,则将对应的接口以及对应的status进行上报 } } xmlHttp.open('GET', cgi, true); xmlHttp.send(); 复制代码
该方法的优势是可以获取用户返回的错误数据,并将错误数据进行上报,同时也可以获取到接口请求的状态;缺点是接口必须支持跨域。
四、依赖的外部资源不支持配置跨域头。
这种状况咱们只能对调用外部资源方法是进行 try catch 捕获并上报异常。
平常工做中最经常使用到的 jqeury、zepto 可采用以下方法进行包装:
function myBind (obj) { let o = { 'type': 'click', // 事件类型 'src': '.', // jquery 选择器 'fun': function () {}, // 方法 'isStop': true // 阻止事件冒泡 }; let i; for (i in obj) { o[i] = obj[i]; } if (typeof o.src === 'string') { o.$src = $(o.src); } $(o.src).off(o.type).on(o.type, function (e) { try { o.fun.apply(o, [e, $(this)]); } catch (ea) { reportBadjs(ea.stack); //上报错误 } if (o.isStop) { return false; } }); } 复制代码
对于外部依赖的资源未设置跨域头信息,而且自己执行产生的 badjs 以及用户刷页面引发的一些错误,目前没有很好定定位方法,可是咱们能够根据一些辅助方法来分析问题大致产生的缘由,以及出现问题时页面运行的情况。其实当线上页面忽然出现大量的 script error 时,咱们最主要的就是要确保页面是否健康正常的运行。接下来提供几种分析的方法用于帮助确认当前页面是否健康运行。
a)渠道占比:
客户端分析主要是根据根据上报 script error 的 ua 进行统计分析。渠道占比即页面 script error 各个渠道的占比状况,如微信端、sq 端、H5 端(其余浏览器),能够根据页面流量的占比进而判断某个渠道的 script error 是否正常,如:当忽然某个时间点badjs上涨,而且无发布时,当流量微信占绝大部分,且 sq 渠道或者其余渠道量明显上涨时可推断有多是刷子流量致使的 badjs,事实证实也常常如此。 以下图为平时正常请求下的badjs各个渠道的占比状况
下图为出现异常时badjs各个渠道的占比状况
经过该图能够很明显发如今jdpingou渠道占比不正常,经查看错误日志以及与客户端同事分析,发现是在该app内页面点击物理返回时作了一次上报,上报时未获取到对应的方法而产生。
b)ua 占比:
ua 占比就是分析各个 ua 占比的状况了,因为 ua 分布比较散,客户端版本众多,因此通常状况下从中不容易发觉,但当发布某个版本时若是某个 ua 占比明显,那能够推断有个能是写js时里面存在不兼容某个客户端的状况(每每是用来新的语法,各客户端对语法的支持不同)。
a) 记录用户操做(点击),以移动端为例:
let eventElemArr = []; document.body.addEventListener('touchend', function (e) { // 记录点击的dom相关信息 eventElemArr.push([e.target.tagName, className].join('_')); }, false); window.onerror = function(msg, url='', line='', col='', error='') { // 将用户点击dom相关信息拼接到错误信息中并进行上报 let errStr = [JSON.stringify(msg), url, line , col, error, eventElemArr.join('|')].join('$'); report(errStr); return false; }; 复制代码
在分析系统中咱们再结合用户在页面中的行为进行断定用户当前访问的页面是否正常。
b)script error 每每很差重现,客户端分析只能推断错误是否因为异常操做所引发(刷子),可是真正要确认 badjs 对页面是否有影响,是否影响用户正常操做,能够结合服务端进行判断。具体的思路是进入页面时前端生成一个 traceid(traceid 生成能够是时间戳+业务+随机码,基本惟一),页面请求全部的接口时带上该 traceid 而且后台记录对应的日志(也能够前端进行上报),当出现badjs上报时也将 traceid 进行上报,这样就能够记录当用户出现 badjs 时总体访问记录了(经过 traceid 进行串联)。
// 页面配置场景值,用于生成traceid window.initTraceid = { bizId // 页面bizId operateId // 页面traceid } // 公共代码(公共头)生成traceid (function(){ window.initTraceid { window.traceid = genTraceid(window.initTraceid); } })() // 上报badjs时带上对应的traceid window.onerror = function(msg, url='', line='', col='', error='') { let errStr = [JSON.stringify(msg), url, line , col, error, window.traceid || ''].join('$'); report(errStr); return false; }; // 请求接口带上对应的traceid,用于与badjs进行关联,这样就能够记录用户进入页面页面接口的请求情况 function myRequst(url) { url = url.addParam({traceid: window.traceid || ''}); requst(url); } 复制代码
该种方式能够根据 badjs 中的 traceid 进行关联用户进入页面时的接口请求情况,用于辅助定位用户访问页面是否有问题。如:工做中常常碰到 script error 毛刺,就能够查询该时间段的错误日志,而后经过 traceid 查询访问记录,每每致使 script error 的是因为某个热销商品被刷的特别厉害,一些刷子的非正常操做致使的页面 badjs。
3.1 录制视频
当出现 script error 时将用户进入页面的屏幕快照录制成一个视频随 script error 一块儿上报。实现该功能目前主要有两种方法,一种是利用 canvas 画图截取屏幕图片;第二种就是记录页面dom变化,并将对应的记录上报,而后在分析系统根据快照和操做链进行播放。
a) canvas 截取图片,该方法的实现思路是利用 canvas 将网页生成图片,而后缓存起来,为了使得生成的视频流畅,咱们一秒中须要生成大约 25 帧,也就是须要 25 张截图,而后在出现 script error 时将缓存起来的页面图片进行上报,再在分析系统经过技术将页面浏览进行还原。
该方式的缺点很明显,用户访问一个页面若是停留时间长必然会生成大量的图片,会带来很大的网络开销以及存储开销。
b) 用户操做重现
该方法主要是记录用户页面 dom 的变化,而后在出现 script error 时将对应的记录进行上报,而后在分析系统里经过技术将页面还原。
大致的思路就是:
进入页面,生成页面的虚拟dom全量快照;
运用 API:MutationObserver,记录用户变化的 dom,同时记录用户的一些行操做(click,select,input,scroll 等事件);
3)当出现 script error 时将对应快照信息上报;
4)在分析系统中将快照与用用户的操做还原。
3.2 页面数据上报
该方法在使用数据驱动框架(vue,react)的页面中很是的方便,当出现错误时能够将页面当前端数据信息与错误一块儿上报,而后在分析系统经过必定的技术将页面还原,复现出现问题时的页面。
前面讲到了 badjs 中 script error 的由来、常见的解决方案、实例分析以及另类思路,最后再讲一下日志的上报、统计、分析以及监控。
// 全局的 onerror 用于捕获页面异常 window.onerror = function(msg, url, line, col, error) { let excludeList = ['WeixinJSBrige']; // 剔除一些确认的自己客户端引发的问题,避免对上报后的数据分析引发干扰 // 拼接错误信息 let errStr = obj2str(msg) + (url ? ';URL:' + url : '') + (line ? ';Line:' + line : '') + (col ? ';Column:' + col : '' // 剔除白名单内错误上报,避免对上报结果干扰 for (let item in excludeList) { if (errStr.indexof(item) > -1) { return; } } // 构造图片请求,用于上报 let g = new Image() // 存在 traceid 则拼接 traceid 用于日志串联 g.src = reportUrl + errStr + '&t=' + Math.random()+(window.traceid ? '&traceid=' + window.traceid : '') } return false; }; 复制代码
「对于使用了promise以及框架(vue,react)自己内部会拦截错误,须要添加对应的方法进行手动上报」
// promise 错误上报 window.addEventListener('rejectionhandled', event => { // 错误的详细信息在 reason 字段 window.onerror('', '', '', '', event.reason) }); // vue 错误上报 Vue.config.errorHandler = function (err, vm, info) { window.onerror(info, '', '', '', err) } // ...其余的就不一一列举了 复制代码
在服务端收集日志是除上报过来的日志还须要根据请求采集 IP、userinfo、traceid、netType、ua、time 等等
a) 数量视图。最直白的统计莫属实时的错误数量视图了,经过该视图能够查看当前页面实时的错误数量,同时页能够配置规则,当 badjs 异常上涨时设置对应的告警,避免发版本时出现错误而未发现,进而影响用户正常的页面访问。
b)日志聚合展现(errmsg);以错误信息进行日志聚合,能够直观查看哪些错误比较多。
c)明细日志展现;统计错误日志的详细信息,经过详细信息能够查看错误发生时用户渠道、网络类型、用户信息、ua 信息等,最主要的是能够经过 traceid 查看用户访问页面的详细信息,用于判断页面访问是否正常。
d)多维度统计分析(运营商、用户、机型、网络、系统、渠道等);经过多维度的统计聚合,能够很直白的查看错误在不一样的维度展现(如另类分析思路中的渠道占比,ua 占比),帮助分析定位问题。
在笔者的工做中将 badjs 根据是否由接口致使的区分为普通 badjs 与 servererror badjs 与 servererror 的波动状况。普通的 badjs 能够根据对应的日志以及分析视图来帮助辅助定位并修复,对于 servererror 则通知对应的接口负责人进行问题定位修复。 在建立页面时为每一个页面自动生成两个key(badjs 与 serveerror)。badjs 和 serveerror),badjs 上报以后,refer就是页面的URL,分析服务依照页面url进行聚合计算,从而进行实时监控。
a) 规则配置。咱们将告警规则设置为黄灯告警与红灯告警,黄灯起提示做用,红灯则属于严重告警,当触发规则时则自动推送消息给对应的负责人并告警,这样就能够快速响应处理问题。
下图为 badjs 告警规则配置:
下图为 servererror 告警规则配置:
b) 视图监控。以下图就是在公共页面某个版本后致使的 badjs 毛刺(普通 badjs,未影响到页面的正常访问)。在收到告警后即刻进行版本回滚,定位问题修复后再二次上线。
在收到 servererror 告警时,咱们还须要定位到对应的接口,在前面的上报中咱们已经上报了对应的接口信息,因此能够经过监控系统查询对应的接口。
本文主要总结了本身工做中前端 badjs 经常使用的一些上报、定位、分析方式与思路以及日志的上报、统计、分析与监控,对 badjs 定位分析以及 script error 提供一种推断思路,但愿对你们有所帮助。
若是你以为这篇内容对你有价值,请点赞,并关注咱们的官网和咱们的微信公众号(WecTeam),每周都有优质文章推送: