小程序开发进阶：如何实现直播连麦

咱们上周作了一场免费在线直播课，声网Agora 研发工程师张乾泽分享了小程序直播组件的特色、实现小程序间连麦的方法，以及须要注意的产品化难题等干货。本文将为没能观看到直播，又正在作小程序开发的朋友们回顾一下演讲内容，以及直播观众们提出的那些问题。（文末有视频回顾地址，你们可配合观看）

演讲实录

微信小程序从1.7开始，为开发者提供了两个新接口，和，能够在小程序上实现单向的直播功能。经过与技术的结合，好比WebRTC，开发者们还能够进一步在小程序直播的基础上实现连麦功能，这也就是咱们今天要主要分享的进阶经验。

目前小程序直播连麦的应用场景有不少，好比：

首先是视频通话。此前，该场景更多以原生应用的形态出现。如今，这两个新的接口，让小程序实现视频通话成为了可能，尤为是在那些须要强交互、低延时的应用场景，如在线教育、企业会议等。

另外一个是在直播连麦中，具体应用场景也有不少，跨直播间 PK 就是最典型的一种。这个功能咱们能够在熊猫直播中看到。在直播时，一个主播能够与另外一个主播进行视频通话，并实时直播给两个主播的观众观看。

第三个是游戏互动，好比在线抓娃娃。用户此前能够经过原生应用、 PC 端浏览器或手机浏览器来玩抓娃娃，如今该场景已经扩展至小程序。

以上三种场景的共同点是，对延时、画质要求都很高。此前以前更可能是在网页、PC 客户端、移动端 App 上实现这些场景，但在网页、手机浏览器中比较少。而微信小程序直播组件的出现，却改变了这个现状，为何呢？接下来咱们会讲到。

小程序直播连麦带来了什么改变？

首先，若是你作过H5端实时音视频，你应该了解，其中最大的问题之一就是采集。为了解决该问题，最多见且可靠的方案就是使用 WebRTC ，由于它提供了一套接口可让开发者在浏览器中获取摄像头、麦克风的音视频流，在浏览器中实现音视频的采集，并转成咱们可用的数据，经过服务端推送给观众。

不过 WebRTC 方案也并不是万能，它在移动端也存在不少问题须要开发者本身解决，好比：

• 兼容性问题。尽管如今新版本已经获得了不少 PC 浏览器支持。可是在微信浏览器中，仅能在 Android 端使用。

• 用户体验问题。一方面，在网页端常常咱们会收到“网页想获取摄像头、麦克风权限”的提示，以容许该页面进行音视频的采集。不少用户可能会选择“拒绝”，会直接致使产品不可用。另外一方面，开发者须要保证网址是安全的，不然在一些移动应用内，好比在微信中没法获取摄像头权限。

可是，这些状况在小程序中状况则不同。小程序提供了一套相对完善的接口。经过和两个原生组件，能够实现音视频的采集、推流、拉流、播放。同时，这两个组件还支持自带的美颜、美白、动态分辨率调整等功能。

那么问题来了，既然咱们已经有了这两个组件，是否是在小程序中增长它们以后，就能够发布到线上直播连麦小程序，让别人使用了呢？

答案是否认的。

你还须要搭建一个 rtmp 服务器，而后生成一个 rtmp 服务地址，利用小程序组件推流和拉流，可是这样的产品上线仍有些距离。并且，小程序的两个组件仅仅提供了直播功能，并不支持实现连麦。若是还想要在小程序直播中进一步实现连麦，须要解决几方面问题：

• 可用性。若是不少人访问你的服务器，并同时发出推流、拉流的请求，你的服务器极可能会挂掉，因此要提升可用性。

• 信令控制。就像打电话同样，连麦双方须要知道对方的频道号、rtmp 地址才能互通，这就须要加入信令系统来控制。

• 互通性。好比，小程序之间如何视频互通，小程序与原生 App 之间如何互通。

• 音视频交互质量。好比，视频通话的低延时、画面与音质的清晰等。

开发者们能够经过自研来解决以上问题，好比：

• 增长更多服务器节点，以提升可用性；
• 在增长节点以后，经过优化路由调度策略，来保证直播连麦时可绕过网络拥塞；
• 引入信令服务器来支持连麦通话服务；
• 经过编解码算法优化来进一步保证连麦的传输质量与低延时。

总之，为了保证连麦质量，能够优化的地方有不少。固然，若是你想直接绕过这些问题，也能够直接使用声网小程序直播连麦 SDK。SDK 提供了一套简单易用的API接口，帮开发者在小程序中快速实现直播连麦功能，并支持小程序与原生App间的互通。

小程序的局限性

咱们曾与不少开发者交流过，不少人曾提出，想在小程序直播中进行混流。例如，在小程序直播过程当中，将客户端的音乐与直播画面进行混流。不过目前小程序目前还不支持客户端的混流，暂时尚未这样的接口。但若是是小程序与原生应用连麦，咱们能够在原生应用中进行混流，而后推流至小程序。

Q&A 环节摘录

Q：小程序有客户端日志收集么？ A：小程序自己没有该功能。小程序自己提供一些回调方法，能够看到推流是否开启、分辨率、码率等信息。用户须要手动保存或上传服务器。咱们在 SDK 中提供了该功能，只须要监听日志接口，就能够将日志发到回调中，用户再经过一些方法传到本身的服务器上。若是小程序在直播连麦中出现问题，能够经过日志来排查。

Q：小程序在有电话通话的同时能够向外推流么？ A：并不支持。小程序会经过 App.js 来管理小程序的生命周期。开发者能够经过onShow和onHide两个参数监听小程序的显示与隐藏。当有电话进来时，小程序会进入后台，那么直播画面就会中止，并切换为一张开发者预先设置好的图片。

Q：声网小程序SDK的支持多少人通话？ A：目前可支持最多6人同时连麦。

Q：连麦中，头像排序如何设置？是否能够设置主头像在直播收看端画面最大？ A：这涉及到画面的布局问题。你们能够经过 CSS 来控制哪一个流要放大或缩小。咱们在 Sample Code 中提供了一个叫 layout.js 的文件，就是用来针对不一样人数作不一样布局的文件，你们能够参考一下。

Q：大家是否支持1080p？ A：小程序在推流时能够经过设置最大或最小码率动态调整分辨率，因此目前没有有效的手段让小程序推1080p的流。可是声网的 SDK 在原生应用上支持1080p，在小程序与原生应用连麦时，能够经过原生应用推送1080p的视频流给小程序。

点击这里观看回顾视频

如遇到其它开发问题，欢迎访问声网 Agora问答版块，发帖与声网工程师交流。