以前介绍了不少用于Demo的微软Azure AI和机器学习的能力用于演示,此次介绍一个网站能够用于强大的视频分析:AMS视频索引器后端
在这个网站能够上传一个本地视频用于视频分析,上传成功后能够根据这个视频作不少不一样维度的分析,好比这里我从本地计算机上传一个视频后通过一会的分析检索后就能够点击播放机器学习
播放后会看到分析出该视频出现了多少我的,每个人出如今整个视频的多少秒或一个区间,视频中出现多少个话题ide
以及识别出该视频出现了哪些出现频率比较高的关键字;出现过的全部物体标签,好比人,男人,外面,窗户,墙等;还识别出视频里出现了什么品牌,这些全部的标签或品牌出如今视频的多少秒或区间都标示出来,能够快速点击切换到这几秒学习
还识别出整个视频中的某一我的在这个视频中情感是怎样的,百分之多少是开心的等等网站
还识别出该视频出现了多少个场景以及我选中的这我的物在整个视频中出现的关键帧,这些均可以点击去快进回退到出现该人的帧或秒翻译
其次还在时间线里能够语音转文本的方式实现整个视频的字幕体现,随着播放的语音而字幕自动滚动3d
而且还能够对该文本翻译成须要的须要显示的语种来展现视频
固然还能够查看各类标签穿插在整个事件线里的位置,以及编辑文本的内容进行内容修订blog
最后还能够下载脚本,看法,以及翻译的txt文本等索引
若是下载VTT文件就能够经过本地播放器在本地播放这个未经分析的源视频配上字幕(选择下载好的VTT文件)来一块儿播放了,感受是否是很简单
从这个视频索引分析来看其实后端结合了多种微软Azure的AI+机器学习的服务来综合使用,例如用到了计算机视觉对别场景和物体等,人脸识别识别视频中出现的人脸,用到了语音服务,对视频里本来没有字幕的视频配上英文字幕而且再结合翻译服务将英文转译成你须要的语种,好比中文等,利用情感识别对视频中的人物喜怒哀乐进行百分比的分类等,因此但从一个简单的视频就分析出多种维度不一样的看法仍是很是有意思的。若是您感兴趣也能够本身动手来体验感觉感觉。