百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

超性能 WASM 播放器WXInlinePlayer

cac55 2024-10-25 10:22 49 浏览 0 评论

前言

5G已来,直播、视频等垂直应用领域肯定会诞生一批"后浪型"公司。由于直播、视频的即时性能承担更大的信息量,因此成为各大厂运营/产品的主要信息输出方式。

但目前web形式的视频不管在性能或是体验上都有非常大的限制。主要原因无外乎国内各大浏览器厂商的利益关系。他们对H5的video能力做了非常多的限制。

  • 禁止自动播放;
  • 播放器不能进行HTML相关元素层叠;
  • 播放中硬插广告内容;
  • 视频自动置顶;
  • 相关API和事件实现不统一;
  • ......

为了解决上面一系列问题,终于有一款播放器软件站出来了 WXInlinePlayer

wxinlineplayer 一款高性能的视频播放器解决方案。目前在 安防监控、直播及短视频领域 有非常多的定制化开发案例。并取得不错的效果。

特性

  1. FLV H264/H265 点播/直播全支持
  2. 自由选择解码依赖,在实际gzip中,Tinyh264只需 ~180k,OpenH264 ~260k,de265 ~210k
  3. 专为移动端性能优化,内存和CPU占用稳定
  4. 直播延迟优化,比MSE的原生Video实现低1-2s
  5. 音频/视频独立支持
  6. 微信WebView自动播放
  7. 无音频动画自动播放
  8. 良好的移动端WebView兼容性

使用场景

  • 沉浸式短视频产品 (web版类抖音)
  • H5复杂视频动画播放
  • 无插件化安防监控

兼容性问题

目前WXInlinePlayer兼容性已经覆盖以下主流浏览器

  • Android 5+
  • iOS 10+ (含Safari及WebView)
  • Chrome 25+
  • Firefox 57+
  • Edge 15+
  • Safari 10.1+

目前WASM的兼容性有了很大的改观,但在移动端,由于国内各个浏览器厂商实现不统一,因此需要考虑WASM不可用情况。WXInlinePlayer为了更好的应对兼容性,解码库编译出了 ASM.jsWASM.js 两个版本,同时提供降级判断,方便使用中进行相应的处理。

if(WXInlinePlayer.isSupport()){
  WXInlinePlayer.init({
    asmUrl: './prod.all.asm.combine.js',
    wasmUrl: './prod.all.wasm.combine.js',
  });
  
  WXInlinePlayer.ready().then(()=>{
    console.log('WXInlinePlayer ready');
    
    const player = new WXInlinePlayer({
      url: '...', //播放地址
      $container: document.getElementById('container'), //绘制的canvas对象
      hasVideo: true, //是否含有视频
      hasAudio: true, //是否含有音频
      volume: 1.0, //音量
      muted: false, //是否静音
      autoplay: true, //是否自动播放
      loop: true, //循环播放
      isLive: false, //是否是直播流
      chunkSize: 128 * 1024, //解析块大小 默认256*1024
      preloadTime: 5e2, //预加载事件
      bufferingTime: 1e3, //缓冲事件
      cacheSegmentCount: 64, //内部最大缓存帧数量
      customLoader: null, //自定义loader
    });
  });
}

使用插件

<!DOCTYPE html>
<html>
<head>
  <meta charset="UTF-8" />
  <title>WXInlinePlayer</title>
  <style>
    * {
      margin: 0;
      padding: 0;
    }

    html,
    body {
      width: 100%;
      height: 100%;
    }
  </style>
</head>
<body>
  <canvas id="container" width="800" height="450"></canvas>
  <script src="./index.js"></script>
  <script>
    if (WXInlinePlayer.isSupport()) {
      WXInlinePlayer.init({
        asmUrl: './prod.baseline.asm.combine.js',
        wasmUrl: './prod.baseline.wasm.combine.js'
      });

      WXInlinePlayer.ready().then(() => {
        const player = new WXInlinePlayer({
          url: 'https://static.petera.cn/mm.flv',
          $container: document.getElementById('container'),
          hasVideo: true,
          hasAudio: true,
          volume: 1.0,
          muted: false,
          autoplay: true,
          loop: true,
          isLive: false,
          chunkSize: 128 * 1024,
          preloadTime: 5e2,
          bufferingTime: 1e3,
          cacheSegmentCount: 64,
          customLoader: null
        });

        const { userAgent } = navigator;
        const isWeChat = /MicroMessenger/i.test(userAgent);
        if (!isWeChat) {
          alert('click to play!');
          document.body.addEventListener('click', () => {
            player.play();
          });
        }
      });
    }
  </script>
</body>
</html>

WXInlinePlayer也提供了performance事件帮助使用者了解当前的解码性能,便于提示用户降级到后备方案。

player.on('performance', ({averageDecodeCost, averageUnitDuration})=>{
  const prop = averageUnitDuration / averageDecodeCost;
  if(prop >= 2.0){
    console.log('good performance');
  }else if(prop < 2.0 && prop >= 1.0){
    console.log('ok, thats fine');
  }else{
    console.log('bad performance');
  }
});
WXInlinePlayer.ready().then(()=>{
  const player = new WXInlinePlayer({/*...*/});
  
  // 播放
  document.body.addEventListener('click', ()=>{
    player.play();
  });
  // 暂停
  player.pause();
  
  // 音量
  const volume = player.volume(); // get volume
  player.volume(volume); // set volume
  
  // 获取当前播放时间
  player.on('timeUpdate', ()=>{
    let currentTime = player.getCurrentTime();
    currentTime = currentTime <= 0 ? 0 : currentTime;
  });
});

事件

  • mediaInfo(Object) - 视频相关信息,例如width/height/fps/framerate等
  • playing(void) - 开始/正在播放
  • buffering(void) - 内部帧数据不足,开始缓冲
  • stopped(void) - 停止播放
  • end(void) - 播放结束
  • timeUpdate(currentTime:Number) - 当前播放的进度,250ms进行一次触发
  • loadError({status:Number, statusText:String, detail:Object}) - 加载失败
  • loadSuccess(void) - 加载成功
  • performance({averageDecodeCost:Number, averageUnitDuration:Number}) - 编码性能检测事件,averageDecodeCost代表平均的解码消耗的时长,averageUnitDuration代表在averageDecodeCost下解码得到的可播放单元时长

后话

未来随着5G及更高性能的硬件设备的发展WASM会逐渐渗透在多个领域。浏览器依托WASM技术必将会为未来扩展音视频处理的通用能力提供了想象的空间。目前WXInlinePlayer已经更新到了1.3.3版本,随着越来越多公司的使用,WXInlinePlayer在现版本已经逐步稳定。在后期中,我们将进一步尝试增强WXInlinePlayer的性能和易用性,包括不限于:

  • 重构解码器,精确缓存帧数据;
  • 增加OffscreenCanvas的支持,提升性能和减少内存占用(Chrome 69+);
  • 提供默认的播放器UI;
  • 新增H264/H265的SIMD支持;
  • 支持多Worker的GOP并行解码,提升软解性能;
  • 进一步降低直播延迟;
  • ......
# demo示例
https://qiaozi-tech.github.io/WXInlinePlayer/example/index.html

# 项目地址
https://github.com/qiaozi-tech/WXInlinePlayer

ok,就介绍到这里。喜欢的朋友可以去看下哈~ 欢迎一起交流。

相关推荐

Mac电脑强制删除任何软件方法-含自启动应用

对于打工者来说,进入企业上班使用的电脑大概率是会被监控起来,比如各种流行的数据防泄漏DLP,奇安信天擎,甚至360安全卫士,这些安全软件你想卸载是非常困难的,甚至卸载后它自己又安装回来了,并且还在你不...

Linux基础知识 | 文件与目录大全讲解

1.linux文件权限与目录配置1.文件属性Linux一般将文件可存取的身份分为三个类别,分别是owner/group/others,且三种身份各read/write/execute等权限文...

文件保护不妥协:2025 年 10 款顶级加密工具推荐

数据安全无小事,2025年这10款加密工具凭借独特功能脱颖而出,从个人到企业场景全覆盖,第一款为Ping32,其余为国外英文软件。1.Ping32企业级加密核心工具,支持200+文件格...

省心省力 一个软件搞定系统维护_省心安装在哪里能找到

◆系统类似于我们居住的房间,需要经常打理才能保持清洁、高效。虽然它本身也自带一些清理和优化的工具,但借助于好用的第三方工具来执行这方面的任务,会更让人省心省力。下面笔者就为大家介绍一款集多项功能于一身...

JAVA程序员常用的几个工具类_java程序员一般用什么软件写程序

好的工具做起事来常常事半功倍,下面介绍几个开发中常用到的工具类,收藏一下,也许后面真的会用到。字符串处理:org.apache.commons.lang.StringUtilsisBlank(Char...

手工解决Windows10的若干难题_windows10系统卡顿怎么解决

【电脑报在线】很多朋友已经开始使用Win10,估计还只是测试版本的原因,使用过程中难免会出现一些问题,这里介绍解决一些解决难题的技巧。技巧1:让ProjectSpartan“重归正途”从10074...

System32文件夹千万不能删除,看完这篇你就知道为什么了

C:\Windows\System32目录是Windows操作系统的关键部分,重要的系统文件存储在该目录中。网上的一些恶作剧者可能会告诉你删除它,但你不应该尝试去操作,如果你尝试的话,我们会告诉你会发...

Windows.old 文件夹:系统备份的解析与安全删除指南

Windows.old是Windows系统升级(如Win10升Win11)或重装时,系统自动在C盘创建的备份文件夹,其核心作用是保留旧系统的文件、程序与配置,为“回退旧系统”提供保...

遇到疑难杂症?Windows 10回收站问题巧解决

回收站是Windows10的一个重要组件。然而,我们在使用过程中,可能会遇到一些问题。例如,不论回收站里有没有文件,都显示同一个图标,让人无法判别回收站的空和满的真实情况;没有了像Windows7...

卸载软件怎么彻底删掉?简单几个步骤彻底卸载,电脑小白看过来

日常工作学习生活中,我们需要在安装一些软件程序,但随着软件的更新迭代速度,很多时候我们需要重新下载安装新的程序,这时就需要将旧的一些软件程序进行卸载。但是卸载软件虽然很简单,但是很多小伙伴们表示卸载不...

用不上就删!如何完全卸载OneDrive?

作为Windows10自带的云盘,OneDrive为资料的自动备份和同步提供了方便。然而,从隐私或其他方面考虑,有些人不愿意使用OneDrive。但Windows10本身不提供直接卸载OneDri...

【Linux知识】Linux下快速删除大量文件/文件夹方法

在Linux下,如果需要快速删除大量文件或文件夹,可以使用如下方法:使用rm命令删除文件:可以使用rm命令删除文件,例如:rm-rf/path/to/directory/*这个命令会递...

清理系统不用第三方工具_清理系统垃圾用什么软件

清理优化系统一定要借助于优化工具吗?其实,手动优化系统也没有那么神秘,掌握了方法和技巧,系统清理也是一件简单和随心的事。一方面要为每一个可能产生累赘的文件找到清理的方法,另一方面要寻找能够提高工作效率...

系统小技巧:软件卸载不了?这里办法多

在正常情况下,我们都是通过软件程序组中的卸载图标,或利用控制面板中的“程序和功能”模块来卸载软件的。但有时,我们也会发现利用卸载图标无法卸载软件或者卸载图标干脆丢失找不到了,甚至控制面板中卸载软件的功...

麒麟系统无法删除文件夹_麒麟系统删除文件权限不够

删除文件夹方法例:sudorm-rf文件夹名称。删除文件方法例:sudorm-r文件名包括扩展名。如果没有权限,给文件夹加一下权限再删。加最高权限chmod775文件名加可执行权限...

取消回复欢迎 发表评论: