技术背景 实际上，我们在2015年做Android平台RTSP、RTMP播放模块的时候，第一版就支持了多实例播放，因为SDK设计比较灵活，做个简单的player实例封装即可实现多实例播放（Android...技术实现 废话不多说，先上图： 我们针对的功能展示，主要是播放和录像这块，先说播放： /* * SmartPlayer.java * Author: daniusdk.com * Created...1"); } } } 对应的OpenPlayerHandle()实现如下： /* * LibPlayerWrapper.java.java */ public boolean OpenPlayerHandle...、录像的演示，除此之外，大牛直播SDK的RTSP、RTMP播放器海康实现播放缓冲设置、软硬解码设置、实时快照、实时音量调节、实时解码后数据回调等。...毫秒级延迟，完全满足对延迟、稳定性要求苛刻的场景下。感兴趣的开发者，可以单独和我沟通。
好多开发者在QT环境下实现RTMP或RTSP播放时，首先考虑到的是集成VLC，集成后，却发现VLC在延迟、断网重连、稳定性等各个方面不尽人意，无法满足上线环境需求。...本文以调用大牛直播SDK（官方）的Windows平台播放端SDK为例，介绍下如何在QT下实现低延迟的RTMP|RTSP播放器，废话不多说，先上图： QTPlayer.png 大牛直播SDK有MFC的demo...，所以在QT上实现播放轻车熟路，如果需要多窗口播放，也可以参考转发的demo，转发的那个4窗口预览的demo做了二次封装，调用更方便。...play->OnWindowSize(widgets.at(i)->width(), widgets.at(i)->height()); } } } 以上是QT环境下集成个低延迟的...RTMP、RTSP播放的基本流程，感兴趣的开发者可酌情参考。
背景在比较同一个数据源，是RTMP播放延迟低还是RTSP延迟低之前，我们先看看RTMP和RTSP的区别，我们知道，RTMP（Real-Time Messaging Protocol）和RTSP（Real...RTMP以二进制形式传输数据，具有低延迟和高效传输的特点。RTSP：RTSP则是一种控制流媒体会话的协议，它不直接传输媒体数据本身，而是负责描述流媒体会话，并指示客户端如何获取流媒体数据。...RTSP基于文本，使用TCP进行通信，通常用于控制流媒体服务器之间的会话，允许客户端对实时媒体流进行播放、暂停、快进等操作。传输方式RTMP：RTMP通常使用TCP连接来传输数据。...应用范围RTMP：RTMP因其低延迟和高效传输的特点，广泛应用于需要高性能实时流媒体传输的场景，如直播、视频聊天等。...，用我们的RTMP推送、轻量级RTSP服务、RTMP|RTSP播放器，延迟基本上相差无几，可见，配好的推拉流服务模块，尤其关键。
在发布国产操作系统|Linux平台的RTMP|RTSP直播播放SDK之前，大牛直播SDK在Windows、Android、iOS平台已经有了非常成熟的技术积累，功能齐全、稳定性高、超低延迟、超低资源占用...国产操作系统和Linux上的RTMP|RTSP直播播放模块，视频绘制使用XLib相关库实现, 音频输出使用PulseAudio和Alsa Lib，除了常规功能如实时静音、快照、buffer time设定...Linux原生的RTSP、RTMP播放模块这里我们不做赘述，本文主要讲的是如何在Linux平台构建Unity下的RTSP和RTMP低延迟直播播放。...Unity侧，在Unity下完成绘制，这里就需要原生的RTMP、RTSP播放模块，拉流解码延迟非常低，数据投递效率非常高，无图无真相：Linux平台，我们是回调的YUV的数据，也就是 NT_SP_E_VIDEO_FRAME_FROMAT_I420...、RTSP直播播放器大概的实现参考，随着国产操作系统的推进，Linux下RTMP、RTSP高质量的播放器需求越来越大，Unity下，可以实现和Windows、Android等平台统一开发管理，非常方便。
提供RTSP TCP/UDP模式设置及自动切换功能，适应不同网络环境，确保播放稳定性。 1.1.2 性能优化特性 内置低延迟模式，可将延迟控制在毫秒级别，满足实时性要求高的场景。...低延迟播放技术实现3.1 网络优化策略3.1.1 缓冲时间设置 将缓冲时间设置在几十毫秒到几百毫秒之间，减少数据缓冲带来的延迟，同时保证播放稳定性。...通过事件广播将播放进度、播放状态等信息通知所有播放实例，实现同步；利用事件驱动模型实现播放实例与用户界面之间的高效交互。 4....4.2 低延迟关键参数配置4.2.1 网络协议优化 RTSP模式选择：默认使用UDP（NT_SP_SetRTSPTcpMode设为0）以减少握手延迟，若网络不稳定则开启TCP/UDP自动切换（NT_SP_SetRtspAutoSwitchTcpUdp...RTSP/RTMP播放器，适用于VR、安防、直播等高实时性场景。
技术实现如何在VR头显实现RTMP或RTSP播放？...VR头显播放RTMP或RTSP流数据，简单来说，通过jni层打通RTMP或RTSP流传输，解包并解码回调给Unity YUV或RGB数据，Unity场景下，绘制即可，本文以大牛直播SDK的Unity平台...RTMP、RTSP播放为例，介绍下具体技术实现：图片开始播放：public void Play() { if (is_running) { Debug.Log...1 : 0); //设置是否启用低延迟模式 NT_U3D_SetMute(player_handle_, is_mute_ ?...RTMP或RTSP，可实现毫秒级的延迟，可满足大多数有交互诉求的技术场景，此外，如果头显端支持硬解码的话，可以优先考虑硬解码。
当然，话说回来，如果是在特定的使用场景下，只需要某些版本IE浏览器支持，但对延迟和稳定性要求非常高，OCX控件方式也不失为一个好的选择。...如果需要浏览器场景下有更好的兼容性，对于RTSP流来说，好多公司通常的做法是把RTSP转RTMP，然后分发到RTMP服务器，然后服务器转http-flv出来，浏览器直接播放http-flv流，或者直接播放...本文基于大牛直播SDK https://github.com/daniulive/SmarterStreaming 现有RTSP、RTMP播放接口的基础上，二次封装，扩展了ocx控件，用于IE浏览器下的低延迟...RTMP或RTSP播放，支持RTMP/RTSP H.265(hevc)播放。...ULONG NT_SetLowLatencyMode(LONG mode); 设置是否低延迟模式播放； 13.
;Windows平台RTMP|RTSP直播播放模块；Linux平台RTMP直播推送模块（采集Unity窗体、Unity声音），也可扩展轻量级RTSP服务模块;Linux平台RTMP|RTSP直播播放模块...|RTSP直播播放模块；iOS平台RTMP|RTSP直播播放模块。...下图系Linux平台RTMP播放图，可以看到，延迟非常低。...图片技术实现本文以Android平台RTMP、RTSP播放模块为例，介绍下Unity相关接口设置和逻辑处理：开始播放 public void Play() { if (is_running...1 : 0); //设置是否启用低延迟模式 NT_U3D_SetMute(player_handle_, is_mute_ ?
在网校教学场景中，从主讲端推流，到视频CND节点分发，最后到用户侧设备播放，这 3 个过程，哪一个是最耗时的？直播延迟，主要延在了哪一步？第 2 步。...第 1 步，主讲端推流，可以使用上好的设备和充裕的带宽，甚至专线，保证上行速度。...第 2 步，采用 UDP 分发，甚至可以复用成熟多年、穿透能力强的 P2P 分发方案，保证从数据中心，低延迟分发各个运营商的边缘分发节点。这种分发方案避免了主要的分发延迟。...第 3 步，从边缘节点到用户设备，通过 WebSocket 连接边缘节点，使用 jsMpeg 播放 video1mpeg 视频流，延迟可以控制在 50ms。50ms 已经非常低了。...在推流端，可以使用 obs studio，在 Windows & Mac 上均可以推流。
背景我们看过了太多介绍RTSP、RTMP播放相关的技术资料，大多接口设计简约，延迟和扩展能力也受到一定的局限，好多开发者希望我们能从接口设计的角度，大概介绍下大牛直播SDK关于RTMP、RTSP播放器开发设计...低延迟模式低延迟模式下，设置buffer time为0，延迟更低，适用于比如需要操控控制的超低延迟场景下。...拉流回调编码后的数据（配合转发模块使用）拉流回调编码后的数据，主要是为了配合转发模块使用，比如拉取rtsp流数据，直接转RTMP推送到RTMP服务。...对于大多数开发者来说，不一定需要实现上述所有部分，只要按照产品诉求，实现其中的30-40%就足够满足特定场景使用了。...一个好的播放器，特别是要满足低延迟稳定的播放（毫秒级延迟），需要注意的点远不止如此，感兴趣的开发者，可以参考blog其他文章。
技术背景我们在做Windows平台RTMP和RTSP播放模块对接的时候，有开发者需要在wpf下调用，如果要在wpf下使用，只需要参考C#的对接demo即可，唯一不同的是，视频流数据显示的话，要么通过控件模式...，要么可以让RTMP、RTSP播放模块回调rgb数据上来，在wpf直接绘制即可。...，CPU占用如下，如果用硬解码，体验会更好：SmartPlayer以跨平台的RTSP播放器为例，我们实现的功能如下，如不单独说明，系Windows、Linux、Android、iOS全平台支持：[支持播放协议...]高稳定、超低延迟、业内首屈一指的RTSP直播播放器SDK； [多实例播放]支持多实例播放； [事件回调]支持网络状态、buffer状态等回调； [视频格式]支持H.265、H.264，此外，还支持RTSP...总结Windows平台下如果需要wpf播放，如果需要更灵活，可以采用回调rgb数据的模式，上层直接绘制，只是低延迟的播放出来画面，采用上述控件模式亦可，除了wpf外，我们提供了C++和C#的接口和demo
技术探讨自2017年我们发布跨平台的低延迟Unity下的RTSP|RTMP直播播放器后，Unity下的直播体验有了质的提升，特别是RTMP，从大家认知里面的几秒钟，直接缩减到100-300ms，满足了绝大多数场景下低延迟的技术诉求...今天就Unity下的RTSP|RTMP的低延迟播放，从以下几个维度，抛砖引玉，做个探讨： 选择合适的播放插件 Unity下的RTSP|RTMP低延迟播放，业内想到最多的是大牛直播SDK的SmartPlayer...优化网络环境网络带宽：确保网络带宽足够大，以支持 RTMP 或 RTSP 流的实时传输。如果是在本地网络环境下，可以使用有线网络连接，避免使用无线网络，以减少网络波动和延迟。...技术实现以大牛直播SDK的Windows平台Unity下的RTSP|RTMP直播播放模块为例，开始播放实现如下，开始播放之前，可以选择用软解码还是硬解码：/* SmartPlayerWinMono.cs...4路海康2560*1440分辨率的RTSP流，资源占用如下：总结Windows平台如果对延迟和资源占有等，要求非常高，可以选择合适的低延迟RTSP或RTMP播放插件、优化播放参数设置、优化网络环境、优化代码和渲染流程
随着VR类、游戏类场景的快速发展，开发者对Unity3d低延迟的直播需求量越来越大，前两年，大牛直播SDK发布了Windows平台、Android平台和iOS平台的Unity3d RTMP和RTSP的播放...，好多公司用起来体验都非常好，以下介绍大概实现流程。...本文以Android平台为例，我们的实现：基于大牛直播SDK现有非常成熟的native RTMP和RTSP播放模块，回调解码后的原始数据，传递给Unity3d，实现相应的绘制即可，对应demo，可以参考...rtp over tcp方式. /// 为了方便使用，有些场景下可以开启自动尝试切换开关, 打开后如果udp无法播放，sdk会自动尝试tcp, 如果tcp方式播放不了,sdk会自动尝试udp....1 : 0); //设置是否启用低延迟模式 NT_U3D_SetMute(player_handle_, is_mute_ ?
以下是一些可以使用Unity3D全景播放的场景：虚拟现实体验：全景视频可以用来创建逼真的虚拟环境，使用户能够感受到身临其境的感觉；培训模拟器：全景视频可以用来创建真实的训练环境，例如飞行模拟器、驾驶模拟器等...在Unity3D平台上实现全景实时RTMP或RTSP流渲染，可以通过以下方式：获取全景视频数据源：首先，需要拉取RTMP或RTSP流数据，解码后，把RGB或YUV数据，回调到unity，从而获取到全景视频流数据...；Unity创建个Sphere，创建个材质球(Material)，并把材质球挂在到Sphere； 实现实时渲染：使用Unity3D的渲染管道，您可以将纹理映射到球体或立方体的表面上，并使用着色器来处理纹理的坐标...技术实现图片本文以大牛直播SDK的RTMP推送端作为数据采集，获取全景窗体数据后，编码打包推送到RTMP服务，或启动个轻量级RTSP服务，对外提供个RTSP的拉流URL。...1 : 0); //设置是否启用低延迟模式 //设置旋转角度(设置0， 90， 180， 270度有效，其他值无效) int rotate_degrees = 0;
EasyPlayer-Android播放器是一款可针对RTSP、RTMP、RTSP&RTMP协议进行过优化的流媒体播放器，其中我们引以为傲的两个技术优势就是起播速度快和播放延迟低。...EasyPlayer.js如何实现播放完自动循环播放？ 分析问题： H5中video标签支持自动循环播放。...Video.js 是一个通用的在网页上嵌入视频播放器的 JS 库，Video.js 自动检测浏览器对 HTML5 的支持情况，如果不支持 HTML5 则自动使用 Flash 播放器。...Video.js实例化video时添加属性。 解决问题： 在video.js实例化video标签时添加loop此属性就可以实现播放完自动循环播放。...更多关于EasyPlayer EasyPlayer是一款流媒体播放器系列项目，支持RTSP、RTMP、HTTP、HLS、UDP、RTP、File等多种流媒体协议播放、 支持本地文件播放，支持本地抓拍、本地录像
Flutter Engine使用C/C++编写，具有低延迟输入和高帧速率的特点，不像Unity3d一样，我们是回调YUV/RGB数据，在Unity3d里面绘制，Flutter直接调用native SDK...其次，客户和开发者驱动，Flutter发展至今，目前还没有个像样的RTSP或RTMP播放器，一个播放器，不是说，有个界面，有个开始、停止按钮就可以了，一个好用的直播播放器，对功能和性能属性要求很高，特别是稳定性和低延迟这块...，不谦虚的说，大牛直播SDK（Github）的这款Flutter下的RTSP/RTMP播放器，可能是首款功能强大、真正好用的Flutter RTSP/RTMP直播播放SDK。...rtp over tcp方式. /// 为了方便使用，有些场景下可以开启自动尝试切换开关, 打开后如果udp无法播放，sdk会自动尝试tcp, 如果tcp方式播放不了,sdk会自动尝试udp....var is_fast_startup = 1; ret = await player.setFastStartup(is_fast_startup); //是否开启低延迟模式
整个架构如下图所示，分为服务器端和浏览器端两部分： websocket.png 方案二：RTSP转RTMP到RTMP服务器，转http-flv，播放端用flv.js播放 flv.js在获取到FLV格式的音视频数据后将...方案三：RTSP转RTMP到RTMP服务器，转hls，播放端用video.js播放 Video.js是一款web视频播放器，支持html5和flash两种播放方式。...方案四：VLC或者SmartPlayer第三方插件播放 VLC不再多说，几乎做流媒体的开发者都知道，SmartPlayer是大牛直播SDK (Github) 的播放插件，延迟和功能体验更好。...插件形式的优点是无需二次转换，直接通过ActiveX控件的形式播放，延迟非常低，缺点是只支持IE浏览器。...，延迟也比较低。
关于Unity实现RTMP直播推送技术方案，之前零散的写过几篇介绍，得到了好多开发者的关注。...以Android平台为例，目前视频这块，我们demo实现的是Camera数据的采集，然后编码投递到底层，如果设备没有性能瓶颈，可达到高帧率（60帧）均匀的RTMP推送效果。...视频采集这块，不再是难题，用ReadPixels从当前Render Target读取到图像数据即可，视频编码的话，我们分软编码、硬编码两块，硬编码，我们又实现了native层的硬编（5.0+以上版本），...当然不管哪种实现都不难。数据有了，实现RTMP推送这块，小菜一碟了，由于我们有多年的RTMP推送方面的技术积累，对我们来说，无非就是多一种类型的数据源而已。...经过实际测试，配合我们自研的RTMP播放器，轻松实现超过50帧的RTMP毫秒级延迟的体验，足够应对大多数行业场景了。
然而，当网络状况不佳、推流设置不当或播放器配置不合理时，延迟可能会增加。具体来说，RTMP播放器的延迟可能受到以下因素的影响：网络状况：网络延迟和丢包是影响RTMP播放器延迟的重要因素。...为了降低RTMP播放器的延迟，可以采取以下措施：优化网络状况，确保网络连接的稳定性和带宽的充足性。调整推流设置，如使用更高效的编码器、降低GOP的值等。...配置播放器以使用较小的缓冲区或选择适合低延迟的播放模式。合理配置CDN节点，确保内容能够快速、稳定地传输到用户端。...实际上，2015年，我们开始做RTMP的推拉流技术方案的时候，我们也遇到了同样的问题，我们先是发布了RTMP推送模块，发现市面上的开源的能找到的RTMP播放器，延迟都满足不了我们期望的毫秒级水准，无法实现移动单兵或其他操控类的使用场景...，然后，右侧是我们的播放器拉取rtmp流的整体时延，整体毫秒级，可低至150-300ms。
对iOS的需求比较少，所以一直没单独说明，本文主要介绍下，如何在iOS平台播放RTMP或RTSP流。...技术实现先说播放实现，iOS端，RTMP|RTSP直播播放，我们实现的功能如下： [支持播放协议]高稳定、超低延迟（毫秒级） [多实例播放]支持多实例播放； [事件回调]支持网络状态、buffer状态等回调...支持特定机型H.265硬解； [H.264/H.265硬解码]Android支持设置Surface模式硬解和普通模式硬解码； [缓冲时间设置]支持buffer time设置； [首屏秒开]支持首屏秒开模式； [低延迟模式...]支持低延迟模式设置(公网200~400ms)； [复杂网络处理]支持断网重连等各种网络环境自动适配； [快速切换URL]支持播放过程中，快速切换其他URL，内容切换更快； [实时静音]支持播放过程中，...，由于设备和系统比较单一，所以优先考虑硬解码，除了基础播放外，我们还实现了实时快照、实时录像、实时回调YUV数据、实时音量调节等，实际体验下来，iOS平台RTMP和RTSP，可以轻松毫秒级，感兴趣的开发者
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
云直播
腾讯会议
