【GStreamer开发】GStreamer基础教程13——播放速度
目标
快进,倒放和慢放是trick模式的共同技巧,它们有一个共同点就是它们都修改了播放的速度。本教程会展示如何来获得这些效果和如何进行逐帧的跳跃。主要内容是:
如何来变换播放的速度,变快或者变慢,前进或者后退
如何一帧一帧的播放视频
介绍
快进是以超过正常速度播放媒体的一项技术,反之,慢放是以低于正常速度播放的技术。倒放和播放是一样的,只不过是从后面朝前面播放。
所有这些技术做的都是修改播放速度这件事,如果说正常播放速度是1.0的话,那么超过1.0这个数字就是快进,低于1.0这个数字就是慢放了,正数就是从前朝后放,负数就是从后超前放了。
GStreamer提供了两种来变换播放的速度:Step事件和Seek事件。Step事件可以在改变后面的播放速度的情况下跳过一个指定的间隔(只能向前播放)。Seek事件,就可以跳转到任意一个地方并且可以设置播放速度(正向反向都可以)。
在《GStreamer基础教程04——时间管理》里面已经演示过Seek事件了,使用了一个帮助函数来隐藏起复杂性。本教程会做更详细的解释。
Step事件因为需要的参数比较少,用来改变播放速度更加方便一点。但是,他们在GStreamer的实现还需要再做一点工作,所以这里用了Seek事件。
为了使用这些事件,需要先建立它们然后把它们传给pipeline,它们会向上游传播知道遇到能处理这些事件的element。如果一个事件传给了一个bin element(比如playbin2),它会简单地把事件给到它所有的sink,这可能会导致操作执行很多次。常见的做法是通过video-sink或者audio-sink属性找到一个playbin2的sink,然后直接把事件传给这个sink。
逐帧步进就是一帧一帧的播放视频,它是让pipeline暂停,然后发送Step事件给它,让它每次跳跃一帧。
一个神奇模式的播放器
- <span style="font-size:14px;">#include <string.h>
- #include <gst/gst.h>
- typedef struct _CustomData {
- GstElement *pipeline;
- GstElement *video_sink;
- GMainLoop *loop;
- gboolean playing; /* Playing or Paused */
- gdouble rate; /* Current playback rate (can be negative) */
- } CustomData;
- /* Send seek event to change rate */
- static void send_seek_event (CustomData *data) {
- 4 position;
- GstFormat format = GST_FORMAT_TIME;
- GstEvent *seek_event;
- /* Obtain the current position, needed for the seek event */
- if (!gst_element_query_position (data->pipeline, &format, &position)) {
- g_printerr ("Unable to retrieve current position.\n");
- return;
- }
- /* Create the seek event */
- ) {
- seek_event = gst_event_new_seek (data->rate, GST_FORMAT_TIME, GST_SEEK_FLAG_FLUSH | GST_SEEK_FLAG_ACCURATE,
- );
- } else {
- seek_event = gst_event_new_seek (data->rate, GST_FORMAT_TIME, GST_SEEK_FLAG_FLUSH | GST_SEEK_FLAG_ACCURATE,
- , GST_SEEK_TYPE_SET, position);
- }
- if (data->video_sink == NULL) {
- /* If we have not done so, obtain the sink through which we will send the seek events */
- g_object_get (data->pipeline, "video-sink", &data->video_sink, NULL);
- }
- /* Send the event */
- gst_element_send_event (data->video_sink, seek_event);
- g_print ("Current rate: %g\n", data->rate);
- }
- /* Process keyboard input */
- static gboolean handle_keyboard (GIOChannel *source, GIOCondition cond, CustomData *data) {
- gchar *str = NULL;
- if (g_io_channel_read_line (source, &str, NULL, NULL, NULL) != G_IO_STATUS_NORMAL) {
- return TRUE;
- }
- ])) {
- case 'p':
- data->playing = !data->playing;
- gst_element_set_state (data->pipeline, data->playing ? GST_STATE_PLAYING : GST_STATE_PAUSED);
- g_print ("Setting state to %s\n", data->playing ? "PLAYING" : "PAUSE");
- break;
- case 's':
- ])) {
- .0;
- } else {
- .0;
- }
- send_seek_event (data);
- break;
- case 'd':
- .0;
- send_seek_event (data);
- break;
- case 'n':
- if (data->video_sink == NULL) {
- /* If we have not done so, obtain the sink through which we will send the step events */
- g_object_get (data->pipeline, "video-sink", &data->video_sink, NULL);
- }
- gst_element_send_event (data->video_sink,
- , data->rate, TRUE, FALSE));
- g_print ("Stepping one frame\n");
- break;
- case 'q':
- g_main_loop_quit (data->loop);
- break;
- default:
- break;
- }
- g_free (str);
- return TRUE;
- }
- int main(int argc, charchar *argv[]) {
- CustomData data;
- GstStateChangeReturn ret;
- GIOChannel *io_stdin;
- /* Initialize GStreamer */
- gst_init (&argc, &argv);
- /* Initialize our data structure */
- , sizeof (data));
- /* Print usage map */
- g_print (
- "USAGE: Choose one of the following options, then press enter:\n"
- " 'P' to toggle between PAUSE and PLAY\n"
- " 'S' to increase playback speed, 's' to decrease playback speed\n"
- " 'D' to toggle playback direction\n"
- " 'N' to move to next frame (in the current direction, better in PAUSE)\n"
- " 'Q' to quit\n");
- /* Build the pipeline */
- data.pipeline = gst_parse_launch ("playbin2 uri=http://docs.gstreamer.com/media/sintel_trailer-480p.webm", NULL);
- /* Add a keyboard watch so we get notified of keystrokes */
- #ifdef _WIN32
- 2_new_fd (fileno (stdin));
- #else
- io_stdin = g_io_channel_unix_new (fileno (stdin));
- #endif
- g_io_add_watch (io_stdin, G_IO_IN, (GIOFunc)handle_keyboard, &data);
- /* Start playing */
- ret = gst_element_set_state (data.pipeline, GST_STATE_PLAYING);
- if (ret == GST_STATE_CHANGE_FAILURE) {
- g_printerr ("Unable to set the pipeline to the playing state.\n");
- gst_object_unref (data.pipeline);
- ;
- }
- data.playing = TRUE;
- .0;
- /* Create a GLib Main Loop and set it to run */
- data.loop = g_main_loop_new (NULL, FALSE);
- g_main_loop_run (data.loop);
- /* Free resources */
- g_main_loop_unref (data.loop);
- g_io_channel_unref (io_stdin);
- gst_element_set_state (data.pipeline, GST_STATE_NULL);
- if (data.video_sink != NULL)
- gst_object_unref (data.video_sink);
- gst_object_unref (data.pipeline);
- ;
- }
- </span>
工作流程
在主函数里面的初始化代码没有任何新的东西:初始化一个playbin2,跟踪按键,运行一个GLib主循环。
然后,在键盘处理函数中:
- <span style="font-size:14px;">/* Process keyboard input */
- static gboolean handle_keyboard (GIOChannel *source, GIOCondition cond, CustomData *data) {
- gchar *str = NULL;
- if (g_io_channel_read_line (source, &str, NULL, NULL, NULL) != G_IO_STATUS_NORMAL) {
- return TRUE;
- }
- ])) {
- case 'p':
- data->playing = !data->playing;
- gst_element_set_state (data->pipeline, data->playing ? GST_STATE_PLAYING : GST_STATE_PAUSED);
- g_print ("Setting state to %s\n", data->playing ? "PLAYING" : "PAUSE");
- break;</span>
像前一讲一样用gst_element_set_state()来处理暂停/播放的交替。
- <span style="font-size:14px;"> case 's':
- ])) {
- .0;
- } else {
- .0;
- }
- send_seek_event (data);
- break;
- case 'd':
- .0;
- send_seek_event (data);
- break;</span>
用‘S’来加倍播放的速度,'s'来把播放速度降低一倍,用'd'来转换播放的方向。在这几种情况的任何一种里面,rate这个变量是需要更新的,然后调用send_seek_event()这个方法。让我们来看一下函数:
- <span style="font-size:14px;">/* Send seek event to change rate */
- static void send_seek_event (CustomData *data) {
- 4 position;
- GstFormat format = GST_FORMAT_TIME;
- GstEvent *seek_event;
- /* Obtain the current position, needed for the seek event */
- if (!gst_element_query_position (data->pipeline, &format, &position)) {
- g_printerr ("Unable to retrieve current position.\n");
- return;
- }</span>
这个函数新创建了一个Seek时间,并发送给pipeline来更高播放速度。首先,用gst_element_query_position()方法来记录当前位置。这样做事因为Seek事件会跳转其他位置,如果我们后面不希望进行移动,那么就需要返回到原来的位置。用Step事件会简单一点,但Step事件现在还没完全完成,这个在前面已经介绍过了。
- <span style="font-size:14px;"> /* Create the seek event */
- ) {
- seek_event = gst_event_new_seek (data->rate, GST_FORMAT_TIME, GST_SEEK_FLAG_FLUSH | GST_SEEK_FLAG_ACCURATE,
- );
- } else {
- seek_event = gst_event_new_seek (data->rate, GST_FORMAT_TIME, GST_SEEK_FLAG_FLUSH | GST_SEEK_FLAG_ACCURATE,
- , GST_SEEK_TYPE_SET, position);
- }</span>
我们用gst_event_new_seek()来建立Seek事件。参数基本上就是新的播放速度,新的起始位置和新的结束位置。无论播放的方向,起始位置都要在结束位置之前。所以两个播放的方向分成了两段处理。
- <span style="font-size:14px;"> if (data->video_sink == NULL) {
- /* If we have not done so, obtain the sink through which we will send the seek events */
- g_object_get (data->pipeline, "video-sink", &data->video_sink, NULL);
- }</span>
正如前面解释的,为了避免对此进行Seek,事件只传给一个sink,在这里,就是视频的sink了。通过playbin2的video-sink属性来获得。这个动作在这里执行而不是在初始化时就执行是因为随着播放媒体的不同这个sink是不同的,所以在pipeline到PLAYING状态并已经读取了一些媒体数据前video-sink是不能确定的。
- <span style="font-size:14px;"> /* Send the event */
- gst_element_send_event (data->video_sink, seek_event);</span>
最后,我们用gst_element_send_event()把新建的这个事件传给选中的sink。
回到键盘处理函数来,我们还没有提到帧步进的代码的是在这里实现的:
- <span style="font-size:14px;"> case 'n':
- if (data->video_sink == NULL) {
- /* If we have not done so, obtain the sink through which we will send the step events */
- g_object_get (data->pipeline, "video-sink", &data->video_sink, NULL);
- }
- gst_element_send_event (data->video_sink,
- , data->rate, TRUE, FALSE));
- g_print ("Stepping one frame\n");
- break;</span>
用gst_event_new_step()来创建一个新的Step事件,参数主要是指定的步长(这里是1帧)和速度(这里我们没改)。
获取一下playbin2的视频sink,就像前面提到过地那样。
大功告成!不过在测试本教程时,请记住回放是很多element不支持的。
(对于本地文件来说也可以修改播放速度,如果你要试验这一点,那么只要把传给playbin2的URL改成本地的URL即可。请注意,是用file:///来作为开头的)
【GStreamer开发】GStreamer基础教程13——播放速度的更多相关文章
- Android程序开发0基础教程(一)
程序猿学英语就上视觉英语网 Android程序开发0基础教程(一) 平台简单介绍 令人激动的Google手机操作系统平台-Android在2007年11月13日正式公布了,这是一个开放源码的操 ...
- GStreamer基础教程07 - 播放速率控制
摘要 在常见的媒体播放器中,通常可以看到快进,快退,慢放等功能,这部分功能被称为“特技模式(Trick Mode)”,这些模式有个共同点:都通过修改播放的速率来达到相应的目的. 本文将介绍如何通过GS ...
- GStreamer基础教程05 - 播放时间控制
简介 在多媒体应用中,我们通常需要查询媒体文件的总时间.当前播放位置,以及跳转到指定的时间点.GStreamer提供了相应的接口来实现此功能,在本文中,我们将通过示例了解如何查询时间信息,以及如何进行 ...
- GStreamer基础教程13 - 调试Pipeline
摘要 在很多情况下,我们需要对GStreamer创建的Pipeline进行调试,来了解其运行机制以解决所遇到的问题.为此,GStreamer提供了相应的调试机制,方便我们快速定位问题. 查看调试日志 ...
- Java基础教程(13)--包
为了使类型更易于查找,避免命名冲突和访问控制,我们应该使用包来对自己定义的类型进行管理.这里说的类型可以是类.接口.枚举和注解(枚举和注解的内容会在后续教程中介绍).使用包来管理我们的代码,有以下 ...
- cocos基础教程(13)使用Physicals代替Box2D和chipmunk
1. 概述 游戏中模拟真实的世界是个比较麻烦的事情,通常这种事情都是交给物理引擎来做.首屈一指的是Box2D了,它几乎能模拟所有的物理效果.而chipmunk则是个更轻量的引擎,能够满足简单的物理 ...
- iOS开发零基础教程之生成git所需的SSH keys
在我们github看到了一个不错的第三方库时,可能我们想把他git clone到本地,我们需要复制他的SSH URL,如下图: 复制完地址之后,我们需要打开终端,然后输入命令: git clone + ...
- Ruby 基础教程1-3
1.命令行参数ARGV[] 2.文件读取 file=File.open(filename) text=file.read print text file.close 一次读取所有内容耗内存,耗 ...
- Chrome扩展开发基础教程(附HelloWorld)
1 概述 Chrome扩展开发的基础教程,代码基于原生JS+H5,教程内容基于谷歌扩展开发官方文档. 2 环境 Chrome 88.0.4324.96 Chromium 87.0.4280.141 B ...
随机推荐
- Windows异常处理机制简介
windows系统里,为了保证系统内核的强壮和稳定,为了保证用户程序的强壮和稳定,提供了异常处理机制,来帮助程序员和系统使用人员处理异常.简单来说,当CPU执行代码时,发生异常,会把异常告知操作系统, ...
- Linux下搭建iSCSI共享存储的方法 Linux-IO Target 方式 Debian9.5下实现
iSCSI(internet SCSI)技术由IBM公司研究开发,是一个供硬件设备使用的.可以在IP协议的上层运行的SCSI指令集,这种指令集合可以实现在IP网络上运行SCSI协议,使其能够在诸如高速 ...
- 洛谷P2827蚯蚓
题目 堆+模拟,还有一个小优化(优化后跟堆关系不大,而是类似于贪心). 如果不加优化的话,卡常可以卡到85. 思路是对于对每一秒进行模拟,用堆来维护动态的最大值,然后对于每个长度都加q的情况可以用一个 ...
- MySQL:服务无法启动(1067)问题
打开安装文件下的my.ini 找到: #Path to the database rootdatadir="C:/ProgramData/MySQL/MySQL Server 5.5/dat ...
- Mysql插入多条数据测试
--新建存储过程 create procedure doinsert3() begin declare i int; declare j int; set i = 0; set j = 0; whil ...
- 浅析TCP三次握手及四次挥手
1. 三次握手 1. TCP为什么相较于UDP是可靠连接? 可靠连接是指,待通信的两个实体,能够满足通信数据包的有序性.完整性以及可靠性.对于UDP来说, 它的连接过程不需要握手,忽略丢失的数据包,并 ...
- div双击全屏,再双击恢复到原来的状态vue,js来做
需求是这样的: 有四个视频,视频是在4个区域,点击之后就全屏 <!DOCTYPE html> <html lang="en"> <head> & ...
- docker技术入门(2)
接上一篇文章 [容器技术]Docker容器技术入门(一) 今天接着上次聊一聊有关Docker网络.数据存储相关的技术点 Docker网络模式 01 Dokcer 通过使用 Linux 桥接提供容器之间 ...
- Node.js之文件下载
Node.js之文件下载,主要最近解决我的一个需求. 需求描述:如何将腾讯云上传的文件存储到本地某个目录下,如果用js来实现,纯JavaScript没有这样的功能(也许有),正好我这个项目用node. ...
- 一个想要拥有正常的F1~F12的联想小新潮
联想如何切换至正常的F1~F12 Fn+Fx的生活让我疲倦,实在难受,就开始了尝试关闭Fn 问题一:无法打开BIOS设置界面 重启,在开机界面时,按F2???顺利开机-(相较于台式机开机时,可以按F2 ...