AVFoundation–简介

2024-05-04 02:58
文章标签 简介 avfoundation

本文主要是介绍AVFoundation–简介,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

AVFoundation是很多处理基于时间的音视频文件的框架之一。你可以用它来检查,创建,编辑或者对媒体文件重编码。可以从设备中得到输入流,以及在实时捕捉和播放的时候对视频进行处理。

  • 如果你仅仅需要播放视频,在IOS上你可以使用Media Player框架中的MPMoviePlayerController或者MPMoviePlayerViewController,如果是基于Web的视频,那么你可以使用UIWebView
  • 为了录制视频,并且几乎不需要关注其格式,那么你可以使用UIKit框架中的UIImagePickerController

然而请注意:在AVFoundation中使用的一些原始数据(包括基于时间的数据结构以及携带及包含媒体信息的封装对象)都是在Core Media框架中声明的。

AVFoundation框架简介

AV Foundation中有两个方面的API(处理视频的和处理音频的)。

  • 使用AVAudioPlayer来播放音频文件
  • 使用AVAudioRecorder来录制音频文件

你可以通过AVAudioSessin对象来对配置音频的播放行为,相关配置可以参考:Audio Session Programming Guide

AVFoundation中用来代表媒体信息的关键类是AVAsset。该框架的大部分功能都是有AVAsset来表现的。理解AVAsset将有助于理解整个框架是如何工作的。AVAsset是一片或者多片媒体数据的集合。它统一提供这个集合的信息,包括其标题,时长,自然表现大小(natural presentation size)等。一个AVAsset不合具体的数据格式相绑定。AVAsset是其它用URL来创建asset实例的父类。
asset中的每一个独立媒体片是一个统一的类型并且其成为track

使用Assets

AVAsset是AVFoundation的基础类。AVFoundation框架的设计很大程度上都是通过这个类来表现的。它提供了视频的名称,时间,正常展示的大小(natural presentation size)。AVAsset没有和具体的数据形式相绑定。AVAsset是从一个URL来创建出Asset实例的父类,并且可以创建出新的组合。每个asset中独立的视频片段都是统一的类型叫做track。一般情况下:一个track代表音频成分,一个track代表视频成分。很重要的一点是:初始化一个asset并不意味着立即就可以用。它还需要一些时间来计算。但是这种计算不会阻塞主线程,他会异步的执行。

播放

presentation state是由player item对象管理的,某个track的presentation state是由player item track对象管理的。你可以使用player对象来播放,并且直接将其输出到Core Animation上。可以使用一个player queue有续地来管理一系列的player items

读,写以及重新编码Asset

AV Foundation让你给一个Asset用不同的方式创建出新的展示。你可以仅仅对一个已经存在的asset进行重编码(ios4.1之后),你可以在一个asset的内容上执行不同的操作,然后将结果用新的asset来存储。将一种表现转化成其他类型的表现,可以使用asset readerasset writer来串联两个视频动画。

缩略图

使用AVAssetImageGenerator对象可以来创建缩略图。编辑,AV Foundation使用compositions来从现有的媒体片段中新建assets。可以设置相对volume,音频track ramp,设置透明度。

Media捕捉和使用Camera

可以使用preview player来展示camera录制的内容。

AV Foundation和多线程并发

有两点需要注意的:

  • UI相关的通知应该在主线程中触发。
  • 需要自己明确指定类和方法所在线程的话会在响应的线程中年触发通知

如果要开发多线程的应用,那么你应该使用isMainThread或者[[NSThread currentThread] isEqual:<#A stored thread reference#>]来提前测试是否该线程是你期望的要执行的线程。如果要跨线程,你可能需要如下方法

1

2

3

performSelectorOnMainThread:withObject:waitUntilDone:

performSelector:onThread:withObject:waitUntilDone:modes:

dispatch_async

为了更好的开发AVFoundation,你需要具备如下前提知识:

  • 全面理解基础的Cocoa开发工具及技术
  • 基本理解Block
  • 基本理解KVC和KVO
  • 对于视频回播,需要理解合理动画,对于基本的回播,需要理解AV Kit框架参考手册

No related posts.

这篇关于AVFoundation–简介的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/958205

相关文章

ASIO网络调试助手之一:简介

多年前,写过几篇《Boost.Asio C++网络编程》的学习文章,一直没机会实践。最近项目中用到了Asio,于是抽空写了个网络调试助手。 开发环境: Win10 Qt5.12.6 + Asio(standalone) + spdlog 支持协议: UDP + TCP Client + TCP Server 独立的Asio(http://www.think-async.com)只包含了头文件,不依

业务协同平台--简介

一、使用场景         1.多个系统统一在业务协同平台定义协同策略,由业务协同平台代替人工完成一系列的单据录入         2.同时业务协同平台将执行任务推送给pda、pad等执行终端,通知各人员、设备进行作业执行         3.作业过程中,可设置完成时间预警、作业节点通知,时刻了解作业进程         4.做完再给你做过程分析,给出优化建议         就问你这一套下

容器编排平台Kubernetes简介

目录 什么是K8s 为什么需要K8s 什么是容器(Contianer) K8s能做什么? K8s的架构原理  控制平面(Control plane)         kube-apiserver         etcd         kube-scheduler         kube-controller-manager         cloud-controlle

【Tools】AutoML简介

摇来摇去摇碎点点的金黄 伸手牵来一片梦的霞光 南方的小巷推开多情的门窗 年轻和我们歌唱 摇来摇去摇着温柔的阳光 轻轻托起一件梦的衣裳 古老的都市每天都改变模样                      🎵 方芳《摇太阳》 AutoML(自动机器学习)是一种使用机器学习技术来自动化机器学习任务的方法。在大模型中的AutoML是指在大型数据集上使用自动化机器学习技术进行模型训练和优化。

SaaS、PaaS、IaaS简介

云计算、云服务、云平台……现在“云”已成了一个家喻户晓的概念,但PaaS, IaaS 和SaaS的区别估计还没有那么多的人分得清,下面就分别向大家普及一下它们的基本概念: SaaS 软件即服务 SaaS是Software-as-a-Service的简称,意思是软件即服务。随着互联网技术的发展和应用软件的成熟, 在21世纪开始兴起的一种完全创新的软件应用模式。 它是一种通过Internet提供

LIBSVM简介

LIBSVM简介 支持向量机所涉及到的数学知识对一般的化学研究者来说是比较难的,自己编程实现该算法难度就更大了。但是现在的网络资源非常发达,而且国际上的科学研究者把他们的研究成果已经放在网络上,免费提供给用于研究目的,这样方便大多数的研究者,不必要花费大量的时间理解SVM算法的深奥数学原理和计算机程序设计。目前有关SVM计算的相关软件有很多,如LIBSVM、mySVM、SVMLight等,这些

urllib与requests爬虫简介

urllib与requests爬虫简介 – 潘登同学的爬虫笔记 文章目录 urllib与requests爬虫简介 -- 潘登同学的爬虫笔记第一个爬虫程序 urllib的基本使用Request对象的使用urllib发送get请求实战-喜马拉雅网站 urllib发送post请求 动态页面获取数据请求 SSL证书验证伪装自己的爬虫-请求头 urllib的底层原理伪装自己的爬虫-设置代理爬虫coo

新一代车载(E/E)架构下的中央计算载体---HPC软件架构简介

老规矩,分享一段喜欢的文字,避免自己成为高知识低文化的工程师: 屏蔽力是信息过载时代一个人的特殊竞争力,任何消耗你的人和事,多看一眼都是你的不对。非必要不费力证明自己,无利益不试图说服别人,是精神上的节能减排。 无人问津也好,技不如人也罢,你都要试着安静下来,去做自己该做的事.而不是让内心的烦躁、焦虑、毁掉你本就不多的热情和定力。 时间不知不觉中,快要来到夏末秋初。一年又过去了一大半,成

AI学习指南深度学习篇-带动量的随机梯度下降法简介

AI学习指南深度学习篇 - 带动量的随机梯度下降法简介 引言 在深度学习的广阔领域中,优化算法扮演着至关重要的角色。它们不仅决定了模型训练的效率,还直接影响到模型的最终表现之一。随着神经网络模型的不断深化和复杂化,传统的优化算法在许多领域逐渐暴露出其不足之处。带动量的随机梯度下降法(Momentum SGD)应运而生,并被广泛应用于各类深度学习模型中。 在本篇文章中,我们将深入探讨带动量的随

OpenGL ES学习总结:基础知识简介

什么是OpenGL ES? OpenGL ES (为OpenGL for Embedded System的缩写) 为适用于嵌入式系统的一个免费二维和三维图形库。 为桌面版本OpenGL 的一个子集。 OpenGL ES管道(Pipeline) OpenGL ES 1.x 的工序是固定的,称为Fix-Function Pipeline,可以想象一个带有很多控制开关的机器,尽管加工