前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >iOS在线音频流播放

iOS在线音频流播放

作者头像
落影
发布2018-04-27 17:53:06
2.4K0
发布2018-04-27 17:53:06
举报
文章被收录于专栏:落影的专栏落影的专栏

前言

这是一篇关于在线音频播放的文章,参考自苹果OS X的demo。 在移植到iOS后,可以通过iphone播放Mac上面的音频,实现在线播放音频的功能。 本文可以学习到socket编程AudioFileStream转换音频流AudioQueue播放音频信号量的使用

正文

demo有两个工程,分别是serversclient

servers是OS X的应用,作为服务端,负责发送音频流数据;

client是iOS的应用,作为客户端,负责接收音频流数据;

音频数据通过AudioFileStream转换后,调用AudioQueue进行播放,中间会用到信号量进行等待和同步。

1、socket编程

bind方法用于绑定接口,然后用listen监听tcp连接请求,accept用于接受tcp连接;

fopen打开音频文件,fread读取音频数据,send对建立的连接发送音频流;

对已经失效的socket,send两次数据就会触发SIGPIPE信号,默认的处理是关闭进程。

代码语言:javascript
复制
// 打开文件
FILE* file = fopen([[[NSBundle mainBundle] pathForResource:@"chenli" ofType:@"mp3"] UTF8String], "r");
// 创建socket
int listener_socket = socket(AF_INET, SOCK_STREAM, 0);
// 绑定socket
bind(listener_socket, (struct sockaddr*)&server_sockaddr, sizeof(server_sockaddr));
// 监听tcp连接
listen(listener_socket, 4);
// 接收tcp连接,注意!这里并不是三次握手。
int connection_socket = accept(listener_socket, (struct sockaddr*)&client_sockaddr, &client_sockaddr_size);
// 读取文件
size_t bytesRead = fread(buf, 1, 32768, file);
// 发送音频流
ssize_t bytesSent = send(connection_socket, buf, bytesRead, 0);
// 关闭socket
close(connection_socket);
2、AudioQueue播放音频

AudioQueue的播放时,需要先给audioBuffer填充数据,并把audioBuffer放入AudioQueue,然后通知AudioQueue开始播放;

AudioQueue从已经填充的audioBuffer里面开始播放数据,实时把播放完毕的audioBuffer回调给业务层,业务继续填充播放完毕的audioBuffer,重复流程直到音频播放完毕。

前文使用AudioToolbox播放AAC有对AudioQueue更详细的介绍以及更简化的demo。

配置AudioQueue

代码语言:javascript
复制
// 添加AudioQueue的回调函数和添加参数,MyAudioQueueOutputCallback是播完结束的回调
AudioQueueNewOutput(&asbd, MyAudioQueueOutputCallback, myData, NULL, NULL, 0, &audioQueue);
// AudioBuffer分配buffer
AudioQueueAllocateBuffer(audioQueue, kAQBufSize, &audioQueueBuffer[i]);
// 添加AudioQueue的属性监听
AudioQueueAddPropertyListener(audioQueue, kAudioQueueProperty_IsRunning, MyAudioQueueIsRunningCallback, myData);

开始播放

代码语言:javascript
复制
// 开始AudioQueue播放
AudioQueueStart(myData->audioQueue, NULL);
// 向AudioQueue传入buffer
AudioQueueEnqueueBuffer(audioQueue, fillBuf, (UInt32)myData->packetsFilled, packetDescs);

播放结束

代码语言:javascript
复制
// 传入最后的音频数据后需要调用,否则buffer里面的数据可能会影响下次播放
AudioQueueFlush(audioQueue);
// 如果需要停止播放,可以调用这个函数,第二个参数表示同步/异步
AudioQueueStop(audioQueue, false);
// 播放完毕,销毁队列
AudioQueueDispose(audioQueue, false);
3、互斥锁

普通锁

pthread_mutex_lock(mutex) 加锁,可能会阻塞;

pthread_mutex_unlock(mutex) 解锁;

条件锁(pthread_cond_wait)

调用pthread_cond_wait时,条件不成立则阻塞,直到条件成立;

调用pthread_cond_wait前,要先调用pthread_mutex_lock(mutex)加锁,pthread_cond_wait会在调用结束解锁mutex;

pthread_cond_wait条件满足后(pthread_cond_signal被调用),会对mutex加锁,当我们执行完程序时需要对mutex解锁;

调用pthread_cond_wait时,为了防止并发放入阻塞队列,所以需要提前对mutex加锁;

申请条件锁

代码语言:javascript
复制
pthread_mutex_lock(&mutex);
pthread_cond_wait(&cond, &mutex);
pthread_mutex_unlock(&mutex);

释放条件锁

代码语言:javascript
复制
pthread_mutex_lock(&mutex);
pthread_cond_signal(&cond);
pthread_mutex_unlock(&mutex);
4、AudioFileStream转换音频流

AudioFileStream可以用来读取音频流信息和分离音频帧,与之类似的API簇还有AudioFile和ExtAudioFile。

AudioFileStream可以用在线音频流,也可以使用本地文件。

代码语言:javascript
复制
// 打开一个音频流转换器,需要设置AudioFileStream_PropertyListenerProc 和 AudioFileStream_PacketsProc 回调函数;
AudioFileStreamOpen(myData, MyPropertyListenerProc, MyPacketsProc, kAudioFileAAC_ADTSType, &audioFileStream);

// AudioFileStreamParseBytes 解析数据,会调用之前设置好的AudioFileStream_PropertyListenerProc 和 AudioFileStream_PacketsProc 回调函数;
AudioFileStreamParseBytes(myData->audioFileStream, (UInt32)bytesRecvd, buf, 0);

// 获取特定的属性
AudioFileStreamGetProperty(inAudioFileStream, kAudioFileStreamProperty_DataFormat, &asbdSize, &asbd);

// 关闭音频流
AudioFileStreamClose(audioFileStream);
附录

demo中用到用到的一些方法:

AudioFileStreamParseBytes 解析数据,会调用之前设置好的AudioFileStream_PropertyListenerProcAudioFileStream_PacketsProc 回调函数;

AudioFileStreamOpen 打开一个音频流转换器,需要设置AudioFileStream_PropertyListenerProcAudioFileStream_PacketsProc 回调函数;

MyPropertyListenerProc 音频属性回调函数;

MyPacketsProc 数据回调函数;

MyEnqueueBuffer 把buffer里面的数据传入AudioQueue;

WaitForFreeBuffer 当前所有buffer已经占用满,等待AudioQueue播放完释放buffer;

MyAudioQueueOutputCallback AudioQueue释放buffer的回调函数;

MyAudioQueueIsRunningCallback AudioQueue是否在播放的回调函数;

MyConnectSocket 建立socket链接

demo 的代码地址在这里传送门

demo的打开方式: server是服务端,运行在OS X 有binary和app两种方式

  • binary需要编译完之后,找到二进制所在的目录,在其目录下放对应的音频文件;
  • app打开,保持运行;

client是客户端,运行在iOS

  • 1、在getHostName处需要修改为OS X的ip地址;
  • 2、iOS和OS X需要处于同一局域网;
  • 3、clietn未播放完结束,会导致server关闭;

总结

这个demo很有意思:用到很多知识点,而且很简单,非常适合学习。

最近越来越忙,如果有问题可以评论或者简信联系,尽量清楚点描述问题还有问题的上下文。

前文系列,或许会有兴趣。

使用VideoToolbox硬编码H.264

使用VideoToolbox硬解码H.264

使用AudioToolbox编码AAC

使用AudioToolbox播放AAC

HLS点播实现(H.264和AAC码流)

HLS推流的实现(iOS和OS X系统)

本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2017.04.03 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 前言
  • 正文
    • 1、socket编程
      • 2、AudioQueue播放音频
        • 3、互斥锁
          • 4、AudioFileStream转换音频流
            • 附录
            • 总结
            相关产品与服务
            云点播
            面向音视频、图片等媒体,提供制作上传、存储、转码、媒体处理、媒体 AI、加速分发播放、版权保护等一体化的高品质媒体服务。
            领券
            问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档