Xử lý âm thanh AVFayer bằng AVTAayer's MTAudioProcessingTap với các URL từ xa

Question

Có tài liệu quý giá trên AVAudioMix và MTAudioProcessingTap, cho phép xử lý được áp dụng cho các bản âm thanh (truy cập PCM) của nội dung phương tiện trong AVFoundation (trên iOS). Điều này article và một đề cập ngắn gọn trong một phiên WWDC 2012 là tất cả tôi đã tìm thấy.

Tôi đã thiết lập được mô tả here làm việc cho các tệp phương tiện cục bộ nhưng dường như không hoạt động với các tệp từ xa (cụ thể là các URL luồng HLS). Dấu hiệu duy nhất cho thấy đây là ghi chú ở cuối số Technical Q&A:

AVAudioMix chỉ hỗ trợ nội dung dựa trên tệp.

Có ai biết thêm về điều này không? có thực sự không có cách nào để truy cập dữ liệu PCM âm thanh khi nội dung không dựa trên tệp? Bất cứ ai có thể tìm thấy tài liệu Apple thực tế liên quan đến MTAudioProcessingTap?

Answer 1

Tôi đã nhận thấy có khá nhiều người hỏi về điều này trên internet và sự đồng thuận chung dường như không thể thực hiện được.

Hóa ra là - Tôi đã xem xét điều này cho một dự án cá nhân gần đây và xác định rằng thực sự có thể làm cho MTAudioProcessingTap hoạt động với các luồng từ xa. Bí quyết là KVObserve trạng thái của AVPlayerItem; khi đã sẵn sàng phát, bạn có thể truy xuất AVAssetTrack cơ bản một cách an toàn và đặt AudioMix trên đó.

tôi đã làm một writeup cơ bản với một số (chủ yếu là làm việc) mã ở đây: http://venodesigns.net/2014/01/08/recording-live-audio-streams-on-ios/

Nếu bạn đã quản lý để xử lý việc này, quyền lực hơn đối với bạn, nhưng tôi figured tôi muốn trả lời câu hỏi này vì nó đi lên khá nhanh chóng trong Google cho công cụ này.