一次“Error Domain=AVFoundationErrorDomain Code=-11841”的調試

来源:https://www.cnblogs.com/song-jw/archive/2018/08/24/9530249.html
-Advertisement-
Play Games

一次“Error Domain=AVFoundationErrorDomain Code= 11841”的調試 起因 最近在重構視頻輸出模塊的時候，調試碰到AVAssetReader 調用開始方法總是返回NO而失敗，代碼如下： reader的創建代碼如下，主要用的是GPUImageMovieComp ...


一次“Error Domain=AVFoundationErrorDomain Code=-11841”的調試

起因

最近在重構視頻輸出模塊的時候，調試碰到AVAssetReader 調用開始方法總是返回NO而失敗，代碼如下：

if ([reader startReading] == NO) 
    {
        NSLog(@"Error reading from file at URL: %@", self.url);
        return;
    }

reader的創建代碼如下，主要用的是GPUImageMovieCompostion.

- (AVAssetReader*)createAssetReader
{
    NSError *error = nil;
    AVAssetReader *assetReader = [AVAssetReader assetReaderWithAsset:self.compositon error:&error];
    
    NSDictionary *outputSettings = @{(id)kCVPixelBufferPixelFormatTypeKey: @(kCVPixelFormatType_420YpCbCr8BiPlanarFullRange)};
    AVAssetReaderVideoCompositionOutput *readerVideoOutput = [AVAssetReaderVideoCompositionOutput assetReaderVideoCompositionOutputWithVideoTracks:[_compositon tracksWithMediaType:AVMediaTypeVideo]
                                                                                                                                     videoSettings:outputSettings];
    readerVideoOutput.videoComposition = self.videoComposition;
    readerVideoOutput.alwaysCopiesSampleData = NO;
    if ([assetReader canAddOutput:readerVideoOutput]) {
        [assetReader addOutput:readerVideoOutput];
    }
    
    NSArray *audioTracks = [_compositon tracksWithMediaType:AVMediaTypeAudio];
    BOOL shouldRecordAudioTrack = (([audioTracks count] > 0) && (self.audioEncodingTarget != nil) );
    AVAssetReaderAudioMixOutput *readerAudioOutput = nil;
    
    if (shouldRecordAudioTrack)
    {
        [self.audioEncodingTarget setShouldInvalidateAudioSampleWhenDone:YES];
        NSDictionary *audioReaderSetting = @{AVFormatIDKey: @(kAudioFormatLinearPCM),
                                             AVLinearPCMIsBigEndianKey: @(NO),
                                             AVLinearPCMIsFloatKey: @(NO),
                                             AVLinearPCMBitDepthKey: @(16)};
        readerAudioOutput = [AVAssetReaderAudioMixOutput assetReaderAudioMixOutputWithAudioTracks:audioTracks audioSettings:audioReaderSetting];
        readerAudioOutput.audioMix = self.audioMix;
        readerAudioOutput.alwaysCopiesSampleData = NO;
        [assetReader addOutput:readerAudioOutput];
    }
    
    return assetReader;
}

然後在該處斷點，查看reader的status和error，顯示Error Domain=AVFoundationErrorDomain Code=-11841。查了一下文檔發現如下：

AVErrorInvalidVideoComposition = -11841

You attempted to perform a video composition operation that is not supported.

應該就是readerVideoOutput.videoComposition = self.videoComposition; 這個videoCompostion有問題了。AVMutableVideoComposition這個類在視頻編輯裡面非常重要，包含對AVComposition中的各個視頻track如何融合的信息，我做的是兩個視頻的融合小demo，就需要用到它，設置這個類稍微有點複雜，比較容易出錯，特別是設置AVMutableVideoCompositionInstruction這個類的timeRange屬性，我的這次錯誤就是因為這個。

開始調試

馬上調用AVMutableVideoComposition的如下方法：


BOOL isValid = [self.videoComposition isValidForAsset:self.compositon timeRange:CMTimeRangeMake(kCMTimeZero, self.compositon.duration) validationDelegate:self];

這個時候isValid為No，確定就是這個videoCompostion問題了，添加了AVVideoCompositionValidationHandling協議四個方法列印一下，這個協議太貼心了，估計知道這個地方出錯概率比較高，所以特地弄的吧。代碼如下：


- (BOOL)videoComposition:(AVVideoComposition *)videoComposition shouldContinueValidatingAfterFindingInvalidValueForKey:(NSString *)key 
{
    NSLog(@"%s===%@",__func__,key);
    return YES;
}

- (BOOL)videoComposition:(AVVideoComposition *)videoComposition shouldContinueValidatingAfterFindingEmptyTimeRange:(CMTimeRange)timeRange 
{
    NSLog(@"%s===%@",__func__,CFBridgingRelease(CMTimeRangeCopyDescription(kCFAllocatorDefault, timeRange)));
    return YES;
}

- (BOOL)videoComposition:(AVVideoComposition *)videoComposition shouldContinueValidatingAfterFindingInvalidTimeRangeInInstruction:(id<AVVideoCompositionInstruction>)videoCompositionInstruction 
{
    NSLog(@"%s===%@",__func__,videoCompositionInstruction);
    return YES;
}

- (BOOL)videoComposition:(AVVideoComposition *)videoComposition shouldContinueValidatingAfterFindingInvalidTrackIDInInstruction:(id<AVVideoCompositionInstruction>)videoCompositionInstruction layerInstruction:(AVVideoCompositionLayerInstruction *)layerInstruction asset:(AVAsset *)asset 
{
    NSLog(@"%s===%@===%@",__func__,layerInstruction,asset);
    return YES;
}

重新運行一下發現第三個方法列印輸出，就是instruction的timeRange問題了，又重新看了一下兩個instruction的設置問題,感覺又沒什麼問題，代碼如下：


- (void)buildCompositionWithAssets:(NSArray *)assetsArray
{
    for (int i = 0; i < assetsArray.count; i++) {
        AVURLAsset *asset = assetsArray[i];
        NSArray *videoTracks = [asset tracksWithMediaType:AVMediaTypeVideo];
        NSArray *audioTracks = [asset tracksWithMediaType:AVMediaTypeAudio];
        
        AVAssetTrack *videoTrack = videoTracks[0];
        AVAssetTrack *audioTrack = audioTracks[0];
        NSError *error = nil;
        AVMutableCompositionTrack *videoT = [self.avcompostions.mutableComps addMutableTrackWithMediaType:AVMediaTypeVideo preferredTrackID:kCMPersistentTrackID_Invalid];
        AVMutableCompositionTrack *audioT = [self.avcompostions.mutableComps addMutableTrackWithMediaType:AVMediaTypeAudio preferredTrackID:kCMPersistentTrackID_Invalid];
        [videoT insertTimeRange:videoTrack.timeRange ofTrack:videoTrack atTime:self.offsetTime error:&error];
        [audioT insertTimeRange:audioTrack.timeRange ofTrack:audioTrack atTime:self.offsetTime error:nil];
        NSAssert(!error, @"insert error = %@",error);
        AVMutableVideoCompositionInstruction *instruction = [AVMutableVideoCompositionInstruction videoCompositionInstruction];
        AVMutableVideoCompositionLayerInstruction *layerInstruction = [AVMutableVideoCompositionLayerInstruction videoCompositionLayerInstructionWithAssetTrack:videoT];
        instruction.layerInstructions = @[layerInstruction];
        instruction.timeRange = CMTimeRangeMake(self.offsetTime, asset.duration);
        [self.instrucionArray addObject:instruction];
        self.offsetTime = CMTimeAdd(self.offsetTime,asset.duration);
    }
}

這個數組裡面會有兩個載入好的AVAsset對象，載入AVAsset的代碼如下：


- (void)loadAssetFromPath:(NSArray *)paths
{
    NSMutableArray *assetsArray = [NSMutableArray arrayWithCapacity:paths.count];
    dispatch_group_t dispatchGroup = dispatch_group_create();
    for (int i = 0; i < paths.count; i++) {
        NSString *path = paths[i];
        //first find from cache
        AVAsset *asset = [self.assetsCache objectForKey:path];
        if (!asset) {
            NSDictionary *inputOptions = [NSDictionary dictionaryWithObject:[NSNumber numberWithBool:YES] forKey:AVURLAssetPreferPreciseDurationAndTimingKey];
            asset = [AVURLAsset URLAssetWithURL:[NSURL fileURLWithPath:path] options:inputOptions];
            // cache asset
            NSAssert(asset != nil, @"Can't create asset from path", path);
            NSArray *loadKeys = @[@"tracks", @"duration", @"composable"];
            [self loadAsset:asset withKeys:loadKeys usingDispatchGroup:dispatchGroup];
            [self.assetsCache setObject:asset forKey:path];
        }else {
        }
        [assetsArray addObject:asset];
    }
    dispatch_group_notify(dispatchGroup, dispatch_get_main_queue(), ^{
        !self.assetLoadBlock?:self.assetLoadBlock(assetsArray);
        
    });
}


- (void)loadAsset:(AVAsset *)asset withKeys:(NSArray *)assetKeysToLoad usingDispatchGroup:(dispatch_group_t)dispatchGroup
{
    dispatch_group_enter(dispatchGroup);
    [asset loadValuesAsynchronouslyForKeys:assetKeysToLoad completionHandler:^(){
        for (NSString *key in assetKeysToLoad) {
            NSError *error;
            
            if ([asset statusOfValueForKey:key error:&error] == AVKeyValueStatusFailed) {
                NSLog(@"Key value loading failed for key:%@ with error: %@", key, error);
                goto bail;
            }
        }
        if (![asset isComposable]) {
            NSLog(@"Asset is not composable");
            goto bail;
        }
    bail:
        dispatch_group_leave(dispatchGroup);
    }];
}

按照正常來說，應該不會有什麼問題的，但是問題還是來了。列印出創建的兩個AVMutableVideoCompositionInstruction的信息，發現他們的timeRange確實有重合的地方。AVMutableVideoCompositionInstruction的timeRange必須對應AVMutableCompositionTrack裡面的一段段插入的track的timeRange。開發文檔是這麼說的：

to report a video composition instruction with a timeRange that's invalid, that overlaps with the timeRange of a prior instruction, or that contains times earlier than the timeRange of a prior instruction

我在插入的時候使用的是videoTrack.timeRange，而設置instruction.timeRange = CMTimeRangeMake(self.offsetTime, asset.duration);使用的是asset.duration。這個兩個竟然是不一樣的。asset.duration是{59885/1000 = 59.885}，videoTrack.timeRange是{{0/1000 = 0.000}, {59867/1000 = 59.867}}
這兩個時長有細微差別，到底哪個是比較準確一點的呢？

視頻文件時長的計算

筆者在demo中使用的是mp4格式的文件，mp4文件是若幹個不同的類型box組成的，box可以理解為裝有數據的容器。其中有一種moov類型的box裡面裝有視頻播放的元數據（metadata），這裡面有視頻的時長信息：timescale和duration。 duration / timescale = 可播放時長（s）。從mvhd中讀到timescal為0x03e8，duration為0xe9ed，也就是59885 / 1000，為59.885。再看看tkhd box裡面的內容，這裡面是包含單一track的信息。如下圖：

mvhd

tkhd1_video

tkhd2_audio

從上圖可以看出videotrack和audiotrack兩個的時長是不一樣的，videotrack為0xe9db，也就是59.867，audiotrack為0xe9ed，就是59.885。所以我們在計算timeRange的時候最好統一使用相對精確一點的videotrack，而不要AVAsset的duration，儘量避免時間上的誤差，視頻精細化的編輯，對這些誤差敏感。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • HBase 文件讀寫過程描述
    HBase 數據讀寫過程描述 我們熟悉的在 Hadoop 使用的文件格式有許多種，例如： Avro：用於 HDFS 數據序序列化與 Parquet：常見於 Hive 數據文件保存在 HDFS中 HFile HFile 是 HBase 使用的一種柱狀存儲文件，非常適合隨機和實時讀寫。 HFile 文件 ...
  • .net下redis和rabbitmq簡單使用demo
    是參考 一下兩篇博文整理了下。 Redis: https://www.cnblogs.com/5ishare/p/6492380.html RabbitMq: https://www.cnblogs.com/yangecnu/p/4227535.html 話不多說，下麵直接貼demo 百度雲盤 地址 ...
  • MySql: Year, Quarter, Month, Day, Hour statistics
    -- 統計 select count(*) as '當天記錄數' from web_product where date(p_createtime) = curdate(); select count(*) as '當天記錄數' from web_product where to_days(p_cr... ...
  • 3. Oracle資料庫邏輯備份與恢復
    一. Oracle邏輯備份介紹 Oracle邏輯備份的核心就是複製數據；Oracle提供的邏輯備份與恢復的命令有exp/imp，expdp/impdp。當然像表級複製(create table table_back as select * from table)也算是一種邏輯備份。Oracle邏輯備 ...
  • Mysql清空表(truncate)與刪除表中數據(delete)的區別
    近日在做一個區塊鏈積分轉代幣的APP,牽涉到資料庫中表的記錄刪除問題, 如果一條條刪除那可真是累人。遂考慮直接進入mysql直接清空表或者刪除表中數據。 本文記錄一下這2種操作模式的區別，目標對象是表wp_comments，裡面的所有留言均是垃圾留言，均可刪除。然後便有了以下2種方式（進入mysql ...
  • 如何更有效率的去學習大數據？
    這段時間有很多人問小編如何學習大數據？ 既然這麼多人問我，那就寫篇文章，告訴大家，當然寫這篇文章也是經過思考的，不是提筆就寫，先介紹下我的基本情況，第一小編本人只是大數據中學習的小學生而已，不是什麼大牛，也不是什麼技術牛逼的神人，如果貿然動筆肯定會貽笑大方；另一方面大數據它本身領域博大精深，涵蓋之廣 ...
  • Derek解讀Bytom源碼-持久化存儲LevelDB
    作者：Derek 簡介 Github地址：https://github.com/Bytom/bytom Gitee地址：https://gitee.com/BytomBlockchain/bytom 本章介紹Derek解讀 Bytom源碼分析 持久化存儲LevelDB 作者使用MacOS操作系統，其 ...
  • OC重寫init方法
    在創建一個對象的時候我們經常會用到init方法，單單是init只能是初始化，當我們在初始化的時候想要給這個對象加上預設的東西的時候， 系統提供的init方法就不能滿足我們的需要，這時，就需要我們自己去重寫init方法； 通常在使用init方法的時候，系統先會在自己這個類中查詢是否實現（重寫）這個方法 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發（一）：使用.NET MAUI開發第一個安卓APP
    移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...
  • wpf ToggleButton選中效果和一個登錄界面
    前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...
  • 彈幕樹洞項目功能新增篇
    項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...
  • 第27篇 sqlserver2022詳細安裝步驟
    話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...
  • .NET 開源高性能 MQTT 類庫
    前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog文檔翻譯系列（六） - 可用的接收器、增強器、格式化輸出
    Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...
  • 警惕 Visual Studio 屬性求值副作用導致邏輯不符合預期
    目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • [使用目前最新版]HybridCLR6.9.0+YooAsset2.2.4實現純C# Unity熱更新方案 (一)
    1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...
  • 在 ASP.NET Core Web API 中使用操作篩選器統一處理通用操作
    本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...
  • 第28篇 如何.net中實現高效可靠數據同步api
    通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...
所有分類