綠幕摳圖是影視製作過程中常見的技術手段，常用於視頻中摳除並替換背景，通過後期加工實現視頻剪輯製作的更多可能性。然而，綠幕摳圖技術製作成本費時費力，無法應用於日常生活。 華為視頻編輯服務近期上線目標分割能力，可通過AI智能摳圖精細化分割視頻中的目標物體，並且不局限於特定的物體類別，在主體明確、背景相對 ...
綠幕摳圖是影視製作過程中常見的技術手段，常用於視頻中摳除並替換背景，通過後期加工實現視頻剪輯製作的更多可能性。然而，綠幕摳圖技術製作成本費時費力，無法應用於日常生活。
華為視頻編輯服務近期上線目標分割能力，可通過AI智能摳圖精細化分割視頻中的目標物體，並且不局限於特定的物體類別，在主體明確、背景相對簡單的視頻中進行主體和背景的分割，可以取得不錯的處理效果。
應用場景
目標分割能力多應用於視頻直播、線上教育、論壇會議等場景。比如，在賣貨直播的場景中，可以將直播背景替換成商品詳情頁的輪播畫面，便於用戶及時瞭解商品；線上上論壇或者視頻會議中，將背景替換成PPT內容或者辦公場景，營造學習辦公的嚴肅氛圍。同樣，目標分割能力也可滿足用戶日常趣味剪輯，用戶可以通過目標分割能力剪輯人像視頻，然後將背景切換各國名景，足不出戶便能實現“周游世界”。
除了更換視頻背景，目標分割能力還可應用於影視播放，通過目標摳圖，避免彈幕遮擋劇情主體，優化用戶觀看體驗。結合其他技術能力，還可以將分割後的目標物體進行複製和刪除，甚至調整目標物體的動作時間，打造更具創意的視頻作品。
實現原理
那麼，目標分割能力是怎麼實現的呢？
首先，用戶需要選擇目標物體，然後再進行AI目標分割。通過給定視頻第一幀圖像需要分割目標物體的對應掩碼，AI模型會自動在後續每一幀的視頻幀中匹配這個物體並嘗試分割出來。並且，模型將會保存中間幀分割效果好的結果掩碼與第一幀的掩碼信息相結合，在後續視頻幀中進行匹配，可以精準勾勒目標物體的邊緣細節，進一步提升目標分割的準確度。
DEMO演示
集成方式
1. 開發準備
詳細準備步驟可參考華為開發者聯盟官網
2. 編輯工程集成
2.1 設置應用的鑒權信息
可以通過api_key或者Access Token來設置應用鑒權信息。
通過setAccessToken方法設置Access Token，在應用啟動時初始化設置一次即可，無需多次設置。
MediaApplication.getInstance().setAccessToken("your access token");
通過setApiKey方法設置api_key，在應用啟動時初始化設置一次即可，無需多次設置。
MediaApplication.getInstance().setApiKey("your ApiKey");
2.2設置唯一標識ID，即License ID。
License ID是進行管控的有效憑證，您要保證設置License ID的唯一性。
MediaApplication.getInstance().setLicenseId("License ID");
2.2.1初始化Editor運行環境
創建編輯工程，需要首先創建Editor對象並初始化其運行環境。當離開編輯工程時，應釋放Editor實例。
(1) 創建Editor對象
HuaweiVideoEditor editor = HuaweiVideoEditor.create(getApplicationContext());
(2) 指定預覽視窗的佈局位置
預覽視窗負責視頻圖像畫面的渲染，由視頻編輯原子能力SDK內部創建SurfaceView來實現。在創建視窗之前，需要在您的App中指定預覽視窗的佈局位置。
<LinearLayout
android:id="@+id/video_content_layout"
android:layout_width="0dp"
android:layout_height="0dp"
android:background="@color/video_edit_main_bg_color"
android:gravity="center"
android:orientation="vertical" />
// 指定預覽視窗
LinearLayout mSdkPreviewContainer = view.findViewById(R.id.video_content_layout);
// 設置預覽視窗承載的佈局
editor.setDisplay(mSdkPreviewContainer);
(3) 初始化運行環境，如果License鑒權失敗，會拋出LicenseException。
當Editor對象創建之後，此時還沒有占用實際的系統資源，需要手動選擇其環境初始化的時機，此時視頻編輯原子能力SDK內部會創建必須的線程和定時器等。
try {
editor.initEnvironment();
} catch (LicenseException error) {
SmartLog.e(TAG, "initEnvironment failed: " + error.getErrorMsg());
finish();
return;
}
3. “目標分割”能力集成
// 初始化目標分割AI引擎
videoAsset.initSegmentationEngine(new HVEAIInitialCallback() {
@Override
public void onProgress(int progress) {
// 初始化進度
}
@Override
public void onSuccess() {
// 初始化成功
}
@Override
public void onError(int errorCode, String errorMessage) {
// 初始化失敗
}
});
// 初始化成功後，選擇需要分割的目標進行分割，返回選擇分割目標的的處理結果
// bitmap包含需要分割的目標的視頻幀圖片；timeStamp為視頻幀圖片在時間線上的時間戳；points為基於視頻幀圖片的坐標點集合，左上角為原點坐標，坐標點應位於需要分割的目標內，且個數建議大於等於2，需根據坐標點軌跡來確定選擇的目標
int result = videoAsset.selectSegmentationObject(bitmap, timeStamp, points);
// 目標分割的處理結果成功後，添加目標分割AI特效
videoAsset.addSegmentationEffect(new HVEAIProcessCallback() {
@Override
public void onProgress(int progress) {
// 目標分割AI特效處理進度
}
@Override
public void onSuccess() {
// 目標分割AI特效處理成功
}
@Override
public void onError(int errorCode, String errorMessage) {
// 目標分割AI特效處理失敗
}
});
// 中斷目標分割AI特效處理
videoAsset.interruptSegmentation();
// 移除目標分割AI特效
videoAsset.removeSegmentationEffect();
// 釋放目標分割AI引擎
videoAsset.releaseSegmentationEngine();
瞭解更多詳情>>
訪問華為開發者聯盟官網
獲取開髮指導文檔
華為移動服務開源倉庫地址：GitHub、Gitee
關註我們，第一時間瞭解 HMS Core 最新技術資訊~
