綠幕摳圖是影視制作程序中常見的技術手段,常用于視頻中摳除并替換背景,通過后期加工實作視頻剪輯制作的更多可能性,然而,綠幕摳圖技術制作成本費時費力,無法應用于日常生活,
華為視頻編輯服務近期上線目標分割能力,可通過AI智能摳圖精細化分割視頻中的目標物體,并且不局限于特定的物體類別,在主體明確、背景相對簡單的視頻中進行主體和背景的分割,可以取得不錯的處理效果,
應用場景
目標分割能力多應用于視頻直播、在線教育、論壇會議等場景,比如,在賣貨直播的場景中,可以將直播背景替換成商品詳情頁的輪播畫面,便于用戶及時了解商品;在線上論壇或者視頻會議中,將背景替換成PPT內容或者辦公場景,營造學習辦公的嚴肅氛圍,同樣,目標分割能力也可滿足用戶日常趣味剪輯,用戶可以通過目標分割能力剪輯人像視頻,然后將背景切換各國名景,足不出戶便能實作“周游世界”,
除了更換視頻背景,目標分割能力還可應用于影視播放,通過目標摳圖,避免彈幕遮擋劇情主體,優化用戶觀看體驗,結合其他技術能力,還可以將分割后的目標物體進行復制和洗掉,甚至調整目標物體的動作時間,打造更具創意的視頻作品,
實作原理
那么,目標分割能力是怎么實作的呢?
首先,用戶需要選擇目標物體,然后再進行AI目標分割,通過給定視頻第一幀影像需要分割目標物體的對應掩碼,AI模型會自動在后續每一幀的視頻幀中匹配這個物體并嘗試分割出來,并且,模型將會保存中間幀分割效果好的結果掩碼與第一幀的掩碼資訊相結合,在后續視頻幀中進行匹配,可以精準勾勒目標物體的邊緣細節,進一步提升目標分割的準確度,
DEMO演示

集成方式
1. 開發準備
詳細準備步驟可參考華為開發者聯盟官網
2. 編輯工程集成
2.1 設定應用的鑒權資訊
可以通過api_key或者Access Token來設定應用鑒權資訊,
通過setAccessToken方法設定Access Token,在應用啟動時初始化設定一次即可,無需多次設定,
MediaApplication.getInstance().setAccessToken("your access token");
通過setApiKey方法設定api_key,在應用啟動時初始化設定一次即可,無需多次設定,
MediaApplication.getInstance().setApiKey("your ApiKey");
2.2設定唯一標識ID,即License ID,
License ID是進行管控的有效憑證,您要保證設定License ID的唯一性,
MediaApplication.getInstance().setLicenseId("License ID");
2.2.1初始化Editor運行環境
創建編輯工程,需要首先創建Editor物件并初始化其運行環境,當離開編輯工程時,應釋放Editor實體,
(1) 創建Editor物件
HuaweiVideoEditor editor = HuaweiVideoEditor.create(getApplicationContext());
(2) 指定預覽視窗的布局位置
預覽視窗負責視頻影像畫面的渲染,由視頻編輯原子能力SDK內部創建SurfaceView來實作,在創建視窗之前,需要在您的App中指定預覽視窗的布局位置,
<LinearLayout
android:id="@+id/video_content_layout"
android:layout_
android:layout_height="0dp"
android:background="@color/video_edit_main_bg_color"
android:gravity="center"
android:orientation="vertical" />
// 指定預覽視窗
LinearLayout mSdkPreviewContainer = view.findViewById(R.id.video_content_layout);
// 設定預覽視窗承載的布局
editor.setDisplay(mSdkPreviewContainer);
(3) 初始化運行環境,如果License鑒權失敗,會拋出LicenseException,
當Editor物件創建之后,此時還沒有占用實際的系統資源,需要手動選擇其環境初始化的時機,此時視頻編輯原子能力SDK內部會創建必須的執行緒和定時器等,
try {
editor.initEnvironment();
} catch (LicenseException error) {
SmartLog.e(TAG, "initEnvironment failed: " + error.getErrorMsg());
finish();
return;
}
3. “目標分割”能力集成
// 初始化目標分割AI引擎
videoAsset.initSegmentationEngine(new HVEAIInitialCallback() {
@Override
public void onProgress(int progress) {
// 初始化進度
}
@Override
public void onSuccess() {
// 初始化成功
}
@Override
public void one rror(int errorCode, String errorMessage) {
// 初始化失敗
}
});
// 初始化成功后,選擇需要分割的目標進行分割,回傳選擇分割目標的的處理結果
// bitmap包含需要分割的目標的視頻幀圖片;timeStamp為視頻幀圖片在時間線上的時間戳;points為基于視頻幀圖片的坐標點集合,左上角為原點坐標,坐標點應位于需要分割的目標內,且個數建議大于等于2,需根據坐標點軌跡來確定選擇的目標
int result = videoAsset.selectSegmentationObject(bitmap, timeStamp, points);
// 目標分割的處理結果成功后,添加目標分割AI特效
videoAsset.addSegmentationEffect(new HVEAIProcessCallback() {
@Override
public void onProgress(int progress) {
// 目標分割AI特效處理進度
}
@Override
public void onSuccess() {
// 目標分割AI特效處理成功
}
@Override
public void one rror(int errorCode, String errorMessage) {
// 目標分割AI特效處理失敗
}
});
// 中斷目標分割AI特效處理
videoAsset.interruptSegmentation();
// 移除目標分割AI特效
videoAsset.removeSegmentationEffect();
// 釋放目標分割AI引擎
videoAsset.releaseSegmentationEngine();
了解更多詳情>>
訪問華為開發者聯盟官網
獲取開發指導檔案
華為移動服務開源倉庫地址:GitHub、Gitee
關注我們,第一時間了解 HMS Core 最新技術資訊~
轉載請註明出處,本文鏈接:https://www.uj5u.com/yidong/500889.html
標籤:Android
上一篇:http://www.hdjc8.com/staticPhotoshop/62da9ea249de945a2ace4101.html
