主頁 >  其他 > 探討AIGC的崛起歷程,淺析其背后技術發展

探討AIGC的崛起歷程,淺析其背后技術發展

2023-05-11 07:47:45 其他

摘要:本文主要討論了AIGC(人工智能生成內容)的發展歷程、現狀、應用,淺析其背后技術發展、與華為云的聯系,以及面臨的挑戰和展望,

本文分享自華為云社區《AIGC:人工智能生成內容的崛起與未來展望》,作者:杜甫蓋房子,

AIGC被認為是繼專業生成內容(PGC)和用戶生成內容(UGC)之后,利用人工智能技術自動生成內容的新型生產方式,隨著技術的發展,如Stable Diffusion和ChatGPT等領先技術的出現,AIGC逐漸在文字、影像、音樂、視頻、3D等多種形式內容的生產上發揮作用,然而,AIGC的快速發展同時也面臨一系列挑戰,包括技術、安全、合規等方面,因此,我們既要擁抱變化,也要直視挑戰,以期在不久的未來,AIGC能夠在更多領域大放異彩,開啟云計算產業鏈新一輪的景氣周期,

發展歷程

AIGC(Artificial Intelligence Generated Content),國內產學研各界對它的理解是“繼專業生成內容(Professional Generated Content,PGC)和用戶生成內容(User Generated Content,UGC)之后,利用人工智能技術自動生成內容的新型生產方式”,

2022.09.23紅杉美國發表了文章:《Generative AI: A Creative New World》,認為AIGC將帶來新一輪的范式轉移,2022.11.30 ChatGPT發布,用戶飛速增長,AIGC走進了大眾視野中,無論是技術作業者、內容生產作業者還是營銷推廣作業者,都應該對AIGC有一定的了解,

AI的發展大致可以劃分為三個階段,我們用一張圖簡單展示一下有關AICG的發展歷程與典型事件:

參考:中國資訊通信研究院

目前,AIGC正處于蓬勃發展的時期,大型企業加強投資布局,發布多領域的預訓練模型,如谷歌發布了BERT、Imagen等模型,Facebook發布了OPT-175B、M2M-100等模型,微軟投資OpenAI,發布了GPT4、Codex等模型,百度也在大模型領域深耕,發布了文心系列模型,此外,創業企業融資高漲,2022年10月,Stability AI獲得約1億美元融資,估值高達10億美元,Jasper拿下1.25億美元A輪融資,估值15億美元,在應用側,熱點AIGC應用的用戶數量呈指數級增長,例如ChatGPT用戶破億僅用了兩個月,我們認為,AIGC 技術正逐漸滲透到人們的生活、作業場景中,AIGC技術發展與產業形態已初步形成,處于方興未艾大有可為之時,

現狀及應用

AIGC的發展依托于底層算力、演算法的發展,從生成對抗網路(Generative Adversarial Network,GAN)開始,AI生成高質量內容的能力快速提升,一些具有代表性的演算法模型的發展歷程如下:

圖源:《A Comprehensive Survey of AI-Generated Content (AIGC): A History of Generative AI from GAN to ChatGPT》

依托于這些演算法,不同任務領域內涌現了一批預訓練模型與應用:

從技術場景上看,AIGC逐步在文字、影像、音樂、視頻、3D等多種形式內容的生產上發揮作用,在新聞稿、財報等結構化寫作場景有較好的表現,在影像生成領域可以在細粒度上遵循人類指導完成指定主題內容的創作,如Copilot等生產力工具也紛紛涌現,

從更多的延展場景上看,AIGC可以有更廣泛的應用,如合成資料,生成虛構但與目標場景保持一致屬性的虛擬資料,從而避免AI一直為人詬病的資料偏見與隱私泄露問題;基于AIGC的虛擬陪伴也會帶來更多的社會價值,已經有一些企業將人工智能技術應用到精神健康的數字診療服務上,為臨床患者和廣大心理亞健康人群提供高質量、低成本、個性化、全天候的情緒支持、心理咨詢和干預方案,

技術淺析

這一波火爆的AIGC技術中,Stable Diffusion 開源模型與 ChatGPT 分別引領了影像與文本生成領域的熱潮,AIGC也逐漸從簡單的降本增效(如結構化寫作)向創造額外價值(如AI繪畫)轉移,我們將對這兩個模型的發展與其中涉及到的影像與文本相關技術進行簡單介紹,

Stable Diffusion

AI繪畫在過去的一年中一直是AIGC領域的熱點話題,隨著Stable Diffusion的開源,眾多不同風格的模型紛紛涌現,而高效引數微調方法LoRA與精細控制生成內容的ControlNet的發布,更進一步讓AI繪畫發展為產業可用的解決方案,

Stable Diffusion從實作原理上,可以通俗的理解為這幾步:

  1. 為了提升模型訓練推理效率,捕捉高維資訊,Stable Diffusion首先使用影像編碼器,將影像從像素空間壓縮到低維度的潛在空間;
  2. 使用如CLIP的文本編碼器,將描述文本轉換為文本向量;
  3. 在低維度的潛在空間中,基于一些條件(如文本向量)進行Diffusion程序;
  4. 使用影像解碼器將潛在空間中的向量轉換回像素空間來生成最終影像,

圖源:《The Illustrated Stable Diffusion》

我們對Stable Diffusion中涉及兩個關鍵概念:CLIP與Diffusion進行簡單解釋:

  1. CLIP(Contrastive Language–Image Pre-training)是 OpenAI 在 2021 年提出的圖文對訓練的多模態模型,可以通俗的理解,CLIP可以判斷圖片和文本的相似度,預訓練的CLIP模型擁有建立文本潛在空間與圖片潛在空間對應關系的能力,使用CLIP對文本進行編碼可以實作文字描述控制影像生成的需求,
  2. Diffusion Model是 AI 繪畫中非常常用的模型,在訓練程序中,正向程序通過隨時間逐步向圖片中加噪的方式,讓圖片變成純噪點圖;逆向程序則是學習如何將一張噪點圖恢復為高清圖,在推理時,網路會隨機初始化一個噪聲向量,訓練好的Diffusion Model在條件向量(如文本向量)的控制下逐漸恢復出影像向量,再通過影像解碼器恢復為像素影像,

ChatGPT

ChatGPT (GPT,Generative Pre-training Transformer) 是一個能夠理解人類語言并做出相應反應的人工智能系統,在ChatGPT發布之前,GPT系列大模型已經經過幾輪迭代,

然而,之前的模型中存在一個典型的對齊問題,即大模型生成的回應不一定符合用戶意圖,產生問題的原因是,從本質上講,語言模型訓練的目標是預測下一個詞,而不是按照用戶意圖來生成,為了解決這個問題,在ChatGPT的訓練程序中引入了基于人類反饋的強化學習(Reinforcement Learning from Human Feedback,RLHF)方法,通過手動收集反饋資料 -> 訓練獎勵模型 -> 強化學習的訓練流程提升了模型理解人類思維的準確性,可以通過一個簡單的圖示來展示這一訓練程序:

ChatGPT多數令人驚艷的行為,如回應人類指令,利用思維鏈進行復雜推理等都是RLHF的產物 ,

參考:How does GPT Obtain its Ability? Tracing Emergent Abilities of Language Models to their Sources

ChatGPT的成功,在技術上可以給我們帶來幾點啟示:

  1. 細致的資料工程是模型成功必不可少的作業;
  2. 監督微調和強化學習是矯正模型生成內容的關鍵技術,

AIGC與華為云

目前,AIGC的市場結構可以粗略的劃分如下:

AIGC與云聯系緊密,AIGC應用依托于大模型的能力構建,而大模型的開發與運行都依賴云側充足的算力,以ChatGPT為例,根據OpenAI報告, ChatGPT是在InstructGPT 基礎上微調而來,引數量約13億,因此預計ChatGPT訓練所需算力為27.5PFlop/s-day,如果用NVIDIA V100訓練需要220天,可見,AIGC應用浪潮對算力的需求是前所未有的,這將迅速拉動云計算需求,知名投資機構a16z在報告中闡述,幾乎所有的AIGC相關應用都或多或少依賴云端的算力,因此a16z預測AIGC市場的大量資金最終流向了基礎設施公司,平均來說,AIGC應用開發公司將大約20-40% 的收入用于模型推理與微調,而這部分通常直接支付給算力提供的云廠商,

算力作為AIGC的重要支撐,是影響AIGC發展的核心要素;除此之外,構筑在算力底座上的AI平臺,又能直接影響AIGC應用的開發和運行效率,華為云擁有全堆疊全場景的AI能力,基于鯤鵬、昇騰的算力底座,提供了穩定高效的AI開發平臺ModelArts,從資料處理到模型訓練、模型推理,可以大幅提升AI開發效率,

此外,在ModelArts的資產社區AI Gallery中,也有很多AIGC相關的低門檻案例,如一鍵運行的AI作畫案例,已有18,000+的累計運行:

如果對AIGC感興趣可以到AI Gallery體驗相關案例,

挑戰及展望

隨著AIGC的快速發展,一些問題也逐漸浮現,在技術上,目前語言模型是基于統計的,這一機制導致回答偏差的存在,進而導致虛假資訊傳播的法律風險;數理領域中的生成內容錯誤較多,無法應用到銀行、醫院等專業性強的領域;模型仍不可解釋與不可控,可能存在后門攻擊、資料中毒、訓練資料泄露等問題,在安全合規上,AIGC模型在訓練程序中的資料使用合規問題、生成內容的知識產權問題,甚至是訓練推理程序中帶來的碳排放問題等,仍然存在很多挑戰,

身處人工智能的下一個時代,我們不僅要擁抱變化,也要直視挑戰,在技術方面,如何理解大模型的基本作業機制對模型安全與繼續發展至關重要;除此之外,大模型訓練與遷移流程優化是AI走向通用人工智能的關鍵,在技術發展的同時,AIGC的合規與治理應該引起重視,相信在不久的未來,AIGC將在更多領域大放異彩,也將開啟云計算產業鏈新一輪的景氣周期,

 

點擊關注,第一時間了解華為云新鮮技術~

轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/552130.html

標籤:其他

上一篇:無需代碼繪制人工神經網路ANN模型結構圖的方法

下一篇:返回列表

標籤雲
其他(158799) Python(38125) JavaScript(25413) Java(18025) C(15225) 區塊鏈(8264) C#(7972) AI(7469) 爪哇(7425) MySQL(7175) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5871) 数组(5741) R(5409) Linux(5338) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4570) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2432) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) .NET技术(1972) 功能(1967) Web開發(1951) HtmlCss(1935) python-3.x(1918) 弹簧靴(1913) C++(1913) xml(1889) PostgreSQL(1875) .NETCore(1860) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • 網閘典型架構簡述

    網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

    uj5u.com 2020-09-10 02:00:44 more
  • 如何從xshell上傳檔案到centos linux虛擬機里

    如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

    uj5u.com 2020-09-10 02:00:47 more
  • 一、SQLMAP入門

    一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

    uj5u.com 2020-09-10 02:00:50 more
  • Metasploit 簡單使用教程

    metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

    uj5u.com 2020-09-10 02:00:53 more
  • 游戲逆向之驅動層與用戶層通訊

    驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

    uj5u.com 2020-09-10 02:00:56 more
  • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

    北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

    uj5u.com 2020-09-10 02:01:03 more
  • 【CTF】CTFHub 技能樹 彩蛋 writeup

    ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

    uj5u.com 2020-09-10 02:04:05 more
  • 02windows基礎操作

    我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

    uj5u.com 2020-09-10 02:04:18 more
  • 03.Linux基礎操作

    我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

    uj5u.com 2020-09-10 02:04:30 more
  • 05HTML

    01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

    uj5u.com 2020-09-10 02:04:36 more
最新发布
  • 探討AIGC的崛起歷程,淺析其背后技術發展

    摘要:本文主要討論了AIGC(人工智能生成內容)的發展歷程、現狀、應用,淺析其背后技術發展、與華為云的聯系,以及面臨的挑戰和展望。 本文分享自華為云社區《AIGC:人工智能生成內容的崛起與未來展望》,作者:杜甫蓋房子。 AIGC被認為是繼專業生成內容(PGC)和用戶生成內容(UGC)之后,利用人工智 ......

    uj5u.com 2023-05-11 07:47:45 more
  • 無需代碼繪制人工神經網路ANN模型結構圖的方法

    本文介紹幾種基于在線網頁或軟體的、不用代碼的神經網路模型結構可視化繪圖方法。 之前向大家介紹了一種基于Python第三方ann_visualizer模塊的神經網路結構可視化方法,大家可以直接點擊文章Python繪制神經網路模型圖進行查看;這一方法可以對Dense隱藏層以及MaxPooling層、Dr ......

    uj5u.com 2023-05-11 07:47:22 more
  • 蟻景科技受邀參加中國刑事警察學院學科專業建設研討會

    5月7日,湖南蟻景科技有限公司受邀出席中國刑事警察學院公安資訊技術與情報學院學科專業建設研討會。本次研討會由中國刑事警察學院主辦,公安資訊技術與情報學院、教育部網路安全與執法專業虛擬教研室、遼寧網路安全執法協同創新中心、網路安全執法與視頻偵查遼寧省重點實驗室協辦。網路安全與執法專業、公安視聽技術專業... ......

    uj5u.com 2023-05-11 07:47:03 more
  • 2分鐘快速上手流水線的創建與運行

    摘要:通過流水線新手體驗模板,體驗一條含代碼檢查、構建階段、部署發布常用流水線的創建與執行。 本文分享自華為云社區《2分鐘快速上手流水線的創建與運行》,作者:華為云PaaS服務小智。 體驗簡介 涉及服務簡介 軟體持續交付流水線CodeArts Pipeline是華為云軟體開發生產線CodeArts的 ......

    uj5u.com 2023-05-11 07:46:29 more
  • 波場(Tron) 網頁版錢包開源

    之前做區塊鏈專案太難了,很多組件、工具沒有開源專案,需要自己寫很麻煩。 我整理了幾個自己給公司開發專案的時候,分離出來的幾個工具,已經上傳到 Gihub 了,感覺瀏覽量還行,在這里給園子里的朋友分享下。 1、本地網頁版本錢包: 為了方便管理專案里所有用戶的私鑰,用一套助記詞派生出所有私鑰,這樣每個用 ......

    uj5u.com 2023-05-11 07:46:21 more
  • AI天后,在線飆歌,人工智能AI孫燕姿模型應用實踐,復刻《遙遠的歌》

    忽如一夜春風來,亞洲天后孫燕姿獨特而柔美的音色再度響徹華語樂壇,只不過這一次,不是因為她出了新專輯,而是人工智能AI技術對于孫燕姿音色的完美復刻,以大江灌浪之勢對華語歌壇諸多經典作品進行了翻唱,還原度令人咋舌,如何做到的? 本次我們借助基于Python3.10的開源庫so-vits-svc,讓亞洲天 ......

    uj5u.com 2023-05-11 07:44:33 more
  • 張量(Tensor)、標量(scalar)、向量(vector)、矩陣(matrix)

    張量(Tensor):Tensor = multi-dimensional array of numbers 張量是一個多維陣列,它是標量,向量,矩陣的高維擴展 ,是一個資料容器,張量是矩陣向任意維度的推廣 注意,張量的維度(dimension)通常叫作軸(axis), 張量軸的個數也叫作階(ran ......

    uj5u.com 2023-05-11 07:44:09 more
  • OCR 文字檢測,可微的二值化(Differentiable Binarization --- DB)

    百度飛槳(PaddlePaddle) - PaddleOCR 文字識別簡單使用 影像二值化 影像二值化( Image Binarization),指將影像上的像素點灰度值設為0或255,將整個影像呈現出明顯的黑白效果程序,二值影像每個像素只有兩種取值:要么純黑,要么純白 影像二值化,有利于影像的進一 ......

    uj5u.com 2023-05-11 07:43:29 more
  • 探討AIGC的崛起歷程,淺析其背后技術發展

    摘要:本文主要討論了AIGC(人工智能生成內容)的發展歷程、現狀、應用,淺析其背后技術發展、與華為云的聯系,以及面臨的挑戰和展望。 本文分享自華為云社區《AIGC:人工智能生成內容的崛起與未來展望》,作者:杜甫蓋房子。 AIGC被認為是繼專業生成內容(PGC)和用戶生成內容(UGC)之后,利用人工智 ......

    uj5u.com 2023-05-11 07:42:53 more
  • 無需代碼繪制人工神經網路ANN模型結構圖的方法

    本文介紹幾種基于在線網頁或軟體的、不用代碼的神經網路模型結構可視化繪圖方法。 之前向大家介紹了一種基于Python第三方ann_visualizer模塊的神經網路結構可視化方法,大家可以直接點擊文章Python繪制神經網路模型圖進行查看;這一方法可以對Dense隱藏層以及MaxPooling層、Dr ......

    uj5u.com 2023-05-11 07:42:15 more