本文將主要討論知識圖譜在風控領域的圖譜構建過程。enjoy~
一.知識圖譜和金融領域簡述
什么是知識圖譜?
借鑒其中一個理解:
知識圖譜主要的目標是用來描述真實世界中間存在的各種實體和概念,以及它們之間的關聯關系。
具體理論知識就不在此贅述,對于這個抽象的概念會有一篇文章來列舉一個代表性的例子。
知識圖譜起源于語義網絡,最初由Google提出用與優化搜索結果,發展至今已經應用于各個垂直化領域。從商業概念上,知識圖譜可分為“通用知識圖譜”和“行業知識圖譜”。通用知識圖譜顧名思義是面向全領域的,強調的是“廣度”,比較著名的知識庫有Freebase,Wikidata,Yago,DBPedia等。
行業知識圖譜是面向特定的垂直領域,對于數據有更嚴格的前置數據模式和更準確的準確度要求,強調的是“深度”。兩者之間的主要區別在于前者是“自底向上”構建的知識庫,后者是“自頂向下”構建的知識庫。
金融領域數據是典型的具有”4V”特征的大數據。進一步,金融領域是最能把數據變現的行業。金融業類別業非常廣,大類主要包括:銀行類、投資類、保險類等。再小粒度可分為:貨幣、債券、基金、信托等資管計劃、要素市場、征信貸款等。知識圖譜在金融領域的應用主要包括:風控、征信、審計、反欺詐、數據分析、自動化報告等,本文主要討論知識圖譜在小微風控的應用。
DeFi平臺Earnity被指控在Cred破產中進行知識產權欺詐:金色財經報道,DeFi初創公司 Earnity 已卷入加密借貸平臺 Cred 的法律案件中,該平臺于 2020 年 11 月申請破產,負債高達 5 億美元。一項新的法院動議指控 Earnity 隱藏與 Cred 的聯系以竊取知識產權 (IP) 。法庭文件指出,前 Cred 高管“秘密合謀”成立了 Earnity,新的 DeFi 公司在其實際擁有人 Dominic Carosa 的領導下中購買了 Cred 的電子產品、計算機和其他資產,但并未披露其與 Cred 的關系。為 Cred 貸方利益行事的信托表示,正在調查前 Cred 高管是否“走私”知識產權給 Earnity,然后通過購買電子產品來掩蓋盜竊行為。該信托對 Cred 的所有 IP 擁有合法權利,要求法院強制 Earnity 遵守法院傳票以獲取更多信息,并希望獲得相關法律費用的經濟補償。(Coindesk)[2022/1/4 8:22:23]
風控是指如何當項目或企業在一定的風險的環境里,把風險減至最低的管理過程。它的基本程序包括風險識別、風險估測、風險評價、風險控制和風險管理效果評價等環節。
風險控制的最大兩個分類為企業風險監控和個人貸款審核。企業數據包括:企業基礎數據、投資關系、任職關系、企業專利數據、企業招投標數據、企業招聘數據、企業訴訟數據、企業失信數據、企業新聞數據。個人貸款的數據包括:個人的基本信息、行為信息、信用信息、社交信息、消費信息等。
國家知識產權局數據庫中數字貨幣相關的知識產權已有694篇:除四大行,阿里巴巴、騰訊等也參與數字貨幣的研發測試。根據國家知識產權局數據庫梳理發現,數字貨幣相關的知識產權已有694篇。其中,“央行系”機構申請最多,共計84篇,支付寶申請了5篇。(21世紀經濟報道)[2020/4/18]
本文將主要討論知識圖譜在風控領域的圖譜構建過程。
二.風控的知識圖譜構建
知識圖譜的邏輯結構分為兩個層次:數據層和模式層。
在知識圖譜的數據層,數據如果以『實體-關系-實體』或者『實體-屬性-值』作為基本表達方式,我們把這種表達方式稱為“三元組”,則存儲在圖數據庫中的所有數據將構成龐大的實體關系網絡,形成知識的圖譜。
模式層在數據層之上,是知識圖譜的核心,在模式層存儲的是經過提煉的知識,通常采用本體庫來管理知識圖譜的模式層,借助本體庫對公理、規則和約束條件的支持能力來規范實體、關系以及實體的類型和屬性等對象之間的聯系。本體庫在知識圖譜中的地位相當于知識庫的模具,擁有本體庫的知識庫冗余知識較少。
這里涉及知識圖譜的另外一個重要概念是“本體(Ontology)”。本體的概念最早起源于哲學領域,指的是對客觀存在系統的解釋和說明。在眾多概念中,維基上的定義更加通俗些:本體實際上就是對特定領域之中某套概念及其相互之間關系的形式化表達。具體到金融風控領域,本體目的就是對風控領域的知識術語進行分類,同時規定各個分類之間的關系和它們自身的屬性。
動態 | 波場TRON網絡即將進行零知識證明匿名交易公測:據官方最新消息,波場TRON網絡即將進行零知識證明匿名交易公測,現在誠邀社區參與MPC過程,參與者越多,匿名交易越安全。通過參與MPC,用戶可以將貢獻永久的保存在TRON網絡中。參考見原文鏈接。[2019/12/19]
本體可以采用人工編輯的方式手動構建,也可以以數據驅動的自動化方式構建本體。自動化構建包含3個階段:實體并列關系相似度計算、實體上下位關系抽取、本體的生成。在領域本體構建的實際工程中,領域本體所涉及的實體類型非常有限,與其花很高的成本去做自動化,不如人工構建本體。所以本章節也主要討論風控領域的手動本體構建過程。
本體和知識圖譜的構建方法有很多,這里分享一個在實際工作中初略的知識圖譜構建流程:
本體庫構建;知識圖譜構建;知識圖譜應用。
提到知識圖譜通常認為重點在于算法和開發,實際知識圖譜的構建和傳統關系型數據庫的構建情況一樣,重點在于具體業務流程的理解和本體的設計,知識圖譜的構建過程的工作占比如下:
三.風控的本體構建
如前所述,構建風控領域知識圖譜的首要工作是構建本體模型,即定義行業的通用概念為實體,以及實體之間的關系。
動態 | 身陷刑事調查的區塊鏈公司Vanbex出售知識產權:加拿大區塊鏈公司Vanbex陷入了刑事調查和多起訴訟案,目前已將其知識產權出售給位于多倫多的加密經紀公司Hyperion,但價格未公開。Vanbex表示,通過其正在被調查的ICO發布的FUEL代幣仍將用于支付交易費、API集成以及在Hyperion和Vanbex區塊鏈技術產品之間的服務。
(coindesk)[2019/9/6]
信貸最核心的主體就是貸款申請者,貸款申請者可能是個人也可能是公司,通過申請者的基本信息、行為信息、經營狀況、社會關系等評估貸款的風險。因此可以列舉信貸相關的核心實體為:人、企業、銀行賬戶、銀行、抵押物、申請事件、訴訟事件等,以及基本信息實體:電話、郵件、地址等。實體與實體之間的關系為親屬、任職、所有權、事件參與方等。如圖所示為一個簡化版的信貸風控本體模型。
為什么要將人和公司的電話地址設計為單獨的實體節點,是基于風控的業務關注點,當兩個貸款申請者有相同的電話或者地址時候,可能就是一個需要關注的風險點。把這兩個信息作為單獨的節點,基于圖譜理論,當統計“電話”類型節點的邊數量超過一個就能很方便找出高風險申請者。
本體構建完成后,需要對比實際業務對本體進行驗證,確保本體能夠正確描述當前業務,并且包含了所有的業務流程。
聲音 | Universa.io創始人:莫斯科區塊鏈創新集群知識產權評估機制:據塔斯社消息,區塊鏈平臺Universa.io創始人Aleksandr Borodich表示,總部位于莫斯科的區塊鏈創新集群需要一種知識產權評估機制。其認為,該機制將促進潛在發明的融資。2019年2月初,莫斯科市政府宣布,計劃于2019年夏季推出基于區塊鏈的城市創新集群。該平臺創建是為了在一個平臺上統一分散的城市結構:IT公司、企業孵化器、技術園區、學術機構,以發展研究和生產潛力。[2019/2/18]
四.風控的圖譜構建
知識圖譜的構建是圖譜應用的前提,構建的主要工作是把數據從不同的數據源中按照本體模型所規定的規則抽取出來。對于垂直領域的知識圖譜來說,數據的主要來源是是業務本身的數據,其通常是機構自己的私有數據以結構化的形式存儲。通過ETL處理,將數據抽取轉換為圖譜數據。圖譜數據的存儲形式目前有兩種:基于RDF等存儲和圖數據庫存儲。兩者的比較如下所示:
RDF圖數據庫存儲三元組節點和關系擁有屬性符合W3C標準圖的遍歷和擴展方便有標準的推理引擎擁有事務管理數據可移植性高工程化程度高多用于學術場景可視化效果好。
在實際工程應用中主要采用圖庫的方式對知識圖譜進行存儲,當前比較流行的圖數據庫為Neo4j,本篇不再詳細介紹圖數據庫和Neo4j,重點在于如何根據本體將數據映射成為Neo4j要求的數據格式。Neo4j提供了多種加載數據的方式,對于小規模數據,可以采用加載CSV的方式進行,CSV的格式要求如Neo4j官網的操作手冊所示。
假設數據源是關系型數據庫,其中中有三張表及其字段如下所示,company表中字段“legal_person”和“manager”是外鍵關聯到person表:
我們要從源數據中抽取出多個實體和多條關系,這里部分舉例如下:
實體:
personcompanyaccountbankphoneNoaddress
關系:
person–lsLegalPersonOf->companyperson–lsManagerOf->companyperson–isOwnerOf->accountaccount–belongsTo->bankperson–hasPhoneNo->phoneNocompany–hasAddress->address
根據Neo4j的要求將源數據進行ETL處理,映射成為Neo4j要求的CSV格式文件,簡單列舉如下:
person節點:
personId:ID,personName,:LABEL001,“personA”,person002,“personB”,person
法人關系:
:START_ID,:END_ID,:LABEL001,101,isLegalPersonOf002,102,isLegalPersonOf
五.圖譜的應用
當前,小微貸款和個人小額貸款還處于“蠻荒時代”,甚至出現了各種中介機構通過各種偽造的虛假信息幫助客戶申請貸款。所以對于放貸方而言,借貸風險控制面臨非常巨大的挑戰。
1.貸款申請方畫像
可以在圖譜中直接搜索某個具體的人名字或者公司名字,獲取該人或者公司的基礎信息畫像,如電話,地址,關聯方的信息。如圖所示:
2.關聯方探查
通過圖譜可以調查某個人或者某家申請貸款公司的關聯方信息。在貸款審核期間,申請貸款主體的關聯方信息中有借貸糾紛的訴訟事件,擔保方過多等可關注的風險點。在貸款發放后,有時出現貸款方失聯的情況,無法通過申請貸款時提交的信息聯系到借款方,可以通探尋更“深遠”的關聯方找到失聯的貸款方。
3.反欺詐調查
在實際場景中,有不少人利用各種渠道而來身份證進行貸款申請。還有公司通過循環轉賬等方式提供虛假的經營流水信息。通過知識圖譜可以識別以上風險點。如多個貸款申請人提供的身份證號嗎不同,但是卻有相同的聯系電話號嗎或者聯系地址。銀行作為借貸機構,可以調查申請人賬戶資金往來情況,識別是否存在循環轉賬等異常資金往來信息識別風險點。
在圖譜中,通過條件搜索指定的節點可以篩選調查風險節點,如:“電話號碼”節點的關聯方大于1的節點。
4.風險指標報告
在風控處理中,貸款風險比率是衡量商業銀行風險最重要的指標之一,主要包括不良貸款比率、貸款加權風險度、貸款分散化比率、不良貸款撥備覆蓋率等。將知識圖譜中貸款人節點和相關指標相結合,設定報警閾值,通過機器學習等技術,找到隱蔽的風險結構,指標特征,能夠快速找出相關責任方和其關聯方,形成報告供業務人員進行調。
總結
本文主要介紹了知識圖譜在風控中的應用和風控領域知識圖譜的構建方法。知識圖譜的構建前提是清晰的業務場景和良好的數據治理。很多著名的知識圖譜構建案例中,大部分時間都是用在數據治理和數據映射上。借用一句別處看來的話:
A“graph”—thatunderstandsreal-worldentitiesandtheirrelationshipstooneanother:things,notstrings。
本文由@Eric_Xie原創發布于人人都是產品經理。未經許可,禁止轉載。
題圖來自Pixabay,基于CC0協議
商業應用落地為什么這么難?主要的原因是基礎設施發展不完備,不具備承載大規模商業應用的能力。在傳統貨幣理論中存在“不可能三角”,即一國無法同時實現貨幣政策的獨立性、匯率穩定與資本自由流動,最多只能.
1900/1/1 0:00:00加拿大溫哥華金融機構CanaccordGenuityCapitalMarkets的研究人員最近發布了一份關于比特幣(Bitcoin,BTC)和加密貨幣市場的研究報告。有趣的是,他們略顯樂觀.
1900/1/1 0:00:00圖為美韓領導人會晤近日,據媒體報道,美韓兩國的防務協議即將到期,然而雙方卻并未談攏新的協議,駐韓美軍或將因此進一步削減,看來半島和平的大勢已經無法違逆了.
1900/1/1 0:00:00Bianews9月11日消息,金融科技和區塊鏈研究出版物Diar于2018年9月11日指出,加密貨幣的設計和表現可能使其不適合替代法定貨幣,尤其是在經濟和金融動蕩時期.
1900/1/1 0:00:00前天15日下午13點-14點,比特幣突然出現大幅拉升,價格從6395美元漲至7591美元,漲幅高達18.7%。其他主流幣也出現不同程度的漲幅,一開始還以為幣圈有啥突發消息.
1900/1/1 0:00:00提起馬云,大家都很熟悉。阿里巴巴集團主要創始人,現擔任阿里巴巴集團董事局主席、日本軟銀董事、TNC中國理事會主席兼全球董事會成員、華誼兄弟董事、生命科學突破獎基金會董事等等,他的頭銜多的小編已經.
1900/1/1 0:00:00