PAR:Paradigm：如何使用鏈上數據進行策略研究？_ETHER

原文標題：《UsingOn-ChainDataforPolicyResearch:Part1》

原文作者：BrendanMalone，Paradigm

原文編譯：Kxp，BlockBeats

I.引言

Crypto政策在制定時很少會用到真實且細化的數據，原因主要有以下三點：

1.新興技術領域的相關政策大多還停留在理論及定性分析層面，早期階段很少會使用到數據。

2.盡管鏈上數據全部開放透明，但要想訪問這些數據人們需要在短期內完成大量工作，即便對于Crypto原生從業者來說也是如此。

3.區塊鏈「取證」公司和數據供應商有少量的數據產品，但它們都不具備靈活性/可定制性，也不能滿足經濟/金融研究人員的需求。

許多現代經濟學和金融學研究人員錯過了將工具應用于Crypto數據分析的機會。從設計上講，Crypto可以向任何人提供細化數據，但大部分政策在制定時仍依賴于CoinMarketCap等外部預聚合時間序列數據源，而不是直接從數據源獲取數據，這又是什么原因導致的呢？

正如政策制定者可以查詢美國每家主要銀行的資產負債表，并逐秒觀察消費者存款的變化一樣，他們也可以毫不費力地查看整個Ethereum生態系統的Stablecoin發行情況，但大多數分析Stablecoin的政策文件卻采取了一種探討假設事件的分析方法。

CleanSpark預計其收入將比上一季度增長近13%:金色財經報道，CleanSpark在今天美國收盤后將公布比特幣礦工的財報，預計其收入將比上一季度增長近13%。?根據 FactSet 編制的分析師估計，該公司預計在截至12月的季度中虧損3130萬美元，收入為2950萬美元。這將小于上一期間的4230萬美元虧損。?該礦商公布的凈收入為 1450 萬美元，去年同期的收入為 4120 萬美元。

CleanSpark將是第一個報告本季度業績的礦商，該領域最大的參與者Core Scientific申請破產，而Argo Blockchain將其旗艦設施出售給 Galaxy Digital。[2023/2/10 11:57:50]

我將在本篇中具體闡釋以下幾點內容，希望可以對想要使用鏈上數據的政策研究人員有所幫助：

·鏈上數據的獲取方法

·鏈上數據所采用的結構

·提取和使用鏈上數據的幾個基本工具

在隨后的文章中，我將探討如何使用這里收集的數據來判斷Crypto市場的走勢。同時，我將在結尾發布可供免費使用的數據和代碼。通過闡明如何在區塊鏈中查詢數據，我希望向大家展示Crypto的開放性可以為數據決策開辟的新方法。

DEX聚合器ParaSwap上線Arbitrum:7月13日消息，DEX聚合器ParaSwap上線Arbitrum，支持的DEX包括了GMX、SushiSwap、Balancer等。[2022/7/13 2:09:45]

如果您就職于一家監管機構或研究機構，并在獲取Crypto數據時遇到了困難，歡迎與我們取得聯系分享你的想法，了解Paradigm可以為您提供哪些幫助。

II.鏈上數據獲取方法

一般來講，數據收集工作應集中在一個區塊鏈及特定項目的子集上，這些項目主要是以美元計價、法幣支持的Stablecoin，具體包括USDC、Tether、BinanceUSD、PaxDollar和GeminiDollar。該方法廣泛適用于鏈上數據，即便你想創建一個不同的數據集。

Etherscan這類區塊瀏覽器非常適用于查看交易快照以及收集特定智能合約的信息，但根據我的經驗，它們卻不太能用于生成大型數據集。在收集和處理原始數據時，你基本上有兩個選擇：在本地運行一個完整的節點，或查詢已經從鏈上直接寫入原始數據的數據庫。第一種方法對于專業技能和計算資源的要求比較高，而第二種方法則只需要基本的SQL和Python技能就可以實現，所以這里我們將采用第二種方法。

Clearpool與區塊鏈監控平臺PARSIQ達成合作:據官方消息，Clearpool與區塊鏈監控平臺PARSIQ達成合作，PARSIQ作為業界區塊鏈監控和工作流自動化平臺，將為Clearpool的協議提供關鍵的區塊鏈監控、通知和自動化功能，改善借款人和貸款人使用Clearpool協議的實時體驗。

Clearpool將集成PARSIQ的區塊鏈監控工具，使借款人和貸款人能夠在協議觸發關鍵活動和事件時立即收到通知。例如單個借款人池利用率、借款人池申請和批準、借款人池部署以及新的發售何時開始和結束。

Clearpool由領先的區塊鏈和風險資本投資者提供支持，包括紅杉資本印度，Arrington資本, HashKey資本, 火幣風投等。[2021/11/23 7:05:09]

Dune和谷歌云平臺的BigQuery有最新的鏈上數據，這些數據都以表格的形式存儲在數據庫中，研究人員可使用SQL命令對其進行查詢。Dune還提供免費的數據庫，不過其速度較慢，而且還有些局限性，但它非常適合于A/B測試的數據查詢，也有助于你熟悉數據庫的運行模式，尤其是對于那些不善于使用SQL查詢關聯數據庫的人。BigQuery雖然更加靈活快捷，但谷歌會對計算資源收費，所以其價格也相對昂貴。我在第一次處理數據時，為了節省費用，我會先在Dune中測試查詢語句，然后再將其輸入GCP中運行。在大多數情況下，這種方法都能起到很好的效果

NFT 游戲Parallel獲Paradigm的5000萬美元投資:10月22日消息，NFT 科幻卡牌游戲Parallel宣布以5億美元估值獲得Paradigm的5000萬美元投資。Prarllel表示該項目之前的投資者包括YouTube聯合創始人 Chad Hurley、Focus Labs、OSS Capital 和 Yunt Capital 等。Parallel 項目是圍繞一個幻想故事情節展開的，講述了人類在試圖解決全球能源危機的世界末日之后逃離太空的故事。（techcrunch）[2021/10/22 20:48:14]

III.鏈上數據結構

要回答這個問題，你首先需要搞清楚自己處理數據的目的。對于這個測試案例，我決定為主要的法定支持Stablecoin建立一個大型的時間序列數據集，并觀察一些特定的行為:鑄幣，燒毀(即停止流通Stablecoin)和轉移。我之所以選擇以這種方式進行研究，是因為政策制定者和學者目前最為關注法定支持的Stablecoin，所以這些數據在短期內可能相當有用。

以美元計價的幾大Stablecoin都采用了ERC-20Token標準。顧名思義，ERC-20是一種在Ethereum上使用智能合約創建Token的標準化方式。如果你把區塊鏈理解為一個巨大的去中心化Excel表格，那么智能合約就類似于Excel函數。在函數中輸入參數之后，它將使用其內置邏輯產生一個特定的輸出結果。

分析 | 以太坊Parity客戶端存在安全隱患，可能會意外導致主網“分叉”:PeckShield安全人員研究發現，由于以太坊Parity客戶端存在某種缺陷，當它收到一個問題區塊時，下個有同樣哈希的合法區塊將不被處理。具體而言：攻擊者可向Parity客戶端發送合法header+非法body，使得之后的合法區塊header+body被Partiy客戶端過濾，但可以被geth等客戶端接收，進而可能會導致以太坊主網意外“分叉”。Parity客戶端目前占以太坊主網的22.08%，主要應用于礦池、交易所等相關節點。PeckShield安全人員建議，礦池和交易所節點應盡快升級Parity新版本或將節點遷移至geth客戶端，同時應適當提高區塊確認塊數。[2019/12/31]

我們可以使用智能合約的Ethereum地址來對它們進行定位，這些地址是區塊鏈數據結構中的唯一標識符：

·USDC

·TetherUSD

·BinanceUSD

·PaxDollar

·GeminiDollar

與API類似，智能合約也是可以重復使用的程序。每次智能合約獲得互動指令時，都會產生該互動的記錄，并由Ethereum協議以日志的形式記錄在區塊鏈上，而這些日志則構成了智能合約活動的可靠信息來源。

當智能合同執行一個特定函數時，例如燒毀ERC-20Stablecoin以將其從流通中移除，該函數及其參數將作為交易日志記錄在區塊鏈上。

在下面的交易中，USDCStablecoin的發行商Circle燒毀了價值1056.92美元的USDC。

如果你切換到「日志」標簽，你就可以查看交易事件日志，相應的字段為

·地址：智能合約的合約地址。USDCStablecoin的合約地址是0xa0b86991c6218b36c1d19d4a2e9eb0ce3606eb48。

·名稱：智能合約執行的函數，以及該函數中的參數。在這里，智能合約正在調用燒毀函數，該函數接收的參數指定了所燒毀幣的發送地點和燒毀幣的數量。

Etherscan的輸出結果還會顯示主題和數據字段，這些字段包含了我們在分析交易時需要解析的大部分相關信息。

·Topic0是函數簽名的哈希值。從本質上講，它會將函數及其參數經由單向算法得到一個唯一的函數哈希值。Ethereum使用的是Keccak-256哈希函數，當你通過Keccak-256算法輸入函數簽名時，它總是會產生相同的哈希值，所以任何時候該哈希值出現在日志中，你都能確信是調用了同一個函數。

·Topic1是燒毀函數的一個索引參數。在這里，Topic1是燒毀的Token被發往的地址。(注意：如果燒毀函數有更多的參數，這些參數將作為額外的主題出現）

·這里的數據字段表示所燒毀Token的數量。

既然我們已經了解了鏈上數據的基本結構，就可以開始從Dune和GCP中提取數據了。

IV.提取并處理鏈上數據的基本工具

如前所述，在這個例子中，我選擇從現有數據庫中提取鏈上數據，而不是訪問Ethereum網絡上的活動節點。為了便于理解，我使用SQL從GCP提取了大量原始數據表格，然后在Python中使用pandas庫對其進行清理。

當我們從GCP提取表格時，我們將使用BigQuery，它儲存有很多Ethereum的數據表，如下圖左邊一欄所示。當你點擊一個表格時，相應的數據庫模式就會出現，就如下圖中的ethereum.logs表。與此同時，其中涉及的地址、數據和主題都會記錄到日志數據中去。

下圖中的查詢語句將用于提取日志表中涉及與USDC、TetherUSD、BinanceUSD、PaxDollar或GeminiDollar合約互動的所有記錄。除了ethereum.logs中的信息外，一些額外的信息也很有用，所以我還合并了ethereum.block表中的數據，其中涵蓋了Gas費等信息。

得到的表格可以直接由Python讀取，并借助pandas數據框架細分為以下字段：

·log_index

·transaction_hash

·transaction_index

·address

·data

·topics

·block_timestamp

·block_number

·block_hash

·number

·miner

·size

·gas_limit

·gas_used

·base_fee_per_gas

這些字段中的大多數都可以直接使用，不過第三節中討論的主題字段需要用Python進行一些額外的清理，以便將其分成多列。

V.結語

這篇文章使用的是Ethereum的日志數據，同樣的方法也可以用來訪問鏈上的各種數據。Python和SQL是大多數經濟學家和政策制定者所熟悉的工具，它們可以發揮很大作用。與傳統金融相比，Crypto更具透明度。這樣一來，研究人員就可以利用實時數據來闡明金融體系的運作方式，并及時控制住可能出現的風險。

Tags：PARETHTHEETHERHeroParkETHU幣ethereal中文名ethereumcloud

MANA