假設您是web3新手,開始建立web3分析團隊,或者剛剛對web3數據感興趣。無論哪種方式,您都應該已經大致熟悉了API、數據庫、轉換和模型在web2中的工作方式。
對于這本就職指南,我將盡量保持簡潔,并突出我對以下三個重要的想法:
1.思考:為什么開放數據管道會重塑數據工作的完成方式
2.工具:web3數據堆棧中工具的概述,以及如何利用它們
3.團隊:在web3數據團隊中應具備的基本注意事項和技能
關于數據思維
讓我們首先總結一下在web2中如何構建、查詢和訪問數據。
對于簡化的數據管道,我們有四個步驟:
事件API觸發
攝取到數據庫
特定產品/分析用例的數據轉換
模型訓練和部署
數據有時是開源的唯一步驟是在轉換完成之后。Kaggle和HuggingFace等社區使用暴露數據的一部分來幫助企業構建更好的模型。有一些特定領域的案例,例如在前三個步驟中打開數據的開放街道地圖,但這些仍然有寫權限的限制。
OKX Ventures與日本Web3游戲公司Thirdverse建立合作伙伴關系:據OKX Ventures官推消息,OKX Ventures與日本Web3游戲公司Thirdverse建立合作伙伴關系,OKX Ventures將提供營銷和業務發展支持,以促進Web3游戲開發與用戶使用。
OKX Ventures負責人Jeffrey Yunan Ren 表示,Thirdvese 位于Web3.0游戲、足球和日本流行漫畫交叉點,我們相信CAPTAIN TSUBASA -RIVALS-將成為Thirdverse的良好開端,并在未來推出更好的游戲。
據悉,CAPTAIN TSUBASA -RIVALS-是一款即將推出的區塊鏈游戲,源自最受歡迎和最持久的日本系列漫畫《Captain Tsubasa》,用戶可以訓練原作中的角色并與其他玩家對戰。[2022/12/5 21:23:57]
并不是說web2根本沒有任何開源。與大多數其他工程角色一樣,web2數據擁有大量用于構建其管道的開源工具。我們仍然在web3中使用所有這些工具。總之,他們的工具是開放的,但他們的數據是封閉的。
Web3也將數據開源——這意味著它不再只是數據科學家在開源中工作,分析工程師和數據工程師也是如此!每個人都參與到一個更連續的工作流程中,而不是一個黑盒數據循環。
Oracle將利用InfStones的技術推出Web3基礎設施開發平臺:8月2日消息,軟件巨頭甲骨文(Oracle)與Web3基礎設施提供商InfStones達成合作。甲骨文將利用InfStones的技術為共享企業客戶推出可擴展的Web3基礎設施開發平臺。甲骨文表示,在甲骨文云基礎設施上運行的平臺組合將降低希望將分布式賬本技術納入其堆棧科技的新公司的準入門檻。(Blockworks)[2022/8/2 2:53:42]
工作的形式已經從web2數據大壩轉變為web3數據的河流、三角洲和海洋。同樣重要的是要注意,這個新周期會同時影響生態系統中的所有產品/協議。
讓我們看一個web3分析師如何協同工作的示例。有幾十個DEX使用不同的交換機制和費用,允許你將通證A換成通證B。如果這些是典型的交易所,比如納斯達克,每個交易所都會以10k或一些API報告自己的數據,并且然后像capIQ之類的其他服務會將所有交換數據放在一起,并收取費用讓您訪問他們的API。也許偶爾,他們會舉辦一場創新比賽,這樣他們就可以在未來擁有額外的數據/圖表功能來收費。
馬斯克:Web69的想法不錯:金色財經報道,前 Twitter 首席執行官 Jack Dorsey 近日宣布推出“Web5”,他試圖在比特幣網絡上構建 Web 組件并專注于身份而非 Token 化支付,同時解決現實個人數據保護問題,確保不會將這些數據出售給第三方,該項目旨在將去中心化身份和數據存儲帶入 Web 應用程序,同時將數據所有權歸還給用戶。
此消息發布后,一位名叫“Wandrinstar”的狗狗幣社區用戶在社交媒體上稱:“如果Jack Dorsey 和比特幣可以創建 Web5,那么狗狗幣也可以創建 Web69。” 這條推文立刻引起了 Jack Dorsey 的注意,他在回復中 @ 了 Elon Musk 并表示“靠你搞定 Web69 了”,馬斯克回復稱“Web69 的想法會很熱門”。[2022/6/12 4:20:04]
使用web3交換,我們有這個數據流:
dex.trades是Dune上的一張表,其中匯總了所有DEX交換數據-因此您可以非常輕松地搜索所有交易所中單個代幣的交換量之類的東西。
一位數據分析師出現并使用一堆社區開源查詢創建了一個儀表板,現在我們對整個DEX行業有了一個公開的了解。即使所有的查詢看起來都是一個人寫的,你可以打賭,在某個不和諧的地方有大量的討論可以準確地拼湊起來。
Web3的去中心化數據門戶myMessage公布首批投資者:11月28日消息,Web3的去中心化數據門戶myMessage公布首批投資者,包括Magnus Capital、ZBS Capital、Exnet Workcap、X21 Digital、VBC Ventures等。[2021/11/29 12:37:59]
一位DAO科學家查看儀表板并開始在他們自己的查詢中分割數據,查看特定的配對,例如穩定通證。他們研究用戶行為和商業模式,并開始建立假設。
由于科學家可以看到哪個DEX占據了更大的交易量份額,因此他們將提出一個新模型并提出對治理參數的更改,以在鏈上進行投票和執行。
之后,我們可以隨時查看儀表板,了解該提案如何創造出更具競爭力的產品。
未來,如果有另一個DEX出來,這個過程會提升產品的功能。有人會創建插入查詢來更新此表。這將反過來反映在所有儀表板和模型中。任何其他分析師/科學家都可以在Alex已經完成的工作的基礎上再接再厲。
由于共享生態系統,討論、協作和學習發生在更緊密的反饋循環中。這有時會變得非常壓倒性,而且我認識的分析師基本上都在輪換數據時表現得倦怠。然而,只要我們中的一個人不斷推動數據前進,那么其他所有人都會受益。
分析 | 科羅拉州簽署數字豁免法案與實現Web 3.0有關:據ethereumworldnews文章分析,美國各州開始簽署數字貨幣法案有兩個原因:一是在分散式平臺上運行的加密經濟系統是區塊鏈技術的重要組成部分。反過來,區塊鏈作為一種技術有可能創建Web 3.0,這顯然比現有的互聯網系統有幾個優勢。二是由于區塊鏈和加密經濟系統的優勢,科羅拉多州正日益成為區塊鏈公司的中心。因此,需要為這些項目開辟資金渠道,最快的方法是減少第51條規定的消費性監管要求。科羅拉多州州長Jared Polis簽署了加密貨幣法案后,該法案將某些加密貨幣從證券法中豁免,豁免規則如下:
1.發行人必須向美國證券交易委員會提交意向通知;
2.代幣必須是實用程序,用于消費目的;
3.該代幣不得以任何方式營銷或用于推測;
4.必須在首次銷售或轉讓后的六個月內推出代幣并使用;
5.買家必須提供證明他們購買代幣才能使用而不是投機;
6.初始買家必須在180天過后才轉讓代幣。[2019/3/9]
它也不一定總是復雜的抽象視圖,有時它只是實用功能,例如可以輕松搜索ENS反向解析器或改進工具,例如使用單個CLI命令自動生成大部分graphQL映射!所有這些都可以被每個人重用,并且可以適應某些產品前端或您自己的個人交易模型中的API使用。
雖然這里解鎖的可能性是驚人的,但是程序還沒有那么順利地運行。與數據工程相比,數據分析師/科學方面的生態系統仍然非常不成熟。我認為這有幾個原因:
數據工程多年來一直是web3的核心焦點,從客戶端RPCAPI改進到基本的SQL/graphQL聚合。在theGraph和Dune等產品上的工作確實體現了他們為此付出的努力。
對于分析師來說,理解web3獨特的跨協議關系表是一個艱難的過程。例如,分析師可以理解如何僅分析Uniswap,但隨后難以將聚合器、其他DEX和不同的代幣類型添加到組合中。最重要的是,完成所有這些工作的工具直到去年才真正意義上出現。
數據科學家基本上習慣于進入原始數據轉儲并獨自完成所有工作。我認為他們不習慣在項目早期與分析師和工程師如此密切和公開地合作。這需要一段時間才能適應這樣的環境。
除了學習合作之外,web3數據社區還在學習如何在這個新的數據堆棧中工作。您不再需要控制基礎架構或從excel中慢慢構建到數據湖或數據倉庫-只要您的產品上線,那么您的數據就會無處不在。您的團隊基本上進入了數據基礎架構的精華部分。
關于數據工具
這就是你們大多數人來這里的目的:?
這些工具并不全面——它們只是我發現自己或其他人在以太坊生態系統中一直使用和引用的工具。
“去中心化”標簽意味著有一個基礎設施網絡或指導框架來阻止單方面發生的變化。我喜歡將其視為解耦基礎設施與云基礎設施,但這需要有自己的文章。
讓我們來看看您何時需要使用每個圖層/類別:
交互+數據源:這主要用于前端、錢包和數據攝取到較低層。客戶端:雖然以太坊的底層實現是相同的,但每個客戶端都有不同的額外功能。例如,Erigon針對數據存儲/同步進行了大量優化,Quorum支持啟動隱私鏈。
節點即服務:您無法選擇它們運行的客戶端,但使用這些服務將為您省去自己維護節點和API正常運行時間的麻煩。節點有很多復雜性,具體取決于您要捕獲多少數據。
查詢+數據映射:該層中的數據要么在合約中作為URI引用,要么來自使用合約ABI將交易數據從字節映射到表模式。合約ABI告訴我們合約中包含哪些功能和事件,否則我們只能看到已部署的字節碼。交易數據:這些是最常用的,主要用于儀表板和報告。theGraph和FlipsideAPI也用于前端。有些表是合約的1:1映射,有些表允許在模式中進行額外的轉換。
元數據“協議”:這些不是真正的數據產品,但存在用于存儲DID或文件存儲。大多數NFT將使用其中的一個或多個,我認為今年我們將開始越來越多地使用這些數據源來增強我們的查詢功能。
專業提供商:其中一些是非常強大的數據流產品,用于內存池數據的Blocknative和用于鏈上交易數據的Parsec。其他人聚合鏈上和鏈下數據,例如DAO治理或財務數據。
高頻數據提供者:您無法查詢/轉換他們的數據,但他們已經為您完成了所有繁重的工作。“企業”服務:如果您是VC、調查員或記者,您會經常使用這些服務。您可以使用Nansen的錢包分析器或Chainanalysis的KYT深入了解錢包和錢包關系。或者使用Tolken終端在大量項目/鏈上獲得漂亮的開箱即用圖表。
增強的那些API:這些產品將許多查詢捆綁到一個中,例如ERC20代幣的所有代幣余額或為給定地址提取合約ABI。
數據團隊
不言而喻,您希望在這些社區中尋找可以雇用到您團隊的人。讓我們進一步分解重要的web3數據技能和經驗,以便您真正知道自己在搜索什么。如果您想被錄用,請將其視為您追求的技能和經驗!
分析師至少應該是使用Etherscan的高手,并且知道如何閱讀Dune儀表板。這可能需要1個月的時間才能慢慢升級,如果您真的預訂并狂歡學習,則需要2周。
您還應該考慮更多背景信息,特別是關于時間分配和技能可轉移性的內容。
在web3中,數據分析師大約30-40%的時間將用于跟上整個生態系統中的其他分析師和協議。請確保您沒有窒息他們,否則,它將成為對每個人的長期損害。與更大的數據社區一起學習、貢獻和構建是絕對必要的。
關于可轉移性:技能和領域在這個領域都是高度可轉移的。如果我使用不同的協議,那么加速時間可能會很短,因為鏈上數據的表模式都是相同的。如果有的話,我可能在加入之前就已經使用過該協議的數據了!
了解如何使用這些工具并不重要——每個分析師都應該或多或少地能夠編寫SQL或創建儀表板。這一切都是關于知道如何為社區做出貢獻和與社區合作。
Tags:WEBWEB3APICAPMetaWeb3PadWeb3 ALL BEST ICOHAPIcapo幣用的什么鏈
“Web3將是全新的起點。”這是硅谷頂級風險投資機構a16z于2021年10月發布的《如何贏得未來》提案中的一句引言,它出現在這份提案的“美國科技領導力危機”話題之下.
1900/1/1 0:00:001.以太坊2.0智能合約TVL創歷史新高意味著什么?2022年對于以太坊來說意義非凡,隨著全球DeFi項目和NFT的蓬勃發展,以太坊市值從此前1250億美元的高位一路高歌猛進.
1900/1/1 0:00:00隨著危機蔓延,與Terra相關的項目損失超過80%。與此同時,隨著交易者尋找其他去中心化穩定幣,Maker(DAI)得到了提振.
1900/1/1 0:00:00前言 北京時間2022年5月9日,知道創宇區塊鏈安全實驗室監測到BSC鏈上借貸協議FortressProtocol因預言機問題被攻擊,這是最近實驗室檢測到的第三起預言機攻擊事件,損失包括1.
1900/1/1 0:00:00盡管TerraUSD的危機正在加劇加密投資者的恐慌情緒,美國財政部長珍妮特·耶倫卻表示,加密資產在更廣泛的金融體系中仍然只占很小的一部分.
1900/1/1 0:00:00金色財經報道,美國參議員CynthiaLummis和KirstenGillibrand周二在DC區塊鏈峰會上討論了備受期待的兩黨加密貨幣法案的細節,他們計劃在6月公布他們的兩黨加密法案.
1900/1/1 0:00:00