買比特幣 買比特幣
Ctrl+D 買比特幣
ads

IND:一文讀懂為大負荷設計的Filecoin索引器可擴展方案_web3域名交易記錄

Author:

Time:1900/1/1 0:00:00

這篇文章描述了一個簡單的策略,可將大量涌入的索引負荷分散到由索引器節點組成的索引池中。同時,它讓這個索引池具備可擴展性。索引器擴容的最終目標是10^{15}個索引。這并非存儲數據的字節大小,而是存儲索引的數量。一個索引實際上就是一張描述了CID標識與內容提供者數據之間關系的映射圖。實際的數據規模將會遠大于此。目前,我們可處理約10^{12}個索引,隨著時間的推移,我們會通過一列步驟向最終的擴容目標前進。目前,大部分的索引負荷是由涌入的索引數據構成的。新增的數據可能超過單一的索引器能夠承受的范圍,它還在極速增加。因此,目前擴容路上最迫切的目標,就是處理增加中的涌入負荷。方案:處理索引涌入的簡單策略

微軟中國首個工業元宇宙應用中心項目落戶昆山:金色財經報道,昆山市政府與微軟(中國)有限公司簽署戰略合作備忘錄,微軟(MSFT.O)中國首個工業元宇宙應用中心項目落戶昆山。據介紹,此次落戶昆山高新區的微軟中國工業元宇宙應用中心,將聚焦推動跨國企業工業元宇宙應用創新和數字化轉型,構建工業元宇宙產業創新生態,助力昆山打造元宇宙產業集聚高地、技術創新高地和行業應用示范高地。[2023/3/3 12:41:07]

數據涌入

一個索引器接收到某個發布者傳來的“announce”消息,宣布已經有新的索引數據廣告時,就會發生數據涌入。作為回應,該索引器會從發布者那里檢索所有尚未檢索過的索引數據。隨著發布者數量增加,在某個時候,單一的索引器節點將無法跟上新增索引數據發布的速率,也可能沒有足夠的存儲空間來全部存儲這些數據。分散涌入負荷

波卡社區新提案建議添加鏈間分配器模塊:10月19日消息,波卡(Polkadot)社區昨日發布的新提案建議為波卡添加類似Cosmos Hub的鏈間分配器模塊,并使用財庫(Treasury)中的DOT進行鏈間的分配,支持與波卡集成并符合其利益的各種項目。這種向各個項目注入DOT流動性的方案不僅有助于項目發展,也有助于為波卡財庫帶來收益以及促進DOT的跨鏈使用。

具體實施方案為:通過治理投票申請一定數量的DOT注入協議中作為協議的流動性,經過一段時間后財庫將DOT撤回,為財庫產生額外收入。[2022/10/19 16:30:23]

索引器擴容處理擁堵負載,是基于一個簡單策略——將涌入的索引負荷分散到由索引器節點組成的索引池中,這樣就能根據容量需求來增加節點,而不需要將數據到處移動來重新達到均衡。它先是分配不同的內容_發布者_給不同的索引節點,這樣每個節點可以處理涌入負荷的一部分。這是通過使用單獨的輕量服務AssignerService來實現的,后者不屬于關鍵的索引涌入路徑的一部分。當一個索引器達到了配置的存儲限制后,它就會停止吸納新增的索引數據,而索引池里的其他索引器會從分配給完整索引器的發布者那里恢復吸納數據。如果存儲容量和涌入負荷分配需求增加,池子里就會增加更多的索引器節點。這個擴容策略的三個主要組件是:分配服務:它將發布者分配給索引器。索引器凍結模式:這種索引器運作模式里,新內容不會被索引。移交發布者任務:將凍結中的索引器的發布者任務重新分配給活躍的索引器,以在凍結索引器停止運行后恢復索引。這篇文章會概括描述這些組件。可以在設計文檔和設計展示中獲取更多信息。擴容策略的優缺點

Audacity推出6000萬美元新基金,專注于Web3創作者經濟和游戲等領域:7月26日消息,風險投資公司Audacity宣布推出6000萬美元專注于Web3創作者經濟及游戲等領域的新基金,旨在通過對一些媒體科技公司提供資金支持來彌合內容創作者從Web2到Web3的差距。

Audacity創始人Kabir Kochhar表示,雖然Web3應用層仍處于初期階段,但隨著媒體生態系統引入用戶,Web3主流化速度將會加快,該公司將專注于美國和亞洲市場并參與種子輪和A輪階段的融資交易。(acrofan)[2022/7/27 2:39:26]

優點:更少的同步工作:不需要讓每一個索引者與每一個發布者同步。元數據不會重復發送給多個索引器:元數據只會在處理提供者的索引器上存在。索引器之間不會分享數據。它們各自管理自己的發布者鏈。不需要只為了檢查提供者而去閱讀廣告,這與提供者分片一樣。索引器可有不同的存儲容量。不需要共識機制。涌入負荷可重新分配,而無需在索引器之間移動數據。缺點:不平均的分配:一些發布者可能會比其他發布者索引更多的數據。查詢請求需要分散和合并:查詢請求會重復發送給所有索引器,而響應會合并成一個發送給客戶。提供者更改發布者可導致重復索引。增加索引者不會馬上起效,除非一個現有的索引器達到了存儲容量限制。這方案的整體好處是它的實施方案相對簡單,也能去除擁堵擴容的限制。分配服務

MPL旗下Web3游戲公司GGX擬融資1000-1500萬美元,Polygon或參投:6月30日消息,線上游戲獨角獸Mobile Premier League(MPL)宣布推出一個全新 Web3 游戲子公司 GGX 并正式進軍 P2E 游戲領域。GGX目前正在啟動融資談判,擬按照 2-2.5 億美元的公司估值募集 1000-1500 萬美元資金,投資方包括數字資產管理公司 Spartan Capital 和 Polygon。GGX 還計劃推出游戲內置 NFT 市場,和軟件工具包,便于玩家交易游戲內資產且允許任何游戲開發人員使用該軟件工具包實現游戲貨幣化。[2022/6/30 1:40:45]

分配服務負責將發布者分配給在其配置索引器池中的索引者。對一個索引器池來說,它作為單一實例運行在其管理的索引器所在的同一網絡上。一個索引器只能作為一個分配服務的索引器池里的成員。除了將新的發布者分配給索引器外,分配服務還檢測檢索器節點是否進入了凍結模式,并負責將發布者從凍結索引器重新分配給非凍結的索引器。索引服務還通過gossippubsub渠道重新發布直接的HTTP公告,這樣池中的所有索引器都能接收到這些信息。基于幾個假設,分配服務是用于單個私有部署中使用:任務可以發給任何索引器,所有索引器的管理API是在私有網絡上運行,而且也沒有建立任何方式或協議讓不同的參與方管理池子中要添加或移除的節點。

以太坊橋TVL達到117.7億美元 近30天下跌60.4%:金色財經報道,Dune Analytics數據顯示,以太坊橋當前TVL達到117.7億美元,近30天下跌60.4%。其中鎖倉量最高的5個橋分別是PolygonBridges(41.11億美元)、ArbitrumBridges(24.7億美元)、AvalancheBridge(21.4億美元)、NearRaibow(9.71億美元)、FantomAnyswapBridge(9.7億美元)。[2022/6/18 4:36:30]

將一個發布者分配給一個索引器

一個索引器接收到某個發布者傳來的“announce”消息,宣布已經有新的索引數據廣告時分配服務會監聽gossip-sub和直接的HTTP消息——這些消息主要是宣布新廣告可被獲取了。它從每一條消息中讀取發布者信息,并判斷發布者是否已經分配給需要的索引器。如果答案是否定的,該分配服務就會選擇任務量最少的索引器,并將該發布者分配給這個索引器。在分配任務后,索引器會收到來自發布者的公告,并自行處理涌入數據。索引服務會處理離線的索引器,它所用的方式能避免在索引器池里過度分配任務。索引服務還支持將特定發布者分配給特定索引器的配置選項。進一步閱讀材料:非持久化任務狀態意味著索引器能在任何時候停止或重啟。索引器池在某個單一部署中的索引器節點的集合。任務復制將發布者分配給多個索引器。索引器凍結模式

索引器存儲使用觸及到配置`FreezeAtPercent(<``https://pkg.go.dev/github.com/ipni/storetheindex/config#Indexer`(https://pkg.go.dev/github.com/ipni/storetheindex/config#Indexer"https://pkg.go.dev/github.com/ipni/storetheindex/config#Indexer")`>)`的限制后,索引器自動進入“凍結”模式。這個運作模式里,索引器不再存儲新增的索引數據,但還是會處理索引數據的更新或刪除。一個凍結的索引器不會接受新的發布者任務。在其內部,該索引器追蹤它已讀的每一個廣告鏈,目的是納入廣告。索引器會持續響應對索引數據的查詢。索引器也可以通過其管理(admin)API來手動進行凍結。這可以是為了暫時凍結納入數據,直到索引器的存儲容量提升為止。這樣,持續的索引工作可以被其他索引器節點代替。進一步閱讀材料:磁盤使用監控由每一個索引器負責。凍結的能力不依賴于分配服務。解除凍結的能力可讓索引器恢復索引工作。發布者移交

分配服務定期統計索引器,要是它發現某個索引器被凍結,它就會將該被凍結的索引器分配的發布者重新移交給其他索引器——活躍的索引器會繼續之前凍結索引器上所做的工作。在移交過程中,活躍的索引器也會從凍結的索引器那取得提供者及其相關的進一步信息。分配服務決定哪一個索引器將接收發布者的移交工作——這與分配新發布者的邏輯一樣。每一個發布者的移交過程都會單獨進行這一步驟,這樣凍結索引器的任務就會分配給池子里的可用索引器。進一步閱讀材料:分配服務可以恢復不完整的移交任務發布者數據在凍結和活躍索引器之間分發設立帶有分配服務的索引器池

這里描述了設立帶有分配服務的索引器池的過程。可概括為以下步驟:部署索引器部署分配服務按需部署額外的索引器這里還提供了分配服務配置模板文件。

Tags:WEBWEB3INDEXINDweb3幣圈web3域名交易記錄Frax Price IndexMetaverse Index

歐易okex官網
SUI:沒有空投?可以關注這10個Sui生態新項目_比特幣

盡管SuiNetwork宣布不會存在空投,但SuiNetwork依然擁有20億美元估值和強大的技術基礎.

1900/1/1 0:00:00
DEFI:交易所們的DeFi征途 |鏈捕手_去中心化金融defi是干什么的

前有COMP兩個月上線52家交易所,后有AMPL接連獲得17家交易所的青睞。而近兩個月既有YFI一個月內上線26家交易所,又有HBO三大交易所不約而同的在同一時間點上線CRV,各交易所在一波又一.

1900/1/1 0:00:00
UMB:獲得Binance Labs等種子輪融資,鏈游開發商GOMBLE有何來頭?_DareNFT

4月20日,BinanceLabs宣布已承諾投資基于區塊鏈的韓國休閑游戲開發商GOMBLE的種子輪融資.

1900/1/1 0:00:00
LEX:Flex Yang:香港新未來,Web3的希望與光明 | Over the Moon_HOP

今天下午,「OvertheMoon—逐浪Web3」峰會在香港舉辦。本次活動由MetaStone和Odaily星球日報主辦,MixMarvel、AWS協辦,CREGIS、Jasmy、HOPE、So.

1900/1/1 0:00:00
ORD:veDAO研究院:如何玩轉BRC-20?_brc20是什么意思

BTC概念的加密貨幣有哪些?或許你腦海里最先浮現出來的是基于BTC生態分叉出來的衍生幣,比如BTD、BTK、BTF等等……這個說法在今年以前不算錯.

1900/1/1 0:00:00
CHA:聯合生態共建產業Web3,螞蟻數科公布多項關鍵技術進展_區塊鏈dapp開發合法嗎

4月26日,Odaily星球日報在螞蟻數字科技開發者大會上了解到,螞蟻集團科技業務的最新成果又向前推進了一步.

1900/1/1 0:00:00
ads