Cointime

Download App
iOS & Android

Pinax データセットと Snowflake を使用してブロックチェーン データ分析を簡単に実行

Validated Project

TL;DR: Pinax が提供するデータセットを使用してブロックチェーン データを効率的に分析する方法を学びます。当社のソリューションが、Parquet ファイルや Snowflake などの管理されたデータベースを介して ETH データへのアクセスを簡素化し、SQL クエリを実行して毎日のアクティブ ユーザーや上位の契約アクティビティなどの貴重な洞察を抽出できるようにする方法を学びましょう。

私たちは、ブロックチェーン データ分析を変える製品、Snowflake と統合された Datasets on The Graph をデモできることを嬉しく思います。この投稿では、私たちが解決している問題、革新的なソリューション、人々が私たちのデータセットをどのように利用しているか、そして私たちの将来のビジョンについて探っていきます。

動画リンク:https://youtu.be/7CxFGgNmu-Y

データセットの詳細については、次の記事をご覧ください。

ブロックチェーンは、サイズが大きく管理が難しい大量のデータを生成します。このデータを抽出するには、特に RPC ノードからの詳細な対話に関しては、カスタム インストルメンテーションが必要です。

SQL などの従来のツールに慣れているアナリストは、ブロックチェーン データ抽出の複雑さに対処するのに苦労しています。複数のブロックチェーン ネットワークを処理するという課題と相まって、運用上の負担になります。

このデータに効率的にアクセスするということは、大規模なデータ セットをダウンロードする必要性を最小限に抑えることも意味します。そのため、必要なデータのみをクエリできるように、データ ストレージをサポートするソリューションが必要です。

SQL などの従来のツールに慣れているアナリストは、ブロックチェーン データ抽出の複雑さに対処するのに苦労しています。複数のブロックチェーン ネットワークを処理するという課題と相まって、運用上の負担になります。

このデータに効率的にアクセスするということは、大規模なデータ セットをダウンロードする必要性を最小限に抑えることも意味します。そのため、必要なデータのみをクエリできるように、データ ストレージをサポートするソリューションが必要です。

私たちはFirehoseSubstreamsという 2 つの強力なテクノロジーを活用しています。これらのサービスは The Graph 上で実行され、ブロックチェーン データの効率的な抽出と保存を可能にします。まず、さまざまなチェーンのブロック アーキテクチャ (EVM、Solana、BTC に基づく) を定義し、次にそれらを Parquet ファイル (基本的にはデータベース プロパティを持つフラット ファイル) としてエクスポートします。これらのファイルは、AWS S3 またはその他の S3 互換バケットでホストされます。

データにアクセスしやすくするために、私たちは生のストレージにとどまりません。 Snowflake Marketplace のデータもリストします。 S3 から生データをクエリすることも、マネージド データベース Snowflake に直接接続して、マネージド データセットに対して SQL クエリを実行することもできます。この多用途性により、好きな方法でブロックチェーン データにアクセスできます。

データにアクセスするには、いくつかのオプションがあります。あなたはできる:

  • 外部テーブルまたは直接コピー方法を使用して、S3 から生データをデータベースにロードします。
  • SQL を使用して、Snowflake などのマネージド データベース内のデータを直接クエリします。
  • Polars や pandas などの Python ライブラリを使用して、プログラムで単一の Parquet ファイルを読み取ります。

---ビデオ スライドショー、MVP アーキテクチャのデータ パイプラインのスクリーンショット。

データ パイプラインは Firehose から始まります。Firehose は、サブストリームを流れる標準化されたブロック タイプを作成するブロックチェーン データセットのインストルメンテーションをサポートします。ここでは、さまざまなデータ型 (ブロック、トランザクション追跡、ログ) のスキーマを定義し、それらを Parquet ファイルに変換します。

抽出されたデータは S3 でホストされ、SQL 計算エンジンや Python ライブラリなどのさまざまな方法で使用できます。また、次の 2 つの異なるゲートウェイ方式もサポートしています。

  1. リクエスタの支払い: S3 ストレージの使用量に基づいて請求が行われるため、アクセスした特定のデータ量に対して支払うことができます。
  2. Snowflake Marketplace: コピーせずにデータセットに直接アクセスし、SQL 対応のマネージド データベースのさらなる利便性を享受できます。

---ビデオ スライドショー、MVP アーキテクチャのゲートウェイのスクリーンショット。

Snowflake は、データセットを簡単に見つけられるマーケットプレイスを提供します。たとえば、「イーサリアム」を検索すると、有名なデータプロバイダーのリストが表示されます。当社のイーサリアム データセットは無料で試用でき、掲載料もかかりません。

ブロック、ログ、トランザクション ハッシュなどのテーブルを表示することで、データをプレビューしてその構造を理解することができます。現在、Snowflake はこのデータを単一リージョン (バージニア北部、米国東部) でホストしていますが、将来的には必要に応じてさらにリージョンを追加する予定です。

ブロック、ログ、トランザクション ハッシュなどのテーブルを表示することで、データをプレビューしてその構造を理解することができます。現在、Snowflake はこのデータを単一リージョン (バージニア北部、米国東部) でホストしていますが、将来的には必要に応じてさらにリージョンを追加する予定です。

私たちのデモでは、Snowflake の Python ノートブックを使用してイーサリアム上の毎日のアクティブ ユーザーを分析し、パンダを使用してデータを視覚化する方法を示します。また、活動別に上位の契約を調査し、契約レベルの詳細をドリルダウンするのがいかに簡単であるかを強調します。

現在、Snowflake と S3 でイーサリアムをホストしています。当社は、Base、Arbitrum、BSC、Polygon などの他の EVM チェーンや、Solana や BTC などの非 EVM チェーンをサポートするよう積極的に拡張しています。さらに、データの更新頻度を 24 時間から可能な限り低く抑え、ほぼリアルタイムの分析を実現することを目指しています。

私たちは、製品の構築と成長を継続し、より多くのブロックチェーンのサポートを拡大し、リアルタイム機能を強化して、アナリストから開発者まで、誰もがブロックチェーン データにアクセスできるようにすることに興奮しています。

お客様からのフィードバックと、Snowflake でのデータセット パイロットの成功に基づいて、将来、データセットが The Graph で完全にサポートされるデータ サービスとして表示される可能性があります。

お客様のニーズに基づいてブロックチェーン データ アクセスを簡素化する方法に興味がある場合は、当社の Web サイトにアクセスするか、直接お問い合わせください。デモをリクエストして、ブロックチェーン データへの洞察を得る方法をどのように変えることができるかを確認してください。

(関連する専門用語、コメント、コード ライブラリ、ハイパーリンクなどについては、ブログを参照してください)

簡単なヒントとして、ETH データセットは Snowflake で無料トライアルで利用できます。

💡 この記事は次の質問に答えます。

- ブロックチェーン データセットとは何ですか?

- アナリストは Snowflake でホストされているデータセットをどのように操作しますか?

- 一元化されたデータにアクセスするさまざまな方法にはどのようなものがありますか?

- ETH の限定された履歴データセットを無料で試すにはどうすればよいですか?

コメント

全てのコメント

Recommended for you

  • 米上院銀行委員会の委員長は、ステーブルコインの利回りに関する新たな草案が早ければ今週中にも公表される可能性があると述べた。

    Cointimeの報道によると、上院銀行委員会の委員長を務めるティム・スコット上院議員は、ワシントンD.C.で開催されたブロックチェーンサミットで、議員らは早ければ今週中にも、少なくともステーブルコイン関連の条項を含む新たな法案草案を目にする可能性があると述べた。スコット議員は、法案の中で最も注目を集めているのはステーブルコインの利回り問題だが、議員らは引き続きこの問題に取り組んでいると指摘した。 スコット議員は、「今週中に最初の提案が提出されるだろう。もしそれが週末までに実現すれば、少なくとも法案の枠組みが形になりつつあるかどうかが分かるだろう。そうなれば、我々はより良​​い状況に立てると思う」と述べた。また、ステーブルコインの利回り問題に関して、民主党のアンジェラ・アルソブルックス上院議員、共和党のトム・ティリス上院議員、そしてホワイトハウス高官のパトリック・ウィット氏の尽力も、この進展に貢献していると述べた。 スコット氏は、過去1か月間の交渉で、ドナルド・トランプ大統領とその家族の暗号資産プロジェクトに対する議員の懸念、主要な規制機関における超党派代表の欠如、顧客確認(KYC)規制など、その他の未解決問題も取り上げられたと述べた。 スコット氏はまた、「倫理問題と定足数については、合意に非常に近づいていると思います。これは相手側にとっても重要な問題だと認識しているので、こちらも対応しています。また、いくつかの人事についても進展が見られており、これは良いニュースです。DeFiに関しては、マーク・ワーナー上院議員が注力している分野であり、マネーロンダリング対策(AML)は非常に重要な要素です。これらの問題についても前進していると思います」と述べた。

  • ゴールデンモーニングブリーフィング|3月18日の主要な夜間動向

    21:00~7:00 キーワード:ファントムウォレット、ストライプウォレット、オートノマスウォレット、イラン 1. イランは、米国とイスラエルが自国領土を使用することを容認する国に対して、合法的に攻撃できると主張している。 2. 米国CFTC(商品先物取引委員会)は、ファントムウォレットはブローカーとしての登録を必要としないと発表。 3. アリゾナ州司法長官は、予測マーケティング担当者のカルシ氏を刑事告発。 4. 米国国務省は、世界中のすべての在外公館に対し、「直ちに」安全保障評価を実施するよう命じた。 5. ロビンフッド・ベンチャーキャピタルは、ストライプウォレットとイレブンラボに約3500万ドルを投資。 6. GSRは、オートノマスウォレットとアーキテックを買収するために5700万ドルを投資し、暗号資産ファンド管理プラットフォームを構築。 7. 米国証券取引委員会(SEC)とCFTCは、ほとんどのデジタル資産は証券ではないとする新たな暗号資産ガイダンスを発表。

  • 米国証券取引委員会(SEC)と商品先物取引委員会(CFTC)は、仮想通貨に関する新たな見解を発表し、ほとんどのデジタル資産は証券の範疇には含まれないとした。

    Cointimeは3月18日、米国証券取引委員会(SEC)と商品先物取引委員会(CFTC)が暗号資産に関する68ページのガイダンス文書を公表し、ほとんどのデジタル資産は証券ではないと明記したと報じた。この新たな説明では、ステーブルコイン、デジタル商品、および「デジタル商品」トークンの分類が詳細に説明されており、これらはすべて証券ではないと両機関は述べている。また、「非証券暗号資産」がどのようにして証券になり得るのかを説明し、マイニング、プロトコルステーキング、エアドロップに連邦証券法がどのように適用されるのかを明確にしている。 SECはさらに、非証券デジタル資産が投資契約の対象となる仕組みについても説明している。SECの説明によると、「非証券暗号資産は、発行者が投資家に対し共同事業への投資を促し、必要な経営業務を行うという約束または表明を行い、かつ購入者がそこから利益を得ると期待する理由がある場合に、投資契約の対象となる」。

  • マスターカードは、ステーブルコイン企業であるBVNKを最大18億ドルで買収する計画だ。

    Cointimeの報道によると、Mastercardはステーブルコインインフラのスタートアップ企業であるBVNKを、条件付き買収額3億ドルを含め最大18億ドルで買収する計画だ。この買収は、BVNKとCoinbaseの約20億ドル規模の合併交渉が決裂してからわずか4ヶ月後のことである。両社は火曜日に発表した共同声明で、この取引を確認した。

  • ビットコインが7万5000ドルを突破

    市場データによると、BTCは75,000ドルを突破し、現在75,033.01ドルで取引されており、24時間で2.83%上昇しています。市場は著しい変動に見舞われているため、リスク管理には十分ご注意ください。

  • FusnChainのメインネットがまもなくローンチされます。これは、金融取引のための世界初のパブリックブロックチェーンであり、PayFi時代に向けたオンチェーン金融取引インフラの到来を告げるものです。

    世界のWeb3インフラストラクチャ環境において、歴史的なパラダイムシフトが目前に迫っている。仮想通貨の世界と現実世界の資金の流れを結びつけることに特化した公式ネットワークであるFusnChainは、メインネットのローンチが間近であることを正式に発表した。

  • ビットコインが7万1500ドルを突破

    市場データによると、BTCは71,500ドルを突破し、現在71,510.19ドルで取引されており、24時間で1.06%上昇しています。市場は著しい変動に見舞われているため、リスク管理には十分ご注意ください。