FWSの詳細:Filecoinが提供するAWSのオープンソース代替案
原文标题:FilecoinがFWS(Filecoin Web Service)を発表
著者:Filecoin Network
私たちのエンジニアリングチームにとって、これは重要なリリース日です。
エコシステム内のエンジニアリングチームは、Filecoin Web Servicesプロジェクトにおいて重要なマイルストーンに到達しました------このFWSのリリースは、オープンソースの代替ソリューションがAWS、GCP、Azureのようなサービスの代替品を提供し始めることを意味します。このプラットフォームは、世界最大の分散型ストレージネットワークであるFilecoinの潜在能力を活用しています。
このニュースの発表は、世界中の開発者に実用的なクラウドサービスの代替ソリューションを提供するための重要な一歩を踏み出しました。
FWSとは何ですか?
FWS(Filecoin Web Services)は、Filecoinネットワーク上に構築された一連の計算およびストレージ技術です。Filecoinネットワークは、分散型ネットワークであり、ネットワーク収益生成メカニズムとインセンティブメカニズムを内蔵しています。私たちは、クラウドサービスが優れた開発者体験を提供していることを認識しており、そのため私たちの野心の一つは、分散型ネットワークが提供できる透明でオープンソースのインセンティブ層の上に、クラウドレベルの開発者体験を提供することです。
この技術スタックは、計算、ストレージ、ネットワークリソースなどのさまざまなコンポーネントをカバーしており、開発者が分散型アプリケーションを構築するために使用できます。Filecoin Web Servicesが提供するコンポーネントは、設計時からスケーラビリティ、柔軟性、安全性を実現することを目的としており、幅広いユースケースに適しています。
FWS製品ライン
Estuary
https://estuary.tech
Estuaryは、Estuary Nodeのようなさまざまなコンポーネントで構成されており、これは簡単にデプロイおよび管理できるFilecoinストレージノードです。さらに、Estuary Dashboardは、ユーザーがこのネットワーク上でストレージ取引提案を監視および管理するためのユーザーフレンドリーなインターフェースを提供します。Estuaryは、開発者がFilecoin上でストレージアプリケーションを構築できるように、さまざまな開発者ツールやAPIインターフェース(Estuary APIなど)も提供しています。さらに、Estuary SDKは、このネットワークとの統合ニーズを実現するための一連のライブラリとツールを提供します。
Delta技術スタック
https://delta.store
Delta技術スタック(Delta Technology Stack)は、Filecoinネットワークのストレージ取引提案を作成および管理するためのオープンソースツールキットです。これには、Deltacストレージ取引提案交渉エンジン(Deal Making Engine)、Delta大規模データセット管理者(Dataset Manager for large datasets)、および未封印コピー(unsealed copies)に対してストレージと外部アクセスサービスを提供するEdge-UR Gatewayゲートウェイが含まれます。
Deltaの詳細
Deltaは、Filecoinネットワーク上でストレージ取引提案を準備および管理するプロセスを簡素化します。Deltaは、データの管理(バージョン管理、メタデータ管理、ストレージ取引提案の状態追跡を含む)に使用でき、これによりユーザーはFilecoinネットワーク上で自分のデータを公開しやすくなります。
Deltaストレージ取引提案交渉エンジンは、ユーザーがストレージ取引提案の条件(必要なストレージスペース、価格、取引条件など)を指定できるようにします。その後、このプラットフォームはFilecoinネットワークのスマートコントラクトを使用して、ストレージ取引提案の条件を強制し、取引を促進します。
Deltaは、Filecoinネットワーク上でストレージ取引提案を実行するための複雑なプロセスをカプセル化し、自分のデータのコピーをFilecoinの分散型ストレージネットワークに保存したいユーザーにシームレスな体験を提供します。
特徴:
ストレージ取引提案計画書の準備と公告
ストレージピース(Piece)提出の計算と最適化
E2E/インポートサポート(オンライン/オフライン)
自動/手動修復とストレージ取引提案の更新
ウォレット割り当て
ストレージプロバイダーの割り当てと選択
Blockstoreのクリーンアップ
ストレージ取引提案の状態管理
コピー管理
Deltaデータセット管理者
Deltaデータセット管理者(Dataset Manager, Delta DM)ツールは、Filecoinネットワークにアップロードされたデータセットに対して、ストレージ取引提案のコピー管理追跡サービスを提供します。これは、大量のデータのストレージ取引提案を迅速に達成するための解決策を提供します。このようなシナリオでは、オフバンドプロセスを使用して加速するのが最適です。
Delta DMプラットフォームは、データセットの管理プロセスを簡素化する直感的なWebインターフェースを提供します。これは、コピーとDataCapの割り当てを追跡し、ストレージ取引提案のプルメカニズムを通じてクライアントサービスプロバイダーにセルフサービスを提供します。
このツールは、データ準備とデータ転送のプロセスから独立しており、BoostやLotusの外で動作でき、Delta DM + Deltaを独立したソリューションとして機能させることができます。
Deltaインポーター
Deltaインポーター(Importer)は、ストレージプロバイダーのインフラストラクチャ上で実行されることを目的とした独立したバイナリプログラムです。これは、ファイルシステムからCARファイルをBoostのプロセスにインポートすることを自動化します。Delta DMと統合して、セルフサービスAPIからストレージ取引提案をリクエストし、Delta Importerは自動化されたストレージ取引交渉とストレージ取引提案の取り込みパイプラインを促進します。Delta DMには、さまざまなデータ取り込み戦略をカバーする複数の動作モードがあります。
今後の予定:
失効ストレージ取引提案の自動修復
Retrieval-SP------未封印コピーのための単一の位置を指定。
SPメタデータ------詳細なコピーパラメータ
Edge-UR
Edge-URは、ユーザーがEstuary上で同じAPIキーを使用してコンテンツをアップロードおよび取得できる専用ノードです。各ユーザーには自分のノードが割り当てられ、これらのノードはアップロードプロトコルをシームレスに切り替えることができます。データはHTTPプロトコルを介してアップロードされる必要がありますが、Edge-URノードはファイルをDeltaノードに転送するのを助け、ストレージ取引提案を達成します。
全体として、Edge-URはEstuaryへのデータのアップロードと取得のプロセスを簡素化し、ユーザーコンテンツの安全性と制御性を保証します。
特徴:
軽量IPFSノードで、IPFSノードと接続可能。
アップロードと取得------ユーザーはデータをアップロードし、その後すぐにデータを取得できます。
Deltaを使用して非同期でストレージ取引提案を達成。
コンテンツとその関連ストレージ取引提案を追跡。
Ptolemy
Ptolemyは、通常S3ストレージバケットや類似のファイルシステムに制限される大規模データセットを処理するためのオーケストレーションエンジンとして機能することを目的としています。Ptolemyは、ストレージ取引提案を達成するために、CARファイル内に全体のファイルシステムアーキテクチャをカプセル化します。Ptolemyの目標は、ストレージプロバイダーとエンドユーザーがデータ準備に関連する煩雑な作業を取り除くことです。
FWI
Filecoin Web Infrastructure(Webインフラストラクチャ)は、分散型に向けて重要な一歩を踏み出しました。これは、ストレージ取引提案の達成エンジンおよび他のFilecoin技術、サービスの青写真として、低コストで信頼性の高い計算およびストレージソリューションを描いており、Filecoinネットワークをさらに前進させています。これは、スケーラブルな計算クラスターのストレージシステムと可視化クラスターであり、高可用性設計とKubernetesオーケストレーションツールを含んでいます。
FWIはオープンソースの自動化ツールであり、コード形式で提供されるインフラストラクチャで、あなた自身の「FWI-alikes」アプリケーションを構築し、自分のハードウェア上で自分の条件で企業向けの顧客インフラストラクチャを運用できます。これは、さまざまなハードウェアとソフトウェアに適合し、すべてのコンポーネントがプラグイン可能でオープンソースです。
FWIには多くの利点があります------その一つは、顧客専用インフラストラクチャ(Customer Provisioned Infrastructure)を実現し、エンジニアリングチームが顧客のためにインフラストラクチャを運営し、FILを報酬として受け取ることができるようになることです------これは重要な進展です。この作業は、今後数週間で詳細に議論される予定です。
ストレージ市場
https://storage.market/
Storage.marketは、データストレージ製品の情報センターとして、ユーザーにストレージ市場の分析データと最新のデータストレージニュースを提供します。このサービスは、業界のトレンドをタイムリーに把握し、ストレージ製品やサービスに関連する慎重な意思決定を行いたい企業や個人にとって特に有用です。
ユーザーの導入
Filecoinネットワークにデータをアップロードするために、ユーザーは特定のツールやアプリケーションを使用する必要があります。これにより、ネットワークと対話し、さまざまな運用プロセス(アップロード、取得、データ管理など)を実行できます。これがFilecoinエコシステムがサービスを提供したい部分です:私たちのエンジニアリングチームは、顧客と協力して、Filecoinネットワークにデータをアップロードするためのソリューションを構築しています。
これらのプロジェクトで複数の顧客と協力することは挑戦的です。なぜなら、各顧客には独自のニーズ、ユースケース、異なる技術能力があるからです。しかし、私たちはFilecoinネットワークのアーキテクチャ、プロトコル、特性に関する理解と、顧客のニーズや期待に関する理解を通じて、彼らのニーズを満たすカスタマイズされたソリューションを開発し、分散型ストレージの利点を活用する手助けをすることができます。
Radiant Earthとの協力
Radiant Earthという革新的な機関は、機械学習と地球観測(EO)技術を使用して、積極的なグローバルな影響を促進することを目指しています。彼らは、高品質のオープンリソースの一連を提供しており、これらは世界中の専門家や研究者から信頼されています。
Radiant Earthのコアミッションの一つは、機械学習を用いた地球観測のタスクに関連する標準を開発する実践コミュニティを育成することです。これは、機械学習、地球観測、および関連分野の専門家を集めて協力し、知識を共有し、ベストプラクティスの標準を開発することを含み、これらの技術を責任を持って効率的に使用することを目指しています。
私たちはRadiant Earthとの協力の一環として、独自の技術スタックを使用してFilecoinネットワークに彼らの一部の機械学習および地球観測データをアップロードしました。私たちはこのタスクを実現するために必要なステップを理解し、私たちのツールを通じて、彼らのデータが適切にフォーマットされ、安全に保存され、簡単にアクセスできることを保証しました。
私たちが使用したツール:
Ptolemy
Delta Dataset Manager
Delta Deal Making Engine
Delta Importer
Radiant Earthについてさらに知る https://mlhub.earth/
SUCHOとの協力
SUCHOという優れたプロジェクトは、世界中の1,500人のボランティアによって推進されており、彼らはオンラインで協力してウクライナの文化遺産をデジタル化し、保護しています。継続的な紛争の中で、SUCHOは行動を起こし、ウクライナの文化機関に属する5,000以上のウェブサイトと約40TBのデータを保存し、これらの貴重なリソースが失われたりオフラインになったりするのを防ぐために、世界の5つの異なるストレージプロバイダーを通じて行動しています。
私たちが使用したツール:
Ptolemy
Delta Dataset Manager
Delta Deal Making Engine
Delta Importer
SUCHOについてさらに知る: https://www.sucho.org/
Encloudとの協力
Encloudはデータセキュリティに特化しており、Filecoinを使用してそのセキュリティ機能をさらに向上させ、ユーザーに自由なアクセスを提供することの重要性を認識しています。
私たちはこの分野でEncloudと協力しており、彼らに私たちのオンラインEdge-URノードを開放し、概念実証モデルをテストしています。
私たちが使用したツール:
Delta
Edge-UR