戻るAIはオープンソースです
中国のインターネットコーパスリソースプラットフォームオープンソースデータ

中国のインターネットコーパスリソースプラットフォームオープンソースデータ

AIはオープンソースです Admin 184 回閲覧
  1. プラットフォームの背景

中国サイバースペース安全協会と国家インターネット緊急対応センターによって立ち上げられ、人工知能モデルのトレーニング、自然言語処理研究、その他のアプリケーションをサポートするために、高品質で信頼性の高い中国のインターネット コーパス リソースを提供することを目的としています。


  1. リソースの特徴
この

プラットフォームは、合計容量約 2.7TB の 27 のデータセットをカバーする「中国インターネット基本コーパス 2.0」を開始し、そのうち基本コーパス部分は約 120GB、約 3,800 万件のデータが含まれています。 すべてのデータは、コンテンツの正確性と信頼性を確保するために、ソース検証、コンテンツフィルタリング、重複排除が行われます。


  1. オープンソースの価値

登録と認証後、科学研究や産業などのさまざまなニーズを満たすためにダウンロードして使用し、オープンソース エコロジーの発展を促進し、中国分野における大規模モデルと自然言語処理技術の革新と応用を促進することができます。


詳細は公式サイト「https://corpus.cybersac.cn/?home#/index」をご確認ください


関連記事

「生成AIサービスのセキュリティ評価とアルゴリズムファイリング」の概要

「生成AIサービスのセキュリティ評価とアルゴリズムファイリング」の概要

- 公布の背景 生成 人工知能サービス管理暫定措置によれば、世論属性または社会動員能力を備えた生成 AI サービスを国内国民に提供するには、法律に従ってセキュリティ評価を実施し、アルゴリズムの提出を処...

AI Security Governance Framework バージョン 1.0 の概要

AI Security Governance Framework バージョン 1.0 の概要

- 背景: 国家サイバーセキュリティ標準化技術委員会 (TC260) によって策定され、2024 年 9 月 9 日に開催された国家サイバーセキュリティ広報週間のメイン フォーラムで正式に発表されまし...

Mem0はエージェントと統合する価値がありますか? 長期記憶は役立ちますが、境界線を管理する必要があります

Mem0はエージェントと統合する価値がありますか? 長期記憶は役立ちますが、境界線を管理する必要があります

Mem0は、AIアプリケーションやエージェント向けのオープンソースメモリ層プロジェクトで、アプリのユーザーの好み、歴史的事実、長期的な文脈を記憶するのを支援することを目的としています。 パーソナライズ...

ヘイスタックはどのようなチームに適しているのでしょうか? むしろコンポジタブルなRAGエンジニアリングフレームワークのようなものです

ヘイスタックはどのようなチームに適しているのでしょうか? むしろコンポジタブルなRAGエンジニアリングフレームワークのようなものです

HaystackはDeepSetが保守するオープンソースのAIアプリケーションフレームワークで、RAG構築、ドキュメントQ&A、検索パイプライン、LLMワークフローの構築に一般的に使用されています。 ...

おすすめツール

もっと見る