Open Dataset
Data Structure ?
2756.53M
Data Structure ?
*The above analysis is the result extracted and analyzed by the system, and the specific actual data shall prevail.
README.md
サブワード情報を持つ英語の単語ベクトル
---
fastTextについて
fastTextは、単語表現の効率的な学習と文分類のためのライブラリです。fastTextの単語表現の重要な特徴の1つは、造語であっても、あらゆる単語に対してベクトルを生成できることです。実際、fastTextの単語ベクトルは、その中に含まれる文字の部分文字列のベクトルから構築されています。これにより、誤ってスペルされた単語や単語の連結に対してもベクトルを構築することができます。 ベクトルについて
これらの事前学習済みベクトルには、2017年のウィキペディア、UMBCのウェブベースコーパス、およびstatmt.orgのニュースデータセットのサブワード情報を用いて学習された100万個の単語ベクトルが含まれています。合計で160億個のトークンが含まれています。 ファイルの最初の行には、語彙の単語数とベクトルのサイズが記載されています。各行には、デフォルトのfastTextのテキスト形式のように、単語の後にそのベクトルが記載されています。各値は空白で区切られています。単語は頻度の降順で並んでいます。 謝辞
これらの単語ベクトルは、クリエイティブ・コモンズ 表示 - 継承 3.0ライセンスの下で配布されています。 P. Bojanowski*、E. Grave*、A. Joulin、T. Mikolov、サブワード情報による単語ベクトルの強化
A. Joulin、E. Grave、P. Bojanowski、T. Mikolov、効率的なテキスト分類のためのトリック集
A. Joulin、E. Grave、P. Bojanowski、M. Douze、H. Jégou、T. Mikolov、FastText.zip:テキスト分類モデルの圧縮
(* これらの著者は同等の貢献をしています。)
fastTextは、単語表現の効率的な学習と文分類のためのライブラリです。fastTextの単語表現の重要な特徴の1つは、造語であっても、あらゆる単語に対してベクトルを生成できることです。実際、fastTextの単語ベクトルは、その中に含まれる文字の部分文字列のベクトルから構築されています。これにより、誤ってスペルされた単語や単語の連結に対してもベクトルを構築することができます。 ベクトルについて
これらの事前学習済みベクトルには、2017年のウィキペディア、UMBCのウェブベースコーパス、およびstatmt.orgのニュースデータセットのサブワード情報を用いて学習された100万個の単語ベクトルが含まれています。合計で160億個のトークンが含まれています。 ファイルの最初の行には、語彙の単語数とベクトルのサイズが記載されています。各行には、デフォルトのfastTextのテキスト形式のように、単語の後にそのベクトルが記載されています。各値は空白で区切られています。単語は頻度の降順で並んでいます。 謝辞
これらの単語ベクトルは、クリエイティブ・コモンズ 表示 - 継承 3.0ライセンスの下で配布されています。 P. Bojanowski*、E. Grave*、A. Joulin、T. Mikolov、サブワード情報による単語ベクトルの強化
A. Joulin、E. Grave、P. Bojanowski、T. Mikolov、効率的なテキスト分類のためのトリック集
A. Joulin、E. Grave、P. Bojanowski、M. Douze、H. Jégou、T. Mikolov、FastText.zip:テキスト分類モデルの圧縮
(* これらの著者は同等の貢献をしています。)
×
The dataset is currently being organized and other channels have been prepared for you. Please use them
The dataset is currently being organized and other channels have been prepared for you. Please use them
Note: Some data is currently being processed and cannot be directly downloaded. We kindly ask for your understanding and support.
No content available at the moment
No content available at the moment
- Share your thoughts
Go share your ideas~~
ALL
Welcome to exchange and share
Your sharing can help others better utilize data.
Data usage instructions: h1>
I. Data Source and Display Explanation:
- 1. The data originates from internet data collection or provided by service providers, and this platform offers users the ability to view and browse datasets.
- 2. This platform serves only as a basic information display for datasets, including but not limited to image, text, video, and audio file types.
- 3. Basic dataset information comes from the original data source or the information provided by the data provider. If there are discrepancies in the dataset description, please refer to the original data source or service provider's address.
II. Ownership Explanation:
- 1. All datasets on this site are copyrighted by their original publishers or data providers.
III. Data Reposting Explanation:
- 1. If you need to repost data from this site, please retain the original data source URL and related copyright notices.
IV. Infringement and Handling Explanation:
- 1. If any data on this site involves infringement, please contact us promptly, and we will arrange for the data to be taken offline.
- 1. The data originates from internet data collection or provided by service providers, and this platform offers users the ability to view and browse datasets.
- 2. This platform serves only as a basic information display for datasets, including but not limited to image, text, video, and audio file types.
- 3. Basic dataset information comes from the original data source or the information provided by the data provider. If there are discrepancies in the dataset description, please refer to the original data source or service provider's address.
- 1. All datasets on this site are copyrighted by their original publishers or data providers.
- 1. If you need to repost data from this site, please retain the original data source URL and related copyright notices.
- 1. If any data on this site involves infringement, please contact us promptly, and we will arrange for the data to be taken offline.