Open Dataset
Data Structure ?
1.85M
Data Structure ?
*The above analysis is the result extracted and analyzed by the system, and the specific actual data shall prevail.
README.md
文脈
ほとんどのテキスト簡易化システムは、単語の複雑さを示す指標を必要とします。単語の難易度予測に関する一般的なアプローチは、手動による特徴量エンジニアリングに基づいています。ディープラーニングに基づくモデルの使用は、比較的性能が悪いため、ほとんど検討されていません。私たちは、そのようなモデルの1つを使って単語の難易度を予測することを検討しました。この問題を二値分類問題として扱いました。従来の機械学習モデルを学習させ、そのタスクでの性能を評価しました。難易度を測定する際に、以前に取得した単語の頻度に依存しないようにすることが、私たちの主な目的の1つでした。その後、文字レベルで動作する畳み込みニューラルネットワークに基づく予測モデルを分析し、他のモデルと比較してその効率を評価しました。
このデータセットには40481個のデータインスタンスが含まれています。様々な列のヘッダーは以下の通りです。
* 単語
* 長さ
* Freq_HAL
* Log_Freq_HAL
* I_Mean_RT
* I_Zscore
* I_SD
* Obs
* I_Mean_Accuracy
I_Zscoreは単語の難易度を決定します。この値は、単語について0から1の間で変動し、0は「簡単」、1は「難しい」を意味します。
内容
データはCSV形式です。I_Zスコアから難易度ラベルを取得する方法については、[研究論文](https://github.com/garain/Word-Difficulty-Prediction/blob/master/WORD_DIFFICULTY.pdf)をご確認ください。
謝辞
AvishekGarain、Arpan Basu、Sudip KumarNaskarの皆様に感謝します [引用元] (https://ieee-dataport.org/open-access/dataset-word-difficulty-prediction)
データセットのその他の詳細や難易度ラベルを取得する方法は、リンクを添付した研究論文に記載されています。論文をオープンアクセスで閲覧するには、https://garain.codes を訪問してください。
啓発
あなたのデータは世界最大のデータサイエンスコミュニティの前に置かれます。あなたはどのような質問に答えてほしいですか?
×
The dataset is currently being organized and other channels have been prepared for you. Please use them
The dataset is currently being organized and other channels have been prepared for you. Please use them
Note: Some data is currently being processed and cannot be directly downloaded. We kindly ask for your understanding and support.
No content available at the moment
No content available at the moment
- Share your thoughts
Go share your ideas~~
ALL
Welcome to exchange and share
Your sharing can help others better utilize data.
Data usage instructions: h1>
I. Data Source and Display Explanation:
- 1. The data originates from internet data collection or provided by service providers, and this platform offers users the ability to view and browse datasets.
- 2. This platform serves only as a basic information display for datasets, including but not limited to image, text, video, and audio file types.
- 3. Basic dataset information comes from the original data source or the information provided by the data provider. If there are discrepancies in the dataset description, please refer to the original data source or service provider's address.
II. Ownership Explanation:
- 1. All datasets on this site are copyrighted by their original publishers or data providers.
III. Data Reposting Explanation:
- 1. If you need to repost data from this site, please retain the original data source URL and related copyright notices.
IV. Infringement and Handling Explanation:
- 1. If any data on this site involves infringement, please contact us promptly, and we will arrange for the data to be taken offline.
- 1. The data originates from internet data collection or provided by service providers, and this platform offers users the ability to view and browse datasets.
- 2. This platform serves only as a basic information display for datasets, including but not limited to image, text, video, and audio file types.
- 3. Basic dataset information comes from the original data source or the information provided by the data provider. If there are discrepancies in the dataset description, please refer to the original data source or service provider's address.
- 1. All datasets on this site are copyrighted by their original publishers or data providers.
- 1. If you need to repost data from this site, please retain the original data source URL and related copyright notices.
- 1. If any data on this site involves infringement, please contact us promptly, and we will arrange for the data to be taken offline.