Open Dataset
Data Structure ?
634.48M
Data Structure ?
*The above analysis is the result extracted and analyzed by the system, and the specific actual data shall prevail.
README.md
140万件の記事データセットの構築
ここ数週間、私はMediumの記事の大規模なデータセットを構築しています。当初、私の目標はMediumの拍手数指標をよりよく理解することでしたが、すぐにこのデータがそれだけでなくはるかに多くのことを達成できることに気づきました。
作家が統計モデルを使ってタイトルを選べるとしたらどうでしょう。あるいは読者が自分の分野の最高の作家に自動的に購読できるとしたら。「私は何回拍手を送るべきか?」といった基本的な質問に答えることさえ、Mediumの作家と読者の双方にとって非常に価値があるでしょう。
これらはすべて、適切なデータと十分な人手があれば実現できることです。私たちはデータを持っています。今必要なのはあなた方の協力だけです。
----------
データの概要
このデータセットは、Mediumで最も人気のある95の記事タグに関する140万件の記事から構成されています。すべての記事は2017年8月1日から2018年8月1日の間に公開されたものです。
私が記事全体の内容ではなく記事カードの内容を収集することを選んだにはいくつかの理由があります。まず、Mediumの著作権規則に抵触する問題に遭遇したくなかったからです。第二に、記事全体をスクレイピングするよりも記事カードをスクレイピングする方が約90倍速く(つまり、より少ない時間とメモリでより多くのデータを取得できる)だからです。
私が各記事について収集できた情報の完全なリストは次の通りです。タイトル、サブタイトル、著者、出版社、日付、タグ、読了時間、受け取った拍手数、記事のURL、著者のURL。
----------
このデータセットについてより詳しい紹介が欲しい場合は、私のGitHubを見てください。次のリポジトリでは、Mediumの読者、著者、出版社に関する最も興味深い質問のいくつかに答えるためのデータ分析ノートブックを公開しています。
ここがリンクです。
https://github.com/harrisonjansma/Analyzing_Medium/blob/master/Medium_EDA_expanded.ipynb
[1]: https://cdn-images-1.medium.com/max/1250/1*MHsIo8FAYDcGJLxiqVOWfw.png
×
The dataset is currently being organized and other channels have been prepared for you. Please use them
The dataset is currently being organized and other channels have been prepared for you. Please use them
Note: Some data is currently being processed and cannot be directly downloaded. We kindly ask for your understanding and support.
No content available at the moment
No content available at the moment
- Share your thoughts
Go share your ideas~~
ALL
Welcome to exchange and share
Your sharing can help others better utilize data.
Data usage instructions: h1>
I. Data Source and Display Explanation:
- 1. The data originates from internet data collection or provided by service providers, and this platform offers users the ability to view and browse datasets.
- 2. This platform serves only as a basic information display for datasets, including but not limited to image, text, video, and audio file types.
- 3. Basic dataset information comes from the original data source or the information provided by the data provider. If there are discrepancies in the dataset description, please refer to the original data source or service provider's address.
II. Ownership Explanation:
- 1. All datasets on this site are copyrighted by their original publishers or data providers.
III. Data Reposting Explanation:
- 1. If you need to repost data from this site, please retain the original data source URL and related copyright notices.
IV. Infringement and Handling Explanation:
- 1. If any data on this site involves infringement, please contact us promptly, and we will arrange for the data to be taken offline.
- 1. The data originates from internet data collection or provided by service providers, and this platform offers users the ability to view and browse datasets.
- 2. This platform serves only as a basic information display for datasets, including but not limited to image, text, video, and audio file types.
- 3. Basic dataset information comes from the original data source or the information provided by the data provider. If there are discrepancies in the dataset description, please refer to the original data source or service provider's address.
- 1. All datasets on this site are copyrighted by their original publishers or data providers.
- 1. If you need to repost data from this site, please retain the original data source URL and related copyright notices.
- 1. If any data on this site involves infringement, please contact us promptly, and we will arrange for the data to be taken offline.