# 背景 このデータセットは、TwitterストリーミングAPIを用いたテストから生まれたもので、特定のトピック（この場合は[フランス大統領選挙][1]）に関するデータをこのフローからフィルタリングして収集したものです。このデータ収集に使用したスクリプトは、この[Githubリポジトリ][2]で入手できます。 3月18日以降、[フランス大統領選挙][3]は2017年4月23日の第1回投票までの決勝タイムに突入しました。この選挙の候補者は以下の通りです。 - ニコラ・デュポン＝アイニャン氏 - マリーヌ・ル・ペン氏 - エマニュエル・マクロン氏 - ベノワ・アモン氏 - ナタリー・アルトー氏 - フィリップ・プトゥ氏 - ジャック・シュミナード氏 - ジャン・ラサル氏 - ジャン＝リュック・メレンション氏 - フランソワ・アセリノ氏 - フランソワ・フィヨン氏 当初の考えは、Twitter APIから定期的にデータを収集することでした。データ収集プロセスは以下のように進化しました。 - バージョン1、2、3 3週間にわたり、毎時10分間、PythonスクリプトがTwitter APIのストリームを監視しました。 - バージョン4以降 新しいバージョンは新しいデータ構造に基づき、2017年3月18日にフランス憲法評議会による候補者の承認後に開始されます。 データはdbsqliteファイル（database_週番号_ブロック_曜日.sqlite形式）に保存され、できる限り頻繁に（少なくとも毎週）更新されます。 第1回投票後（バージョン18以降）、私は毎週のファイル数を再調整する必要がありました。また、Kaggleの20ファイルの制限により、アップロードするファイル数を減らす必要がありました（ただし、ローカルでの分析のために、バージョン17とバージョン18以降を結合することができます）。 **例：各候補者の言及回数のグラフ** ![各候補者の言及回数のグラフ][4] これらのデータベースには、Googleトレンドから上位5人の候補者に関する情報を収集したsqliteデータベースを追加しました。このデータベースには以下のものが含まれています。 - 地域別の全体的な関心度を含むテーブル - 各候補者の地域別の関心度を含むテーブル - 上位および急上昇ランキングにおける各候補者の上位25の関連クエリを含むテーブル # 内容 このdbsqliteファイルには、各行に以下の情報が含まれるデータテーブルがあります。 ===============共通項目=============== - 行のインデックス - ツイートの言語 - 各候補者について :mention_候補者名（候補者または関連するアカウントが呼び出された場合は1、そうでない場合は0） - ツイート - ミリ秒単位のタイムスタンプ ===============バージョン4以降=============== - 日付 - 時刻（ロンドンタイムゾーン） - ツイートを投稿したユーザー名 - ユーザーがプロフィールに登録した所在地 - ツイートがリツイートまたは引用ツイートかどうか（0または1） - リツイートされたユーザー名 - 元のツイート（リツイートまたは引用されたツイート） # 謝辞 この選挙は激しいものになるでしょう。 # インスピレーション このデータセットの最初のバージョンは、データを収集し、コミュニティがこのデータセットを使って行える最初の作業を確認するためのテストでした。新しいバージョンは（私が考え、望んでいるように）深いテキスト分析を行うのに適しています。 [1]: https://en.wikipedia.org/wiki/French_presidential_election,_2017 [2]: https://github.com/jeanmidevacc/french-presidential-election-twitter-pov.git [3]: https://en.wikipedia.org/wiki/French_presidential_election,_2017 [4]: https://www.kaggle.io/svf/1039441/a6d419b95420d7c28bd3e9a4437a6370/__results___files/__results___8_2.png [5]: https://trends.google.co.uk/trends/explore?date=today%201-m&geo=FR&q=%2Fm%2F011ncr8c,%2Fm%2F0fqmlm,%2Fm%2F02rdgs,%2Fm%2F04zzm99,%2Fm%2F0551nw [6]: https://www.kaggle.io/svf/1049376/e54172fcff84c97fff6583431eaf9567/__results___files/__results___16_1.png