問題の説明 車の騒音レベルは、車の状態と製造品質の両方の指標となり得ます。運転手は、騒音レベルを使って、候補となる車が自分のニーズに合っているか、または現在所有している車が健全な状態にあるかを判断することができます。一方、製造業者は、騒音レベルを使って、自社の車の品質を市場と比較して評価することができます。高級車は低騒音レベルを競い合いますが、スポーツカーは通常この要素を無視します。このプロジェクトでは、様々なソースからデータを収集して、車の製造仕様と異なる速度での騒音レベルを対応付けたデータセットを作成します。作成されたデータセットは、車の騒音レベルの評価や、どの技術仕様が車の騒音レベルに大きな影響を与えるかの分析に利用することができます。 自動車の騒音レベルに関する詳細情報： - [自動車の騒音と振動制御の概要](https://www.researchgate.net/publication/270775858_An_overview_of_automobile_noise_and_vibration_control) - [ノイズ、振動、ハーシュネス（Wikipediaより）](https://en.wikipedia.org/wiki/Noise,_vibration,_and_harshness) --- 概要 最初に、https://www.auto - decibel - db.com（以降ADと呼びます）からデータをスクレイピングします。このウェブサイトには、車の車内騒音レベルに関する約2000件のデータエントリがあります。ウェブサイト上の各車は、異なる速度での車内騒音（デシベルで測定）を持っています。このウェブサイトは、収集したデータのソースや方法に関する詳細情報を提供していませんが、この主題に関する最も包括的なデータです。検証に使用できる別のソースは、https://www.edmunds.comにあります。edmunds.comは騒音レベルの収集方法を明記していますが、そのデータセットはPDFファイルに埋め込まれており、前者と比較して包括的ではありません。 車の騒音レベルをスクレイピングした後、各車に関する利用可能な情報を使ってその仕様を調べます。ADからスクレイピングしたデータセットには、他のデータセットで同じ車の仕様を特定するために使用できる4つの特徴があります。ブランド、モデル、年式、仕様です。車に関する詳細で包括的なデータを持つウェブサイトやAPIをウェブで検索した後、http://www.carqueryapi.com API（以降CQAと呼びます）を選択しました。このAPIは一部の車については正確ではなく、ADとの表記も異なりますが、最もアクセスしやすいデータです。このセクションでは、3つの特徴（ブランド、モデル、年式）を使って、ADの各車をCQAの同等の車と対応付けます。まずCQAでモデルIDを特定し、その後モデルIDを使って車の完全な仕様を取得します。caranddriver.comが要求回数に制限（60回の要求）を設けているため、Torブリッジを使ってIPアドレスを切り替えました。 最後に、各車のモデルIDを使ってCQAで完全な仕様を調べます。このセクションでは、ADの約1000台の車の仕様に関する60の特徴を追加しました。CQAから取得した各特徴には、その列名に接尾辞 '_cqa' を付けて参照します。最終的に、ADの1895台の車のうち1067台の仕様を取得することに成功しました。ADとQCで車の名称が異なるか、または車がQCに存在しないため、ADのすべての車の仕様を見つけることができませんでした。 --- ウェブスクレイピングのソースとAPI [auto - decibel - db.com](https://www.auto - decibel - db.com)：このウェブサイトには、車の車内騒音レベルに関する約2000件のデータエントリがあります。ウェブサイト上の各車は、異なる速度での車内騒音（デシベルで測定）を持っています。 [carqueryapi.com](http://www.carqueryapi.com)：年式、メーカー、モデル、トリム、仕様などの詳細な自動車およびトラックの情報を取得するためのJSONベースのAPIです。そのデータベースには73419台の車が登録されています。 --- 検討すべき未解決の質問 どの技術仕様が車の騒音レベルに大きな影響を与えるのか？ 年式、ブランド、仕様によって車の騒音レベルにどのようなパターンが見られるのか？ 車の騒音レベルを使って車のブランド、年式、仕様を示すことはできるか？