参照：
https://docs.microsoft.com/en-us/python/api/azureml-train-automl-client/azureml.train.automl.automlconfig.automlconfig?view=azure-ml-py

ピアソンの相関統計、またはピアソンの相関係数は、統計モデルではr値としても知られています。任意の2つの変数について、相関の強さを示す値を返します。ピアソンの相関係数は、2つの連続変数間の統計的関係または関連を測定する検定統計量です。これは、共分散の方法に基づいているため、対象の変数間の関連を測定するための最良の方法として知られています。これは、関連または相関の大きさ、および関係の方向に関する情報を提供します。
不正解：
C：双方向カイ二乗検定は、期待値が実際の結果にどれだけ近いかを測定する統計的方法です。
参照：
https://docs.microsoft.com/en-us/azure/machine-learning/studio-module-reference/filter-based-feature-selection
https://www.statisticssolutions.com/pearsons-correlation-coefficient/
特徴工学を実行する
テストレット1
ケーススタディ
概要
あなたは、プロのスポーツイベントにデータサイエンスを提供する会社のデータサイエンティストです。モデルは、グローバルおよびローカルの市場データを使用して、次のビジネス目標を達成します。
*群衆の反応からの音声に基づいて、スポーツイベントでのモバイルデバイスユーザーの感情を理解します。
*広告に反応するユーザーの傾向を評価します。
*モバイルデバイスに配信される広告のスタイルをカスタマイズします。
*ペナルティイベントを検出するためにビデオを使用する
現在の環境
*ペナルティイベントの検出に使用されるメディアは、消費者向けデバイスによって提供されます。メディアには、スポーツイベント中にキャプチャされ、ソーシャルメディアを使用して共有される画像やビデオが含まれる場合があります。画像と動画のサイズと形式はさまざまです。
*モデル構築に利用できるデータは、7年間のスポーツイベントメディアで構成されています。スポーツイベントメディアには以下が含まれます。記録されたビデオトランスクリプトまたはラジオ解説、およびスポーツイベント中にキャプチャされた関連するソーシャルメディアフィードからのログ。
*群衆の感情には、イベント参加者からモノラル形式とステレオ形式の両方で提出されたオーディオ録音が含まれます。
ペナルティの検出と感情
*データサイエンティストは、ペナルティイベントの検出に複数の機械学習モデルを使用してインテリジェントなソリューションを構築する必要があります。
*データサイエンティストは、機械学習パイプラインでの自動特徴エンジニアリングとモデル構築を使用して、ローカル環境でノートブックを構築する必要があります。
*動的なワーカー割り当てを備えたSparkインスタンスを使用して再トレーニングするには、ノートブックをデプロイする必要があります。
*ノートブックは、データのソースのみを再コード化するために、新しいSparkインスタンスで同じコードで実行する必要があります。
*グローバルペナルティ検出モデルは、トレーニング中に動的ランタイムグラフ計算を使用してトレーニングする必要があります。
*ローカルペナルティ検出モデルは、BrainScriptを使用して作成する必要があります。
*地域の群衆感情モデルの実験では、地域のペナルティ検出データを組み合わせる必要があります。
*群衆の感情モデルは、歓声や既知のキャッチフレーズなどの既知の音を識別する必要があります。個々の群集感情モデルは、同様の音を検出します。
*ローカルモデルのすべての共有機能は連続変数です。
*共有機能は倍精度を使用する必要があります。後続のレイヤーには、利用可能な総移動平均と標準偏差のメトリックが必要です。
広告
生産の最初の数週間で、次のことが観察されました。
*評価された広告の回答は減少しました。
*ドロップは広告スタイル間で一貫していませんでした。
*トレーニングデータと本番データ全体での機能の分布に一貫性がない分析によると、ユーザーの場所と行動に関する100の数値機能のうち、場所ソースからの47の機能が未加工の機能として使用されています。偏りと分散の問題を解決するために推奨される実験は、10個の線形無相関の特徴を設計することです。
*最初のデータ検出では、群集感情モデルに使用されるトレーニングデータで、ターゲット状態の密度が広範囲に渡っています。
*すべてのペナルティ検出モデルは、確率的勾配降下法（SGD）を使用した推論フェーズの実行が遅すぎることを示しています。
*オーディオサンプルは、キャッチフレーズの長さが地域によって25％〜47％の間で変化することを示しています
*グローバルペナルティ検出モデルのパフォーマンスは、トレーニングセットと検証セットを比較すると、分散は低くなりますが、バイアスが高くなります。機能の変更を実装する前に、すべてのトレーニングと検証のケースを使用してバイアスと分散を確認する必要があります。
*広告応答モデルは、各イベントの開始時にトレーニングし、スポーツイベント中に適用する必要があります。
*マーケットセグメンテーションモデルは、同様の広告応答履歴に合わせて最適化する必要があります。
*サンプリングは、同じ機能を共有するローカルセグメンテーションモデルとグローバルセグメンテーションモデルの間で排他的に相互および集合を保証する必要があります。
*広告に応答するユーザーの傾向を判断する前に、ローカルマーケットセグメンテーションモデルが適用されます。
*広告応答モデルは、機能の非線形境界をサポートする必要があります。
*広告傾向モデルはカットしきい値が0.45であり、加重カッパがから逸脱した場合に再トレーニングが発生します。
0.1 +/- 5％。
*広告傾向モデルは、次の図に示すコスト係数を使用します。

*広告傾向モデルは、次の図に示す提案されたコスト要因を使用します。

*現在および提案されているコスト要因シナリオのパフォーマンス曲線を次の図に示します。