連鎖方程式による多重代入（MICE）メソッドを使用します。
参照：
https://www.ncbi.nlm.nih.gov/pmc/articles/PMC3074241/
https://docs.microsoft.com/en-us/azure/machine-learning/studio-module-reference/clean-missing-data

確率的PCAを使用した置換：連鎖方程式（MICE）を使用した多重代入などの他のオプションと比較して、このオプションには、各列に予測子を適用する必要がないという利点があります。
代わりに、完全なデータセットの共分散を近似します。したがって、多くの列に値が欠落しているデータセットのパフォーマンスが向上する可能性があります。
参照：
https://docs.microsoft.com/en-us/azure/machine-learning/studio-module-reference/clean-missing-data

説明

ボックス1：Tensorflow
TensorFlowは、TensorFlow実験のトレーニング用の推定量を表します。
ボックス2：12 vCPU、112 GBメモリ..、2 GPU、..
ディープニューラルネットワークにはGPUを使用します。
参照：
https://docs.microsoft.com/en-us/python/api/azureml-train-core/azureml.train.dnn

行の分割：データを2つの部分に分割するだけの場合は、このオプションを使用します。各分割に入れるデータのパーセンテージを指定できますが、デフォルトでは、データは50〜50に分割されます。
不正解：
B：正規表現の分割：単一の列の値をテストしてデータセットを分割する場合は、このオプションを選択します。
C：相対式分割：数値列に条件を適用する場合は常にこのオプションを使用します。
参照：
https://docs.microsoft.com/en-us/azure/machine-learning/studio-module-reference/split-data

一般的なメタデータの変更には、列を機能としてマークすることが含まれる場合があります。
参照：
https://docs.microsoft.com/en-us/azure/machine-learning/studio-module-reference/edit-metadataモデルの開発テストレット1ケーススタディの概要あなたは、専門家にデータサイエンスを提供する会社のデータサイエンティストです。スポーツイベント。モデルは、グローバルおよびローカルの市場データを使用して、次のビジネス目標を達成します。
*群衆の反応からの音声に基づいて、スポーツイベントでのモバイルデバイスユーザーの感情を理解します。
*広告に反応するユーザーの傾向を評価します。
*モバイルデバイスに配信される広告のスタイルをカスタマイズします。
*ペナルティイベントを検出するためにビデオを使用する
現在の環境
*ペナルティイベントの検出に使用されるメディアは、消費者向けデバイスによって提供されます。メディアには、スポーツイベント中にキャプチャされ、ソーシャルメディアを使用して共有される画像やビデオが含まれる場合があります。画像と動画のサイズと形式はさまざまです。
*モデル構築に利用できるデータは、7年間のスポーツイベントメディアで構成されています。スポーツイベントメディアには以下が含まれます。記録されたビデオトランスクリプトまたはラジオ解説、およびスポーツイベント中にキャプチャされた関連するソーシャルメディアフィードからのログ。
*群衆の感情には、イベント参加者からモノラル形式とステレオ形式の両方で提出されたオーディオ録音が含まれます。
ペナルティの検出と感情
*データサイエンティストは、ペナルティイベントの検出に複数の機械学習モデルを使用してインテリジェントなソリューションを構築する必要があります。
*データサイエンティストは、機械学習パイプラインでの自動特徴エンジニアリングとモデル構築を使用して、ローカル環境でノートブックを構築する必要があります。
*動的なワーカー割り当てを備えたSparkインスタンスを使用して再トレーニングするには、ノートブックをデプロイする必要があります。
*ノートブックは、データのソースのみを再コード化するために、新しいSparkインスタンスで同じコードで実行する必要があります。
*グローバルペナルティ検出モデルは、トレーニング中に動的ランタイムグラフ計算を使用してトレーニングする必要があります。
*ローカルペナルティ検出モデルは、BrainScriptを使用して作成する必要があります。
*地域の群衆感情モデルの実験では、地域のペナルティ検出データを組み合わせる必要があります。
*群衆の感情モデルは、歓声や既知のキャッチフレーズなどの既知の音を識別する必要があります。個々の群集感情モデルは、同様の音を検出します。
*ローカルモデルのすべての共有機能は連続変数です。
*共有機能は倍精度を使用する必要があります。後続のレイヤーには、利用可能な総移動平均と標準偏差のメトリックが必要です。
広告
生産の最初の数週間で、次のことが観察されました。
*評価された広告の回答は減少しました。
*ドロップは広告スタイル間で一貫していませんでした。
*トレーニングデータと本番データ全体での機能の分布に一貫性がない分析によると、ユーザーの場所と行動に関する100の数値機能のうち、場所ソースからの47の機能が未加工の機能として使用されています。偏りと分散の問題を解決するために推奨される実験は、10個の線形無相関の特徴を設計することです。
*最初のデータ検出では、群集感情モデルに使用されるトレーニングデータで、ターゲット状態の密度が広範囲に渡っています。
*すべてのペナルティ検出モデルは、確率的勾配降下法（SGD）を使用した推論フェーズの実行が遅すぎることを示しています。
*オーディオサンプルは、キャッチフレーズの長さが地域によって25％〜47％の間で変化することを示しています
*グローバルペナルティ検出モデルのパフォーマンスは、トレーニングセットと検証セットを比較すると、分散は低くなりますが、バイアスが高くなります。機能の変更を実装する前に、すべてのトレーニングと検証のケースを使用してバイアスと分散を確認する必要があります。
*広告応答モデルは、各イベントの開始時にトレーニングし、スポーツイベント中に適用する必要があります。
*マーケットセグメンテーションモデルは、同様の広告応答履歴に合わせて最適化する必要があります。
*サンプリングは、同じ機能を共有するローカルセグメンテーションモデルとグローバルセグメンテーションモデルの間で排他的に相互および集合を保証する必要があります。
*広告に応答するユーザーの傾向を判断する前に、ローカルマーケットセグメンテーションモデルが適用されます。
*広告応答モデルは、機能の非線形境界をサポートする必要があります。
*広告傾向モデルはカットしきい値が0.45であり、加重カッパがから逸脱した場合に再トレーニングが発生します。
0.1 +/- 5％。
*広告傾向モデルは、次の図に示すコスト係数を使用します。

*広告傾向モデルは、次の図に示す提案されたコスト要因を使用します。

*現在および提案されているコスト要因シナリオのパフォーマンス曲線を次の図に示します。