自动化

数据采集

网络服务器将部署在 Google Cloud Run 上,每小时重复从 Iron Hand 获取相关数据。它将以可读格式上传 apy 数据。

数据输入和预处理

为了启动模型训练过程,将加载 GCS 中的可读文件并进行预处理,以便为训练准备高质量的数据。预处理阶段将清理数据、进行特征工程以生成新特征来增强模型的预测能力、对数据进行归一化处理、将数据分成训练集、验证集和测试集等。

超参数调整

调整超参数,如神经元数量、激活函数、学习率、批量大小、损失函数、epochs 等,以提高模型的性能。

模型训练

在这一阶段,定义 LSTM 模型,对其进行训练、预测并评估模型。

模型评估

使用测试集评估模型的性能,确保模型的性能超过一定的阈值,并将其保存到 GCS 中。

模型部署

将保存的模型部署到预测数据中。

持续监控

监控已部署模型的健康状况和性能,并对模型性能的任何异常或漂移设置警报。

反馈与再训练

如果监控阶段检测到漂移或性能下降,则重新训练模型。

Last updated