AI / ML evaluation
MLE-STAR Ablation
Контрольоване дослідження того, які компоненти Gemini-generated ML pipelines справді покращують model quality.
Про проєкт
Контрольоване дослідження того, які компоненти Gemini-generated ML pipelines справді покращують model quality.
Докази та результати
- Generated candidate pipelines через Gemini API та виконав їх у контрольованому experiment runner.
- Вимикав feature engineering, scaling, tuning, ensembling і model-selection components, щоб ізолювати їхній внесок.
- Звітував N=20 runs із 95% confidence intervals; diabetes study не виявив покращення full pipeline у 10/10 comparisons.