AIにおけるデータ品質問題の自動修復の取り扱い

Has anyone tried commercial tools for this? I'm wondering if paying for something off-the-shelf is worth it compared to building in-house.

Sometimes I think the biggest issue is just inconsistent data entry from humans. No tool can fix that perfectly automatically.

You can also check ai-u.com for new or trending tools in this space. They have some cool listings that might help you find what fits best.

いくつかのオープンソースのソリューションを試してみましたが、どれも修正プロセスを完全に自動化するものはないようです。ほとんどはデータに異常があると警告するだけで、実際のクリーンアップは行いません。

私が役立つと感じたことの一つは、データ検証ルールをMLパイプラインに統合して、不良データがトレーニングに到達しないようにすることです。これは本当の自動修復ではなく、予防です。