Python

polarsのDatetime操作にはoffset_byという話

皆さんこんにちは。機械学習エンジニアのwasatingです。 今回も皆さんおなじみpolarsのtips話をしたいと思います。というかタイトルに書いてある通りなんですが… データ分析をする際や、時系列でtrain, testを分割する際に、最新の日付から一定期間等の区切…

ハイパラ設定だけじゃない!hydraで始めるconfig管理

こんにちは。機械学習エンジニアのwasatingです。 皆さんはhydra使っていますか? コマンドラインでハイパラの設定ができることから、機械学習の実験を回す際に重宝するため、私も今更ながら活用し始めました。 活用していく中で、細かいconfigの設定にも便…

polars.selectorsを使ったカラム操作

皆さんこんにちは。 機械学習エンジニアのwasatingです。 今年に入ってから、DS/ML界隈でスタンダードであったpandasから、polarsに乗り換える人が増え始めていると思いますが、皆さんはいかがでしょうか。 私も例に漏れずプライベートでの開発時は完全にpol…

SageMakerとGradioを使ってGPTの簡易デモを作る

皆さんこんにちは。wasatingです。 ここしばらく生成モデル関連の話があちこちでされ、ChatGPTをはじめとして、大きな流れができているなあと思っています。 また、HuggingFaceに日本語向けでオープン化されたGPTシリーズがアップロードされるなど、個人で使…