[Python] luigiで動的アウトプット（DB登録）

前回の残課題

どうやってoutputを DB 登録にするか、普段SQLAlchemyを使っているのでSQLAlchemyとの連携をやりたいと思う。

Python

[Python] luigiで動的アウトプット

最近luigiというワークフローフレームワークで Python のバッチ処理を書いている。

この luigi の特徴として複数のタスクで依存関係を持たせることができ、以下のような流れで依存関係を解決する。

Python

Ruby にziplineという gem がある。ファイルのリストを渡すと zip に固めてストリーミングダウンロードしてくれるという Rails 向けの gem だ。今回同じことを Python で行いたく、似たような機能のパッケージ探してみた。

VSCode

VSCode で Python のデバッグをしようとした時、デバッグコンソールではなくターミナルにPython Debug Consoleが立ち上がってきた。デバッグ自体はいつも通りできるけど…なんだか気持ち悪い。

Haskell の勉強がてら、Project Eulerを解いてみる。

Rails

具体的には動画のエンコードを Rails 上でやりたい。

もちろんリクエストを投げてエンコード結果のレスポンスを返すなんてことは無理だ、だからバッチでやる。Rails でバッチ処理のやり方を調べると、Rails4.2 からは ActiveJob という機能を使ってやるらしい。