.env使用

  1. 安裝python-dotenv。
  2. 在專案根目錄放.env,並寫入需使用之資訊。
  3. 參考demo_env的寫法將.env之資訊讀入程式。

此範例專案為了展示方便,將.env加入版控。正常情況應該要gitignore。

Pool

參考demo_pool

ML專案架構

python -m

建議使用python -m比較方便,例如執行:

python -m pipe.proc

這樣在pipe/proc.py可以成功引用另一子資料夾src內的foo.py的函數foo。直接使用以下:

python pipe/proc.py

會無法成功import。要成功import需要多做

export PYTHONPATH="${PYTHONPATH}:<your-project-path>" 

srs, pipe & config

可參考本專案src(pipeline的單一步驟)和pipe(連串步驟的pipeline)等資料夾內的寫法,在srcpipe下個放一個config.py,分別給「跑單一步驟」和「跑pipeline」時使用,這樣就可以同時給這兩種情境套用不同的參數。執行單一步驟用python -m src.foo,執行pipeline用python -m pipe.proc