Python の並列処理とか
先日作った Minecraft のマップ画像を生成するやつが遅すぎる（7min/region）のをなんとかしたいので， Python で並列処理をする方法を調べて使ってみた。
Thread concurrent.futures.ThreadPoolExecutor を使うというもの。別に pool 使わなくてもいいけど。 でもまあ pool 使った方がいいでしょってことで。
この方法では結局 GIL のせいか全然速くならなかった。むしろ遅くなった。たしか 11min/region とかになった気がする。
Python で Thread を使うのは，主に IO がネックになってる場合っぽい。IO の待ち時間は GIL が解除されるけど，その他の状況では GIL のせいで並列処理というよりむしろ 並行処理になってる。
Process concurrent.futures.ProcessPoolExecutor を使うというもの。 fork できる環境（主にUNIX 系の OS？）ではデフォルトで fork になるって書いてあった。 これがなかなか速くて，なんでか 2 つしかプロセス起動してないのに半分未満の時間で処理できた。 Windows とかでは fork できないから遅いのかもしれないけど，Windows 使ってないのでよくわからない。