Pythonのチューニング のバックアップ(No.3) - 闘うITエンジニアの覚え書き

[ トップ ]   [ 一覧 | 単語検索 | 最終更新 | ヘルプ ]

• 関連
  • Pythonのパフォーマンス確認
• 参考
  • 科学技術計算のためのPython入門 ――開発基礎、必須ライブラリ、高速化

《参考書籍》

listb や dict の各要素に対して何らかの処理を行うような場合は、内包表記を使用した方が高速

確認用コード

# coding: utf-8
"""内包表記の処理速度確認.

リストの各値に+Nする処理の速度をforループと内包表記で比較する。

"""

import time

def normal(list1, num):
    stime = time.time()
    result = []
    for i in list1:
        result.append(i + num)
    print('forループ - {}'.format(time.time() - stime))
    return result


def tuning(list1, num):
    stime = time.time()
    result = [i + num for i in list1]
    print('内包表記 - {}'.format(time.time() - stime))
    return result


if __name__ == '__main__':

    # 確認用のリスト
    list1 = range(10000)

    # forループ
    result1 = normal(list1, 2)

    # 内包表記
    result2 = tuning(list1, 2)

    # 一応結果が同じか確認
    print(result1 == result2)

結果確認

forループ - 0.001007080078125
内包表記 - 0.0006196498870849609
True

ループや関数からグルーバル変数へのアクセスは控える。
どうしても必要な場合は、ループの外でいったんローカル変数に代入して使用する。

他言語(Java等)より関数呼び出しのオーバーヘッドが大きい為、ループの中で繰り返し呼ばれるような関数はべた書きした方が速く動作する。
可読性向上の為だけに切り出したような関数はべた書きにしてしまった方が速い。

リストやデータフレームに対する&color(red){数値計算}を繰り返し、大量に行なうようなケースでは Numba を使用すれば劇的に改善する場合がある。
ただ、数値計算以外の処理は殆どパフォーマンスは変わらない。(処理によっては遅くなるケースも多々ある)

同じ事を行う場合でも記述方法によってパフォーマンスは変わる †

list や dict の参照コストも考慮する †

可読性とはトレードオフな部分がある †

マルチスレッドは要検証 †