当前位置: 首页 > news >正文

【教程】PyTorch Timer计时器

转载请注明出处:小锋学长生活大爆炸[xfxuezhang.cn]

OpenCV的Timer计时器可以看这篇:Python Timer和TimerFPS计时工具类

Timer作用说明:统计某一段代码的运行耗时。

直接上代码,开箱即用。

import time
import torch
import os
from enum import Enum, unique@unique
class TimerKeys(Enum):START   = 'start'   # 本次调用start函数时的时间戳END     = 'end'     # 本次调用end函数时的时间戳ELAPSED = 'elapsed' # 多次调用start和end函数的总耗时TOTAL   = 'total'   # 本次所耗end-start的时间HISTORY = 'history' # 保存每次的elapsedclass Timer(object):def __init__(self, device: torch.device):super(Timer, self).__init__()self._device = deviceself._record_sxf = {}def start(self, name, history=False):'''开始计时,通过name区分不同的计时器;在start时如果开启了history,就算下次start时没有开启history,history仍然会使用,除非显式调用了reset_all或reset_item,然后再调用start并不开启history,就不会记录。'''torch.cuda.current_stream(self._device).synchronize()if not self._record_sxf.get(name):self._record_sxf[name] = {}self._record_sxf[name][TimerKeys.TOTAL] = 0if history:self._record_sxf[name][TimerKeys.HISTORY] = []else:self._record_sxf[name].pop(TimerKeys.END)self._record_sxf[name].pop(TimerKeys.ELAPSED)self._record_sxf[name][TimerKeys.START] = time.time()def stop(self, name, store=True):'''计算指定name的本次耗时'''torch.cuda.current_stream(self._device).synchronize()if self._record_sxf.get(name) and self._record_sxf[name].get(TimerKeys.START):self._record_sxf[name][TimerKeys.END] = time.time()self._record_sxf[name][TimerKeys.ELAPSED] = self._record_sxf[name][TimerKeys.END] - self._record_sxf[name][TimerKeys.START]return self.store(name) if store else self._record_sxf[name][TimerKeys.ELAPSED]else:print(f'>> 不存在此计时器[{name}],请先start')return Nonedef store(self, name):'''计算指定name的累计耗时'''if not self._record_sxf.get(name):print(f'>> 不存在此计时器[{name}],请先start')return Noneif not self._record_sxf[name].get(TimerKeys.ELAPSED):print(f'>> 请先stop')return Noneself._record_sxf[name][TimerKeys.TOTAL] += self._record_sxf[name][TimerKeys.ELAPSED]if self._record_sxf[name].get(TimerKeys.HISTORY) is not None:self._record_sxf[name][TimerKeys.HISTORY].append(self._record_sxf[name][TimerKeys.ELAPSED])return self._record_sxf[name][TimerKeys.TOTAL]def show_store(self):'''显示所有项目的累计耗时'''print(self._record_sxf)def pretty_show_store(self):print("{", end='')for key, value in self._record_sxf.items():print(f"'{key}': {{")for enum_key, enum_value in value.items():print(f"    {enum_key.name if isinstance(enum_key, Enum) else enum_key}: {enum_value},")print("  },")print("}")def get_store(self):return self._record_sxfdef peak_item(self, name, key=None):if key:return self._record_sxf[name].get(key) if self._record_sxf.get(name) else Nonereturn self._record_sxf.get(name)def reset_item(self, name):self._record_sxf.pop(name)def reset_all(self):self._record_sxf = {}if __name__ == '__main__':timer = Timer(torch.device('cuda:0'))timer.start('a')time.sleep(5)timer.stop('a')# {'a': {'total': 5.005435228347778, 'start': 1693419100.180317, 'end': 1693419105.1857522, 'elapsed': 5.005435228347778}}timer.show_store()print()timer.start('a')time.sleep(2)timer.stop('a')# {'a': {'total': 7.007752180099487, 'start': 1693419105.1859245, 'end': 1693419107.1882415, 'elapsed': 2.002316951751709}}timer.show_store()print()timer.start('b')time.sleep(3)timer.stop('b')# {'a': {'total': 7.007752180099487, 'start': 1693419105.1859245, 'end': 1693419107.1882415, 'elapsed': 2.002316951751709},#  'b': {'total': 3.0033228397369385, 'start': 1693419107.1884048, 'end': 1693419110.1917276, 'elapsed': 3.0033228397369385}}timer.show_store()timer.reset_all()print()timer.start('c')time.sleep(3)timer.start('d')time.sleep(3)timer.stop('d')# {'c': {'total': 0, 'start': 1693419110.1919253},# 'd': {'total': 3.003229856491089, 'start': 1693419113.1927958, 'end': 1693419116.1960256, 'elapsed': 3.003229856491089}}timer.show_store()timer.stop('c')# {'c': {'total': 6.0042500495910645, 'start': 1693419110.1919253, 'end': 1693419116.1961753, 'elapsed': 6.0042500495910645},#  'd': {'total': 3.003229856491089, 'start': 1693419113.1927958, 'end': 1693419116.1960256, 'elapsed': 3.003229856491089}}timer.show_store()timer.reset_all()print()timer.start('e')time.sleep(3)timer.start('f')time.sleep(3)timer.stop('e')# {'e': {'total': 6.004979848861694, 'start': 1693419433.8564444, 'end': 1693419439.8614242, 'elapsed': 6.004979848861694},#  'f': {'total': 0, 'start': 1693419436.859731}}timer.show_store()timer.stop('f')# {'e': {'total': 6.004979848861694, 'start': 1693419433.8564444, 'end': 1693419439.8614242, 'elapsed': 6.004979848861694},#  'f': {'total': 3.00180983543396, 'start': 1693419436.859731, 'end': 1693419439.8615408, 'elapsed': 3.00180983543396}}timer.pretty_show_store()

函数调用示例:

timer = Timer(torch.device('cuda:0'))timer.start('a')# xxxxxxtime_used = timer.stop('a')timer.show_store()

http://www.lryc.cn/news/153637.html

相关文章:

  • 因果推断(六)基于微软框架dowhy的因果推断
  • 探索隧道ip如何助力爬虫应用
  • 题目:2629.复合函数
  • 【实训项目】精点考研
  • 软件测试Pytest实现接口自动化应该如何在用例执行后打印日志到日志目录生成日志文件?
  • 深入理解作用域、作用域链和闭包
  • 7款适合3D建模和渲染的GPU推荐
  • 边缘计算物联网网关在机械加工行业的应用及作用分享
  • (笔记六)利用opencv进行图像滤波
  • WPF C# .NET7 基础学习
  • QT里使用sqlite的问题,好多坑
  • openGauss学习笔记-59 openGauss 数据库管理-相关概念介绍
  • Nginx安装与部署
  • Linux中Tomcat发布war包后无法正常访问非静态资源
  • 大数据、AI和云原生:引领未来软件开发的技术演进
  • Text-to-SQL小白入门(四)指令进化大模型WizardLM
  • 浅谈红队资产信息收集经验
  • list根据对象中某个字段属性去重Java流实现
  • 软件架构设计(三) B/S架构风格-层次架构(一)
  • 大端字节和小端字节
  • (10)(10.8) 固件下载
  • vue实现列表自动滚动效果
  • 如何通过构建遥感光谱反射信号与地表参数之间的关系模型来准确估算植被参数?植被参数光学遥感反演方法(Python)及遥感与生态模型数据同化算法
  • 持续集成与持续交付(CI/CD):探讨在云计算中实现快速软件交付的最佳实践
  • 【LeetCode题目详解】第九章 动态规划part02 62.不同路径 63. 不同路径 II day39补
  • 四维轻云助力在线管理、展示及分享多种地理空间数据
  • CMake 学习笔记
  • docker高级(DockerFile解析)
  • 抽象类实现接口的意义
  • 什么是接口测试,如何做接口测试?