§
    ·¯¸j}  ã                   ó„   — d Z ddlZ	 ddlmZ dZn# e$ r dZdZY nw xY wddlmZ  G d„ d	¦  «        Z G d
„ d¦  «        Z	dS )zE CUDA / AMP utils

Hacked together by / Copyright 2020 Ross Wightman
é    N)ÚampTFé   )Údispatch_clip_gradc                   ó0   — e Zd ZdZ	 	 	 	 	 d	d„Zd„ Zd„ ZdS )
Ú
ApexScalerr   NÚnormFTc                 ó  — t          j        ||¦  «        5 }|                     |¬¦  «         d d d ¦  «         n# 1 swxY w Y   |r<|�$t          t          j        |¦  «        ||¬¦  «         |                     ¦   «          d S d S ©N)Úcreate_graph)Úmode)r   Ú
scale_lossÚbackwardr   Úmaster_paramsÚstep)	ÚselfÚlossÚ	optimizerÚ	clip_gradÚ	clip_modeÚ
parametersr   Úneed_updateÚscaled_losss	            ú_/root/private/project/pallet_detection_v2/.venv/lib/python3.11/site-packages/timm/utils/cuda.pyÚ__call__zApexScaler.__call__   sÎ   € õ Œ^˜D )Ñ,Ô,ð 	<°Ø× Ò ¨lÐ Ñ;Ô;Ð;ð	<ð 	<ð 	<ñ 	<ô 	<ð 	<ð 	<ð 	<ð 	<ð 	<ð 	<øøøð 	<ð 	<ð 	<ð 	<àð 	ØÐ$Ý"¥3Ô#4°YÑ#?Ô#?ÀÐQZÐ[Ñ[Ô[Ð[Ø�NŠNÑÔÐÐÐð	ð 	s   –9¹=Á =c                 óH   — dt           j        v rt          j        ¦   «         S d S )NÚ
state_dict)r   Ú__dict__r   ©r   s    r   r   zApexScaler.state_dict%   s%   € Ø�3œ<Ð'Ð'Ý”>Ñ#Ô#Ð#ð (Ð'ó    c                 óN   — dt           j        v rt          j        |¦  «         d S d S )NÚload_state_dict)r   r   r!   ©r   r   s     r   r!   zApexScaler.load_state_dict)   s.   € Ø¥¤Ð,Ð,ÝÔ 
Ñ+Ô+Ð+Ð+Ð+ð -Ð,r   ©Nr   NFT)Ú__name__Ú
__module__Ú__qualname__Ústate_dict_keyr   r   r!   © r   r   r   r      s\   € € € € € Ø€Nð ØØØØðð ð ð ð"$ð $ð $ð,ð ,ð ,ð ,ð ,r   r   c                   ó8   — e Zd ZdZdd„Z	 	 	 	 	 dd„Zd	„ Zd
„ ZdS )ÚNativeScalerÚ
amp_scalerÚcudac                 óà   — 	 t           j                             |¬¦  «        | _        d S # t          t
          f$ r3}t           j        j                             ¦   «         | _        Y d }~d S d }~ww xY w)N)Údevice)Útorchr   Ú
GradScalerÚ_scalerÚAttributeErrorÚ	TypeErrorr,   )r   r.   Úes      r   Ú__init__zNativeScaler.__init__1   sl   € ð	7Ý œ9×/Ò/°vÐ/Ñ>Ô>ˆDŒLˆLˆLøÝ¥	Ð*ð 	7ð 	7ð 	7Ý œ:œ>×4Ò4Ñ6Ô6ˆDŒLˆLˆLˆLˆLˆLˆLøøøøð	7øøøs   ‚%) ©A-º(A(Á(A-Nr   FTc                 ó4  — | j                              |¦  «                             |¬¦  «         |rg|�0|€J ‚| j                              |¦  «         t	          |||¬¦  «         | j                              |¦  «         | j                              ¦   «          d S d S r
   )r1   Úscaler   Úunscale_r   r   Úupdate)r   r   r   r   r   r   r   r   s           r   r   zNativeScaler.__call__7   sª   € ð 	Œ×Ò˜4Ñ Ô ×)Ò)°|Ð)ÑDÔDÐDØð 	"ØÐ$Ø!Ð-Ð-Ð-Ø”×%Ò% iÑ0Ô0Ð0Ý" :¨y¸yÐIÑIÔIÐIØŒL×Ò˜iÑ(Ô(Ð(ØŒL×ÒÑ!Ô!Ð!Ð!Ð!ð	"ð 	"r   c                 ó4   — | j                              ¦   «         S ©N)r1   r   r   s    r   r   zNativeScaler.state_dictJ   s   € ØŒ|×&Ò&Ñ(Ô(Ð(r   c                 ó:   — | j                              |¦  «         d S r;   )r1   r!   r"   s     r   r!   zNativeScaler.load_state_dictM   s   € ØŒ×$Ò$ ZÑ0Ô0Ð0Ð0Ð0r   )r,   r#   )r$   r%   r&   r'   r5   r   r   r!   r(   r   r   r*   r*   .   sp   € € € € € Ø!€Nð7ð 7ð 7ð 7ð ØØØØð"ð "ð "ð "ð&)ð )ð )ð1ð 1ð 1ð 1ð 1r   r*   )
Ú__doc__r/   Úapexr   Úhas_apexÚImportErrorr   r   r   r*   r(   r   r   ú<module>rA      sÏ   ððð ð €€€ðØÐÐÐÐÐØ€H€HøØð ð ð Ø
€CØ€H€H€Hðøøøð *Ð )Ð )Ð )Ð )Ð )ð,ð ,ð ,ð ,ð ,ñ ,ô ,ð ,ð: 1ð  1ð  1ð  1ð  1ñ  1ô  1ð  1ð  1ð  1s   ˆ ‘	œ