§
    ¾µÇj\  ã                   ó8  — d Z ddlmZ ddlZddlZddlmZ  ee¦  «                             ¦   «         j	        d         dz  Z
 ed¬¦  «        d	„ ¦   «         Zd
„ Z ed¬¦  «        d„ ¦   «         Z ed¬¦  «        d„ ¦   «         Zd„ Zd„ Zd„ Zd„ Zd„ Zd„ Zdd„ZdS )zHUser-authorized persistent retirement policy for future data operations.é    )Ú	lru_cacheN)ÚPathé   zconfigs/active_dataset.jsoné   )Úmaxsizec                 ó´  — t          j        t          | ¦  «                             ¦   «         ¦  «        }t          |d         ¦  «        }|                     ¦   «         }t          j        |¦  «                             ¦   «         |d         k    rt          d¦  «        ‚t          j        |¦  «        }| 	                    d¦  «        durt          d¦  «        ‚||fS )NÚ
exclusionsÚexclusions_sha256z-Active dataset exclusion policy hash mismatchÚauthorized_by_userTz*Retirement policy lacks user authorization)
ÚjsonÚloadsr   Ú	read_textÚ
read_bytesÚhashlibÚsha256Ú	hexdigestÚ
ValueErrorÚget)ÚpathÚmtime_nsÚsizeÚcontrolÚpolicy_pathÚrawÚpolicys          úD/root/private/project/pallet_detection_v2/pallet/data/eligibility.pyÚ_loadr      sº   € åŒj�˜d™œ×-Ò-Ñ/Ô/Ñ0Ô0€GÝ�w˜|Ô,Ñ-Ô-€KØ
×
 Ò
 Ñ
"Ô
"€CÝ„~�cÑÔ×$Ò$Ñ&Ô&¨'Ð2EÔ*FÒFÐFÝÐHÑIÔIÐIÝŒZ˜‰_Œ_€FØ‡z‚zÐ&Ñ'Ô'¨tÐ3Ð3ÝÐEÑFÔFÐFØ�Fˆ?Ðó    c                  ó–  — t                                ¦   «         si dg ifS t                                ¦   «         } t          t	          t           ¦  «        | j        | j        ¦  «        \  }}t          |d         ¦  «        }|                     ¦   «         }t          t	          |¦  «        |j        |j	        |j        |d         ¦  «         ||fS )NÚframesr	   r
   )
ÚCONTROLÚexistsÚstatr   ÚstrÚst_mtime_nsÚst_sizer   Ú_verify_payloadÚst_ctime_ns)r#   r   r   r   Úpolicy_stats        r   Úactive_policyr*      s´   € Ý�>Š>ÑÔð "Ø�H˜b�>Ð!Ð!Ý�<Š<‰>Œ>€DÝ�C¥™LœL¨$Ô*:¸D¼LÑIÔI�O€GˆVÝ�w˜|Ô,Ñ-Ô-€KØ×"Ò"Ñ$Ô$€KÝ•C˜Ñ$Ô$ kÔ&=¸{Ô?VØÔ'¨Ð1DÔ)EñGô Gð Gà�Fˆ?Ðr   c                 ó¶   — t          j        t          | ¦  «                             ¦   «         ¦  «                             ¦   «         |k    rt          d¦  «        ‚d S )Nz'Active dataset exclusion policy changed)r   r   r   r   r   r   )r   r   Úctime_nsr   Úexpecteds        r   r'   r'   $   sM   € å„~•d˜4‘j”j×+Ò+Ñ-Ô-Ñ.Ô.×8Ò8Ñ:Ô:¸hÒFÐFÝÐBÑCÔCÐCð GÐFr   c                 óº   — t          j        t          | ¦  «                             ¦   «         ¦  «        d         }d„ |D ¦   «         d„ |D ¦   «         d„ |D ¦   «         fS )Nr    c                 óV   — h | ]&}|d          g|                      dg ¦  «        ¢D ]}|’ŒŒ'S ©Úframe_idÚalias_frame_ids©r   ©Ú.0ÚrowÚfids      r   ú	<setcomp>z_indices.<locals>.<setcomp>-   sA   € Ð_Ð_Ð_�S¨S°¬_Ð,^¸s¿wºwÐGXÐZ\Ñ?]Ô?]Ð,^Ð_Ð_ SˆSÐ_Ð_Ð_Ð_r   c                 ó   — h | ]
}|d          ’ŒS )Úsource_sha256© )r5   r6   s     r   r8   z_indices.<locals>.<setcomp>.   s   € Ð2Ð2Ð2 cˆS�Ô!Ð2Ð2Ð2r   c                 óD   — h | ]}|                      d g ¦  «        D ]}|’ŒŒS )Úsource_pathsr3   )r5   r6   r   s      r   r8   z_indices.<locals>.<setcomp>/   s3   € ÐJÐJÐJ�c¨c¯gªg°nÀbÑ.IÔ.IÐJÐJ dˆTÐJÐJÐJÐJr   )r   r   r   r   )r   r   r,   r   Úrowss        r   Ú_indicesr?   *   sg   € åŒ:•d˜4‘j”j×*Ò*Ñ,Ô,Ñ-Ô-¨hÔ7€DØ_Ð_˜DÐ_Ñ_Ô_Ø2Ð2¨TÐ2Ñ2Ô2ØJÐJ˜TÐJÑJÔJðLð Lr   c                  óH   — t          ¦   «         \  } }d„ |d         D ¦   «         S )Nc                 óV   — h | ]&}|d          g|                      dg ¦  «        ¢D ]}|’ŒŒ'S r0   r3   r4   s      r   r8   z exclusion_ids.<locals>.<setcomp>4   sA   € ÐjÐjÐj�C¸¸J¼Ð7iÈ#Ï'Ê'ÐRcÐegÑJhÔJhÐ7iÐjÐj°ˆCÐjÐjÐjÐjr   r    )r*   )Ú_r   s     r   Úexclusion_idsrC   2   s(   € Ý‘”�I€A€vØjÐj˜6 (Ô+ÐjÑjÔjÐjr   c                 óè  — t          ¦   «         \  }}|d         sdS t          |d         ¦  «        }|                     ¦   «         }t          t	          |¦  «        |j        |j        |j        ¦  «        \  }}}t          | dd ¦  «        }t          | dd ¦  «        }	| j	        |v pQt          |o||v ¦  «        p>t          |	o/t	          t          |	¦  «                             ¦   «         ¦  «        |v ¦  «        S )Nr    Fr	   r:   Úpcd)r*   r   r#   r?   r$   r%   r(   r&   Úgetattrr1   ÚboolÚresolve)
Úrecordr   r   r   r#   ÚidsÚhashesÚpathsÚdigestrE   s
             r   Úis_excludedrN   7   sé   € Ý#‘o”o�O€GˆVØ�(Ôð ØˆuÝ�˜Ô%Ñ&Ô&€DØ�9Š9‰;Œ;€DÝ!¥# d¡)¤)¨TÔ-=¸tÔ?OÐQUÔQ]Ñ^Ô^Ñ€Cˆ�Ý�V˜_¨dÑ3Ô3€FÝ
�&˜% Ñ
&Ô
&€CØŒO˜sÐ"ð ?¥d¨6Ð+F°fÀÐ6FÑ&GÔ&Gð ?Ý�CÐ=�C¥ S¡	¤	× 1Ò 1Ñ 3Ô 3Ñ4Ô4¸Ð=Ñ>Ô>ð@r   c                 óT   — t          | ¦  «        rt          d| j        › d�¦  «        ‚d S )Nz7Frame retired by user from future training/annotation: z ; use the active cleaned dataset)rN   r   r1   )rI   s    r   Úrequire_eligiblerP   D   sR   € Ý�6ÑÔð FÝð  EÐSYÔSbð  Eð  Eð  Eñ  Fô  Fð  	FðFð Fr   c                 ó   — d„ | D ¦   «         S )Nc                 ó0   — g | ]}t          |¦  «        °|‘ŒS r;   )rN   )r5   rI   s     r   ú
<listcomp>z$eligible_records.<locals>.<listcomp>J   s%   € ÐDÐDÐD�vµ¸FÑ0CÔ0CÐDˆFÐDÐDÐDr   r;   )Úrecordss    r   Úeligible_recordsrU   I   s   € ØDÐD ÐDÑDÔDÐDr   c                 óL   — ddl m}  || j        | j        di d | j        ¦  «        S )Né   )ÚFrameRecordÚ
annotation)ÚmanifestrX   r1   Úgroup_idÚsource_anchor_hash)ÚframerX   s     r   Úannotation_recordr^   M   s<   € Ø%Ð%Ð%Ð%Ð%Ð%Øˆ;�u”~ u¤~°|ÀRÈØÔ/ñ1ô 1ð 1r   c                 ó<   — t          t          | ¦  «        ¦  «         S )N)rN   r^   )r]   s    r   Úannotation_eligibler`   S   s   € ÝÕ,¨UÑ3Ô3Ñ4Ô4Ð4Ð4r   úoutputs/protocol_v5c                 óP   — t          ¦   «         \  }}|                     d| ¦  «        S )NÚprotocol)r*   r   )Úfallbackr   rB   s      r   Úactive_protocolre   W   s#   € Ý‘”�J€GˆQØ�;Š;�z 8Ñ,Ô,Ð,r   )ra   )Ú__doc__Ú	functoolsr   r   r   Úpathlibr   Ú__file__rH   Úparentsr!   r   r*   r'   r?   rC   rN   rP   rU   r^   r`   re   r;   r   r   ú<module>rk      s~  ðØ NÐ NØ Ð Ð Ð Ð Ð Ø €€€Ø €€€Ø Ð Ð Ð Ð Ð ð ˆ$ˆx‰.Œ.×
 Ò
 Ñ
"Ô
"Ô
*¨1Ô
-Ð0MÑ
M€ð €�1ÐÑÔð	ð 	ñ Ôð	ð	ð 	ð 	ð €�1ÐÑÔðDð Dñ ÔðDð
 €�1ÐÑÔðLð Lñ ÔðLðkð kð kð

@ð 
@ð 
@ðFð Fð Fð
Eð Eð Eð1ð 1ð 1ð5ð 5ð 5ð-ð -ð -ð -ð -ð -r   