§
    s´Ój
œ  ã                  ó.  — d Z ddlmZ ddlZddlmZmZ ddlmZ ddl	m	Z	m
Z
 ddlZddlZddlZddlZddlZddlmZmZ ddlZddlZddlZddlZddlmZmZ ddlZd	d
lmZmZmZm Z  d	dl!m"Z" d	dl#m$Z$  ee%¦  «         &                    ¦   «         j'        d	         Z(dZ)dddddddœZ*d„ Z+d„ Z,d„ Z-d„ Z.d„ Z/d„ Z0d„ Z1d„ Z2d„ Z3d„ Z4d„ Z5d „ Z6d!„ Z7d"„ Z8d#„ Z9d$„ Z:d%„ Z;d&„ Z<d'„ Z=d(„ Z>d)„ Z?d*„ Z@d+„ ZAd,„ ZBd-„ ZCd.„ ZDd6d/„ZEd7d1„ZFd8d3„ZGd4„ ZHeId5k    r eH¦   «          dS dS )9ay  Build an independent, partially supervised pallet pose dataset.

The supplied GT manifest is an index, not a licence to invent 6-DoF labels.
Source tables, ordered XYZ equivalence, target association and old splits are
audited separately. Neither the formal detector dataset nor the live review DB
is written. The source archive is extracted only inside this run's input area.
é    )ÚannotationsN)ÚCounterÚdefaultdict)ÚThreadPoolExecutor)ÚdatetimeÚtimezone)ÚPathÚPurePosixPath)ÚZIP_DEFLATEDÚZipFileé   )ÚdigestÚload_datasetÚprotected_snapshotÚ
target_key)Úorient_grid)Úread_pcd)Úx_gtÚy_gtÚz_gtÚ
theta_d_gtÚroll_gtÚpitch_gtÚyaw_gtÚ1sha256_or_exact_ordered_float32_xyz_and_viewpointÚ'quarantine_without_automatic_resolutionÚ#exactly_one_existing_human_box_onlyÚ1inherit_formal_no_resplit_archive_only_unassignedÚ.preserve_source_values_no_unverified_transformÚ3null_with_explicit_supervision_mask_never_zero_fill)ÚoverlapÚ	conflictsÚtarget_associationÚsplitÚcoordinatesÚmissing_fieldsc                 óf   — t          j        t          j        ¦  «                             d¬¦  «        S )NÚseconds)Útimespec)r   Únowr   ÚutcÚ	isoformat© ó    ú@/root/private/project/pallet_detection_v2/pallet/pose_dataset.pyr*   r*   ,   s%   € ÝŒ<�œÑ%Ô%×/Ò/¸Ð/ÑCÔCÐCr.   c                ó^   — t          j        | dddd¬¦  «        dz                        ¦   «         S )NFTé   )Úensure_asciiÚ	sort_keysÚindentÚ	allow_nanú
)ÚjsonÚdumpsÚencode©Úvalues    r/   Ú
json_bytesr<   0   s0   € ÝŒJ�u¨5¸DÈÐV[Ð\Ñ\Ô\Ð]aÑa×iÒiÑkÔkÐkr.   c                ój  — t          | ¦  «        } |                      ¦   «         r,|                      ¦   «         |k    rt          d| › �¦  «        ‚d S | j                             dd¬¦  «         |                      | j        dz   ¦  «        }|                     |¦  «         | 	                    | ¦  «         d S )Nz&Refusing to overwrite changed output: T©ÚparentsÚexist_okz.tmp)
r	   ÚexistsÚ
read_bytesÚ
ValueErrorÚparentÚmkdirÚ	with_nameÚnameÚwrite_bytesÚreplace)ÚpathÚrawÚ	temporarys      r/   Úprotected_writerM   4   s¯   € Ý�‰:Œ:€DØ‡{‚{�}„}ð Ø�?Š?ÑÔ Ò#Ð#ÝÐLÀdÐLÐLÑMÔMÐMØˆØ„K×Ò˜d¨TÐÑ2Ô2Ð2Ø—’˜tœy¨Ñ/Ñ0Ô0€IØ×Ò˜#ÑÔÐØ×Ò�dÑÔÐÐÐr.   c                ó@   — t          | t          |¦  «        ¦  «         d S ©N)rM   r<   )rJ   r;   s     r/   Ú
write_jsonrP   @   s    € Ý�D�* UÑ+Ô+Ñ,Ô,Ð,Ð,Ð,r.   c                óˆ   — d                      d„ |D ¦   «         ¦  «        }t          | |                     ¦   «         ¦  «         d S )NÚ c              3  óL   K  — | ]}t          j        |d dd ¬¦  «        dz   V — Œ dS )FT)r2   r3   r5   r6   N©r7   r8   ©Ú.0Úrs     r/   ú	<genexpr>zwrite_rows.<locals>.<genexpr>E   s<   è è € ÐhÐhÐ^_•$”*˜Q¨U¸dÈeÐTÑTÔTÐUYÑYÐhÐhÐhÐhÐhÐhr.   )ÚjoinrM   r9   )rJ   ÚrowsrK   s      r/   Ú
write_rowsr[   D   sA   € Ø
�'Š'ÐhÐhÐcgÐhÑhÔhÑ
hÔ
h€CÝ�D˜#Ÿ*š*™,œ,Ñ'Ô'Ð'Ð'Ð'r.   c                ó|   — d„ t          | ¦  «                             ¦   «                              ¦   «         D ¦   «         S )Nc                ó^   — g | ]*}|                      ¦   «         ¯t          j        |¦  «        ‘Œ+S r-   )Ústripr7   Úloads©rV   Úss     r/   ú
<listcomp>zread_rows.<locals>.<listcomp>J   s-   € ÐTÐTÐT˜aÈ!Ï'Ê'É)Ì)ÐT�DŒJ�q‰MŒMÐTÐTÐTr.   )r	   Ú	read_textÚ
splitlines)rJ   s    r/   Ú	read_rowsre   I   s4   € ØTÐT¥4¨¡:¤:×#7Ò#7Ñ#9Ô#9×#DÒ#DÑ#FÔ#FÐTÑTÔTÐTr.   c                ó  — t          | ¦  «                             dd¦  «        }t          |¦  «        }|r8|                     ¦   «         s$d|j        v sd|v s|t          |¦  «        k    sd|v rt          d| › �¦  «        ‚|S )Nú\ú/z..ú:ú zUnsafe or noncanonical path: )ÚstrrI   r
   Úis_absoluteÚpartsrC   )rG   r;   rJ   s      r/   Úrelative_namern   M   s�   € Ý�‰IŒI×Ò˜d CÑ(Ô(€EÝ˜ÑÔ€DØð A�T×%Ò%Ñ'Ô'ð A¨4°4´:Ð+=Ð+=ÀÈÀÀØ�˜D™	œ	Ò!Ð! V¨u _ _ÝÐ?¸Ð?Ð?Ñ@Ô@Ð@Ø€Lr.   c                óØ   — t          | ¦  «                             ¦   «         } | t          |¦  «        z  }|                     ¦   «                              | ¦  «        st	          d¦  «        ‚|S )NzPath escapes output root)r	   Úresolvern   Úis_relative_torC   )ÚrootrG   rJ   s      r/   Ú	safe_pathrs   V   s]   € Ý�‰:Œ:×ÒÑÔ€DØ•˜dÑ#Ô#Ñ#€DØ�<Š<‰>Œ>×(Ò(¨Ñ.Ô.ð 5ÝÐ3Ñ4Ô4Ð4Ø€Kr.   c           	     óŽ   — t          t          j        t          j        |                      d¦  «        ¦  «        ¦  «        ¦  «        S )Nú	utf-8-sig)ÚlistÚcsvÚ
DictReaderÚioÚStringIOÚdecode)rK   s    r/   Úcsv_rowsr|   ^   s0   € Ý•”�rœ{¨3¯:ª:°kÑ+BÔ+BÑCÔCÑDÔDÑEÔEÐEr.   c                óò   — | �t          | t          ¦  «        rd S 	 t          t          | ¦  «                             ¦   «         ¦  «        }t          j        |¦  «        r|nd S # t          t          f$ r Y d S w xY wrO   )	Ú
isinstanceÚboolÚfloatrk   r^   ÚmathÚisfiniterC   Ú	TypeError)r;   Úresults     r/   Únumberr…   b   s~   € Ø€}�
 5­$Ñ/Ô/€}ØˆtðÝ•s˜5‘z”z×'Ò'Ñ)Ô)Ñ*Ô*ˆÝœ vÑ.Ô.Ð8ˆvˆv°DÐ8øÝ�	Ð"ð ð ð Øˆtˆtðøøøs   ›AA! Á!A6Á5A6c                óè   — | €d S d„ t          | ¦  «                             d¦  «                             d¦  «        D ¦   «         }t          |¦  «        dk    st	          d„ |D ¦   «         ¦  «        rd S |S )Nc                ó,   — g | ]}t          |¦  «        ‘ŒS r-   )r…   r`   s     r/   rb   zvector.<locals>.<listcomp>o   s   € ÐFÐFÐF˜A�f�Q‰iŒiÐFÐFÐFr.   z ()[]ú;é   c              3  ó   K  — | ]}|d u V — Œ	d S rO   r-   ©rV   Úvs     r/   rX   zvector.<locals>.<genexpr>p   s&   è è € Ð9Ð9¨Q˜q D˜yÐ9Ð9Ð9Ð9Ð9Ð9r.   )rk   r^   r$   ÚlenÚany)r;   Úvaluess     r/   Úvectorr�   l   sx   € Ø€}ØˆtØFÐF¥ U¡¤×!1Ò!1°'Ñ!:Ô!:×!@Ò!@ÀÑ!EÔ!EÐFÑFÔF€FÝ
ˆ6�{„{�aÒÐ�3Ð9Ð9°&Ð9Ñ9Ô9Ñ9Ô9ÐØˆtØ€Mr.   c                ó2  — t          | ¦  «        }t          j        d|¦  «        }|r/|                     ¦   «         \  }}}}}}d|z   |z   |z   |z   |z   |z   S t          j        d|¦  «        }|r*dd                     |                     ¦   «         ¦  «        z   S d S )Nz/(\d{2})-(\d{2})-(\d{4})_(\d{2})-(\d{2})-(\d{2})zT:z2(\d{4})-(\d{2})-(\d{2})[ T](\d{2}):(\d{2}):(\d{2})rR   )rk   ÚreÚsearchÚgroupsrY   )	r;   ÚtextÚmÚdÚmoÚyÚhÚmira   s	            r/   Ú
sample_keyrœ   u   sŸ   € Ýˆu‰:Œ:€DÝ
Œ	ÐDÀdÑKÔK€AØð "ØŸXšX™ZœZÑˆˆ2ˆq�!�R˜Ø�A‰v�b‰y˜‰{˜1‰}˜RÑ Ñ!Ð!Ý
Œ	ÐGÈÑNÔN€AØð (Ø�B—G’G˜AŸHšH™JœJÑ'Ô'Ñ'Ð'Øˆ4r.   c                óp   — t          j        ddt          | pd¦  «                             ¦   «         ¦  «        S )Nz	[^a-z0-9]rR   )r’   Úsubrk   Úlowerr:   s    r/   Únormalize_headerr    �   s.   € ÝŒ6�, ¥C¨¨°Ñ$4Ô$4×$:Ò$:Ñ$<Ô$<Ñ=Ô=Ð=r.   c                óœ  ‡‡‡‡‡— g }dŠt          | ¦  «        D ]Ó\  }Šd„ ‰D ¦   «         Šd‰v rd‰v rd‰v rd‰v rˆfd„‰D ¦   «         ŠŒ0‰r¡ˆˆfd„Št           ‰d¦  «        ¦  «        }|€ŒSˆfd	„t          D ¦   «         Št          ˆfd
„t          D ¦   «         ¦  «        rM|                     ||||dz   t           ‰d¦  «        ¦  «        ‰t           ‰d¦  «        ¦  «        ddœ¦  «         ŒÔt          |¦  «        j        dk    �rFt          | ¦  «        dk    �r2t          | d         ¦  «        D �]\  }}t          |¦  «        }|€Œd„ t          D ¦   «         ŠdD ]Š\  }}	}
t          |t          | |         ¦  «        k     r| |         |         nd¦  «         
                    ¦   «         }|                     |
¦  «        r't          |t          |
¦  «        d…         ¦  «        ‰|	<   Œ‹t          |t          | d         ¦  «        k     r| d         |         nd¦  «        }|                     ||||dz   dt          |¦  «        ‰|ddœ	¦  «         �Œ|S )zØOnly explicit GT columns or the known horizontal GT layout are labels.

    In particular x/y/theta, trans_*, icp_* and unnamed normals in result tables
    are predictions, not extra dimensions of ground truth.
    Nc                ó,   — g | ]}t          |¦  «        ‘ŒS r-   )r    r‹   s     r/   rb   zparse_sheet.<locals>.<listcomp>Ž   s!   € Ð2Ð2Ð2¨Õ! !Ñ$Ô$Ð2Ð2Ð2r.   ÚfilenameÚxgtÚygtÚthetadgtc                ó@   •— i | ]}|¯|‰                      |¦  «        “ŒS r-   )Úindex)rV   ÚkÚnamess     €r/   ú
<dictcomp>zparse_sheet.<locals>.<dictcomp>�   s*   ø€ Ð<Ð<Ð<¨A¸!Ð<�a˜Ÿš Q™œÐ<Ð<Ð<r.   c                ó^   •— | ‰v r'‰|          t          ‰¦  «        k     r‰‰|                   nd S rO   ©r�   )r©   ÚheaderÚrows    €€r/   ú<lambda>zparse_sheet.<locals>.<lambda>“   s0   ø€ ¨a°6¨k¨k¸fÀQ¼iÍ#ÈcÉ(Ì(Ò>RÐ>R˜C  q¤	œN˜NÐX\€ r.   c           
     ó\   •— i | ](}|t           ‰t          |¦  «        ¦  «        ¦  «        “Œ)S r-   )r…   r    )rV   r©   Úgets     €r/   r«   zparse_sheet.<locals>.<dictcomp>—   s6   ø€ ÐMÐMÐM¸a�a�  Õ$4°QÑ$7Ô$7Ñ 8Ô 8Ñ9Ô9ÐMÐMÐMr.   c              3  ó,   •K  — | ]}‰|         d uV — Œd S rO   r-   ©rV   r©   r�   s     €r/   rX   zparse_sheet.<locals>.<genexpr>˜   s,   øè è € Ð<Ð<¨Q�6˜!”9 DÐ(Ð<Ð<Ð<Ð<Ð<Ð<r.   r   ÚnormalgtÚexplicit_gt_columns)rœ   ÚtableÚsheetr¯   Úfilename_cellr�   Ú	normal_gtÚkindzground_truth.xlsxé   c                ó   — i | ]}|d “ŒS rO   r-   )rV   r©   s     r/   r«   zparse_sheet.<locals>.<dictcomp>¢   s   € Ð1Ð1Ð1 !�a˜Ð1Ð1Ð1r.   ))r1   r   zX:)r‰   r   zY:)é   r   zZ:rR   é   r1   Ú!source_reference_point_and_normal)	rœ   r·   r¸   Úcolumnr¯   r¹   r�   rº   r»   )Ú	enumeraterœ   Ú	GT_FIELDSrŽ   Úappendrk   r�   r	   rG   r�   r^   Ú
startswithr…   )rZ   r·   r¸   ÚevidenceÚiÚkeyÚcÚcellrW   ÚfieldÚprefixr;   Únormalr²   r®   rª   r¯   r�   s                @@@@@r/   Úparse_sheetrÎ   …   sÉ  øøøøø€ ð €HØ€FÝ˜D‘/”/ð Zð Z‰ˆˆ3Ø2Ð2¨cÐ2Ñ2Ô2ˆØ˜ÐÐ 5¨E > >°e¸u°n°nÈÐW\ÐI\ÐI\Ø<Ð<Ð<Ð<°Ð<Ñ<Ô<ˆFØØð 		ZØ\Ð\Ð\Ð\Ð\ˆCÝ˜S˜S ™_œ_Ñ-Ô-ˆCØˆ{ØØMÐMÐMÐMÅ9ÐMÑMÔMˆFÝÐ<Ð<Ð<Ð<µ)Ð<Ñ<Ô<Ñ<Ô<ð ZØ—’¨s¸UÈUÐ[\Ð]^Ñ[^Ý%(¨¨¨Z©¬Ñ%9Ô%9ÀVÝ!'¨¨¨J©¬Ñ!8Ô!8ÐBWð!Yð !Yñ Zô Zð Zøõ ˆE�{„{ÔÐ.Ò.Ñ.µ3°t±9´9À²>±>å   a¤Ñ)Ô)ð 	>ñ 	>‰GˆAˆtÝ˜TÑ"Ô"ˆCØˆ{ØØ1Ð1¥yÐ1Ñ1Ô1ˆFØ$]ð @ð @Ñ ��5˜&Ý¨!­c°$°q´'©l¬lÒ*:Ð*:˜D œG AœJ˜JÀÑCÔC×IÒIÑKÔK�Ø×#Ò# FÑ+Ô+ð @Ý$*¨5µ°V±´°°Ô+>Ñ$?Ô$?�F˜5‘MøÝ¨!­c°$°q´'©l¬lÒ*:Ð*:˜D œG AœJ˜JÀÑEÔEˆFØ�OŠO¨3¸ÈÐZ[Ð\]ÑZ]Ø­3¨t©9¬9ÀÐU[Ø;ð=ð =ñ >ô >ð >ñ >ð €Or.   c                óJ  ‡— ‰                      d¦  «        rUt          t          t          j        t          j        |                      d¦  «        ¦  «        ¦  «        ¦  «        ‰d¦  «        S ‰                      d¦  «        r:dd l}| 	                    | ¬¦  «        }ˆfd„| 
                    ¦   «         D ¦   «         S dd l}|                     t          j        | ¦  «        dd¬	¦  «        }	 ˆfd
„|D ¦   «         |                     ¦   «          S # |                     ¦   «          w xY w)Nz.csvru   ÚCSVz.xlsr   )Úfile_contentsc                ó„   •‡— g | ];Št          ˆfd „t          ‰j        ¦  «        D ¦   «         ‰‰j        ¦  «        D ]}|‘ŒŒ<S )c                ó:   •— g | ]}‰                      |¦  «        ‘ŒS r-   )Ú
row_values)rV   rÇ   ra   s     €r/   rb   z*parse_table.<locals>.<listcomp>.<listcomp>µ   s#   ø€ Ð5Ð5Ð5 ˆQ�\Š\˜!‰_Œ_Ð5Ð5Ð5r.   )rÎ   ÚrangeÚnrowsrG   )rV   Úitemra   rG   s     @€r/   rb   zparse_table.<locals>.<listcomp>´   ss   øø€ ð Fð Fð F˜½Ø5Ð5Ð5Ð5¥e¨A¬G¡n¤nÐ5Ñ5Ô5°t¸Q¼Vñ9Eô 9Eð Fð F°�ð Fð Fð Fð Fr.   T)Ú	read_onlyÚ	data_onlyc           	     óˆ   •— g | ]>}t          t          |                     d ¬¦  «        ¦  «        ‰|j        ¦  «        D ]}|‘ŒŒ?S )T)Úvalues_only)rÎ   rv   Ú	iter_rowsÚtitle)rV   ra   r×   rG   s      €r/   rb   zparse_table.<locals>.<listcomp>¹   sN   ø€ ÐoÐoÐo˜­{½4ÀÇÂÐX\ÀÑ@]Ô@]Ñ;^Ô;^Ð`dÐfgÔfmÑ/nÔ/nÐoÐo t�ÐoÐoÐoÐor.   )ÚendswithrÎ   rv   rw   Úreaderry   rz   r{   ÚxlrdÚopen_workbookÚsheetsÚopenpyxlÚload_workbookÚBytesIOÚclose)rK   rG   rà   Úbookrã   s    `   r/   Úparse_tablerè   ®   s*  ø€ Ø‡}‚}�VÑÔð `Ý�4¥¤
­2¬;°s·z²zÀ+Ñ7NÔ7NÑ+OÔ+OÑ PÔ PÑQÔQÐSWÐY^Ñ_Ô_Ð_Ø‡}‚}�VÑÔð FØˆˆˆØ×!Ò!°Ð!Ñ4Ô4ˆðFð Fð Fð F˜dŸkšk™mœmð Fñ Fô Fð 	Fà€O€O€OØ×!Ò!¥"¤*¨S¡/¤/¸TÈTÐ!ÑRÔR€DðØoÐoÐoÐo˜dÐoÑoÔoà�
Š
‰Œˆˆøˆ�
Š
‰Œˆˆøøøs   Ã*D ÄD"c                ó>   ‡ ‡— t          ˆ ˆfd„|D ¦   «         ¦  «        S )Nc              3  óæ   •K  — | ]k}‰                      |¦  «        d uoO‰                      |¦  «        d uo8t          ‰|         ‰|         z
  ¦  «        |                     d¦  «        rdndk    V — Œld S )N)Úd_gtr   r   r   gü©ñÒMbP?ç-Cëâ6?)r²   ÚabsrÞ   )rV   r©   ÚleftÚrights     €€r/   rX   zvalues_close.<locals>.<genexpr>¿   s—   øè è € ð ð àð �xŠx˜‰{Œ{ $Ð&ð o¨5¯9ª9°Q©<¬<¸tÐ+Cð oÝ��Q”˜˜aœÑ Ñ!Ô!¨a¯jªjÐ9bÑ.cÔ.cÐ&m d dÐimÒnðð ð ð ð ð r.   )Úall)rî   rï   Úfieldss   `` r/   Úvalues_closerò   ¾   sA   øø€ Ýð ð ð ð ð àðñ ô ñ ô ð r.   c                ór  ‡ ‡‡‡‡‡— ˆ fd„t           D ¦   «         Št          ‰                      d¦  «        ¦  «        }t          ˆfd„dD ¦   «         ¦  «        }|rdn|rdnd}ˆ fd„|D ¦   «         }g }d }t	          ‰¦  «        Šd }|rdnd	Š|dk    �rç|D ]KŠ|rt          ‰‰d
         ‰¦  «        r‰} n-|r*‰d         �"t          j        |‰d         dd¬¦  «        r‰} nŒL|€f|dk    r`ˆfd„|D ¦   «         }	|	rP|	d         Št          ˆˆfd„|	D ¦   «         ¦  «        }
|
r*‰}d||d         dddœ}|d                              ¦   «         }|€| 	                    d¦  «         nÕ|s|d
                              ¦   «         Št          ˆfd„‰D ¦   «         ¦  «        r| 	                    d¦  «         |D ]†Št          ˆfd„‰D ¦   «         ¦  «        rit          ‰‰d
         ‰¦  «        s| 	                    d¦  «         |r;‰d         �3t          j        |‰d         dd¬¦  «        s| 	                    d¦  «         Œ‡|rAdt          j                             |¦  «        cxk    rdk    sn | 	                    d¦  «         n| 	                    d¦  «         ‰                      d¦  «        dk    s(t          ‰                      d¦  «        pd¦  «        d k    r| 	                    d!¦  «         |‰|i d"„ ‰                     ¦   «         D ¦   «         ¥d|d ui¥|t          t!          |¦  «        ¦  «        d#d$d%d&d'd'd(œ}|r||d)<   |S )*Nc                óV   •— i | ]%}|t          ‰                     |¦  «        ¦  «        “Œ&S r-   )r…   r²   )rV   r©   r¯   s     €r/   r«   z$label_from_table.<locals>.<dictcomp>Å   s-   ø€ Ð@Ð@Ð@°�q�& §¢¨¡¤Ñ,Ô,Ð@Ð@Ð@r.   rº   c              3  ó,   •K  — | ]}‰|         d uV — Œd S rO   r-   )rV   r©   Úmanifest_valuess     €r/   rX   z#label_from_table.<locals>.<genexpr>Ç   s-   øè è € ÐXÐX°A� Ô#¨4Ð/ÐXÐXÐXÐXÐXÐXr.   ©r   r   r   Úplanar_xy_thetaÚreference_xyz_normalÚno_usable_gtc                ó8   •— g | ]}|d          ‰d          k    ¯|‘ŒS ©rœ   r-   )rV   Úer¯   s     €r/   rb   z$label_from_table.<locals>.<listcomp>É   s,   ø€ ÐNÐNÐN˜¨¨<¬¸CÀÔ<MÒ)MÐ)M�!Ð)MÐ)MÐ)Mr.   )r   r   r   r�   r   ç�íµ ÷Æ°>©ÚrtolÚatolc                óÚ   •‡— g | ]fŠ‰d          dk    rX‰d         ®dt           j                             ‰d         ¦  «        cxk    rdk    ¯Fn nt          ˆfd„‰D ¦   «         ¦  «        ¯d‰‘ŒgS )r»   rÀ   rº   Nç®Gáz®ï?ç)\�Âõ(ð?c              3  ó8   •K  — | ]}‰d          |         duV — ŒdS ©r�   Nr-   )rV   r©   rý   s     €r/   rX   z.label_from_table.<locals>.<listcomp>.<genexpr>Ý   s0   øè è € ÐEÐE°q˜˜(œ Aœ¨dÐ2ÐEÐEÐEÐEÐEÐEr.   )ÚnpÚlinalgÚnormrð   )rV   rý   Úrequireds    @€r/   rb   z$label_from_table.<locals>.<listcomp>Û   s™   øø€ ð Gð Gð G A°q¸´yÐBeÒ7eÐ7eØ�k”NÐ.°3½"¼)¿.º.ÈÈ;ÌÑ:XÔ:XÐ3`Ð3`Ò3`Ð3`Ð\`Ò3`Ð3`Ð3`Ð3`Ð3`ÝÐEÐEÐEÐE¸HÐEÑEÔEÑEÔEð 4að  Ø3`Ð3`Ð3`r.   c              3  óš   •K  — | ]E}t          ‰d          |d          ‰¦  «        o#t          j        ‰d         |d         dd¬¦  «        V — ŒFdS )r�   rº   r   rþ   rÿ   N)rò   r  Úallclose)rV   rý   Úfirstr
  s     €€r/   rX   z#label_from_table.<locals>.<genexpr>à   sq   øè è € ð -ð -àõ  ,¨E°(¬O¸A¸h¼KÈÑQÔQð  XÝœ E¨+Ô$6°q¸´~È1ÐRVÐWÑWÔWð-ð -ð -ð -ð -ð -r.   Ú5index_value_differs_from_explicit_authoritative_tableT)rË   Úmanifest_valueÚauthoritative_table_valueÚreasonÚ0source_table_values_used_without_estimating_poseÚ,manifest_not_verified_in_authoritative_tablec              3  ó,   •K  — | ]}‰|         d u V — Œd S rO   r-   r´   s     €r/   rX   z#label_from_table.<locals>.<genexpr>ð   s,   øè è € Ð7Ð7¨�6˜!”9 Ð$Ð7Ð7Ð7Ð7Ð7Ð7r.   Úincomplete_source_labelc              3  ó8   •K  — | ]}‰d          |         duV — ŒdS r  r-   )rV   r©   r×   s     €r/   rX   z#label_from_table.<locals>.<genexpr>ó   s1   øè è € ÐGÐG¸�t˜H”~ aÔ(°Ð4ÐGÐGÐGÐGÐGÐGr.   Ú'conflicting_rows_in_authoritative_tablerì   Ú*conflicting_normals_in_authoritative_tabler  r  Úinvalid_normal_lengthÚhas_conflictÚYÚn_value_variantsr   Ú,source_gt_conflict_requires_human_resolutionc                ó   — i | ]
\  }}||d u“ŒS rO   r-   )rV   r©   rŒ   s      r/   r«   z$label_from_table.<locals>.<dictcomp>ÿ   s"   € ÐLÐLÐL±T°Q¸  1¨D =ÐLÐLÐLr.   Ú!source_table_native_untransformedÚm_as_source_packageÚdegree_as_source_packageÚ)source_table_not_assumed_geometric_centerF)r»   r�   rº   Úsupervision_maskrÆ   ÚissuesÚcoordinate_frameÚposition_unitÚ
angle_unitÚreference_point_definitionÚsix_dof_completeÚrigid_transform_availableÚindex_correction)rÃ   r�   r²   rð   Údictrò   r  r  ÚcopyrÄ   rŽ   r  r	  ÚintÚitemsÚsortedÚset)r¯   rÆ   rÍ   Úplanarr»   Ú
candidatesr$  Ú
correctionÚchosenÚraw_candidatesÚ
consistentr„   r  r×   rö   r
  r�   s   `           @@@@@r/   Úlabel_from_tabler8  Ä   s\  øøøøøø€ Ø@Ð@Ð@Ð@µiÐ@Ñ@Ô@€OÝ�C—G’G˜KÑ(Ô(Ñ)Ô)€FÝÐXÐXÐXÐXÐ9WÐXÑXÔXÑXÔX€FØ &Ð`ÐÐÀfÐ,`Ð,BÐ,BÐR`€DØNÐNÐNÐN˜XÐNÑNÔN€JØ€FØ€JÝ�/Ñ"Ô"€FØ€FØ17ÐUÐ-Ð-Ð=U€HØˆ~ÒÑØð 	ð 	ˆDØð �, ¸¸X¼ÈÑQÔQð Ø�Ø�Øð ˜$˜{Ô+Ð7½B¼KÈÐPTÐU`ÔPaÐhiÐptÐ<uÑ<uÔ<uÐ7Ø�Ø�øØˆ>˜dÐ&<Ò<Ð<ðGð Gð Gð G¨ð Gñ Gô GˆNð ð 6Ø$ QÔ'�Ýð -ð -ð -ð -ð -à+ð-ñ -ô -ñ -ô -�
ð ð 6Ø �FØ(3ÀVØ4:¸;Ô4GØ!XØKOð Qð  Q�Jð " +Ô.×3Ò3Ñ5Ô5�FØˆ>Ø�MŠMÐHÑIÔIÐIÐIð ð 1Ø Ô)×.Ò.Ñ0Ô0�ÝÐ7Ð7Ð7Ð7¨hÐ7Ñ7Ô7Ñ7Ô7ð 9Ø—’Ð7Ñ8Ô8Ð8Ø"ð Tð T�ÝÐGÐGÐGÐG¸hÐGÑGÔGÑGÔGð TÝ'¨°°X´ÀÑIÔIð QØŸšÐ&OÑPÔPÐPØð T $ {Ô"3Ð"?ÍÌÐTZÐ[_Ð`kÔ[lÐrsÐy}ÐH~ÑH~ÔH~Ð"?ØŸšÐ&RÑSÔSÐSøØð 	3˜#¥¤§¢°Ñ!7Ô!7Ð?Ð?Ò?Ð?¸4Ò?Ð?Ð?Ð?Ø�MŠMÐ1Ñ2Ô2Ð2øà�Š�nÑ%Ô%Ð%Ø
‡w‚wˆ~ÑÔ #Ò%Ð%­¨S¯WªWÐ5GÑ-HÔ-HÐ-MÈAÑ)NÔ)NÐQRÒ)RÐ)RØ�ŠÐDÑEÔEÐEØ f¸6ØnÐLÐL¸V¿\º\¹^¼^ÐLÑLÔLÐnÈkÐ[aÐimÐ[mÐnÐnØ¥f­S°©[¬[Ñ&9Ô&9Ø?Ø.Ð>XØ&QØ!ÀðGð G€Fð Ð7¨Z�&Ð+Ñ,Ø€Mr.   c                óè   — t          j        |                      dg d¢¦  «        t          ¬¦  «        }|j        dk    s&t          j        |¦  «                             ¦   «         st          d¦  «        ‚|S )NÚ	VIEWPOINT)Ú0r;  r;  Ú1r;  r;  r;  ©Údtype)é   zInvalid PCD VIEWPOINT)r  Úasarrayr²   r€   Úshaper‚   rð   rC   )r®   r„   s     r/   Ú	viewpointrB  	  sh   € ÝŒZ˜Ÿ
š
 ;Ð0MÐ0MÐ0MÑNÔNÕV[Ð\Ñ\Ô\€FØ„|�tÒÐ¥2¤;¨vÑ#6Ô#6×#:Ò#:Ñ#<Ô#<ÐÝÐ0Ñ1Ô1Ð1Ø€Mr.   c                ód  — t          | ¦  «        \  }}t          |¦  «        \  }}|j        |j        k    s/t          j        t	          |¦  «        t	          |¦  «        ¦  «        sd S t          j        |d d …d d…f         |d d …d d…f         d¬¦  «        sd S t          j        ||d¬¦  «        rdndS )Nr‰   T©Ú	equal_nanÚordered_xyzi_equalÚ#ordered_xyz_equal_intensity_differs)r   rA  r  Úarray_equalrB  )rî   rï   ÚhaÚaÚhbÚbs         r/   Úcompare_cloudsrM    s²   € Ý�T‰NŒN�E€BˆÝ�U‰OŒO�E€BˆØ„w�!”'ÒÐ¥¤µ	¸"±´½yÈ¹}¼}Ñ!MÔ!MÐØˆtÝŒ>˜!˜A˜A˜A˜r ˜r˜Eœ( A a a a¨¨!¨ e¤H¸Ð=Ñ=Ô=ð ØˆtÝ#%¤>°!°QÀ$Ð#GÑ#GÔ#GÐrÐÐÐMrÐrr.   c                ó²  — |                      |g ¦  «        }t          |¦  «        dk    rdd d„ |D ¦   «         dœS |r|}n|                      |g ¦  «        }g }|D ]š}	t          |	d         d         ¦  «        }
t          |
¦  «        |vr?t	          |
¦  «        }||	d         k    rt          d|
› �¦  «        ‚||t          |
¦  «        <   |rd	nt          | |
¦  «        }|r|                     |	|f¦  «         Œ›t          |¦  «        dk    r:|d
         \  }	}||	d         |	d         |	d         |	d         |	d         |	d         gdœS |rdn|rdndd d„ |D ¦   «         dœS )Nr   Úambiguous_exact_matchc                ó   — g | ]
}|d          ‘ŒS ©Úframe_idr-   ©rV   Úfs     r/   rb   z find_overlap.<locals>.<listcomp>  s    € ÐQoÐQoÐQoÐdeÐRSÐT^ÔR_ÐQoÐQoÐQor.   ©r»   rR  r3  Úsource_pathsÚpcdÚsource_anchor_hashzFormal raw source changed: Úsha256_exactr   rR  r$   Úgroup_idÚ	instances)r»   rR  r$   rZ  r[  Úformal_pcd_sha256r3  Úambiguous_geometry_matchÚsame_timestamp_not_equivalentÚnot_in_formal_datasetc                ó   — g | ]
}|d          ‘ŒS rQ  r-   rS  s     r/   rb   z find_overlap.<locals>.<listcomp>3  s   € Ð(KÐ(KÐ(K¸1¨¨:¬Ð(KÐ(KÐ(Kr.   )r²   r�   r	   rk   r   rC   rM  rÄ   )rJ   ÚsharÈ   Úby_hashÚby_timeÚchecked_hashesÚexactr3  ÚmatchesrT  Úsource_pathÚactualr»   s                r/   Úfind_overlapri    sÍ  € Ø�KŠK˜˜RÑ Ô €EÝ
ˆ5�z„z�A‚~€~Ø/¸TÐQoÐQoÐinÐQoÑQoÔQoÐpÐpÐpØð *Øˆ
ˆ
à—[’[  bÑ)Ô)ˆ
Ø€GØð 	&ð 	&ˆÝ˜1˜^Ô,¨UÔ3Ñ4Ô4ˆÝˆ{ÑÔ >Ð1Ð1Ý˜KÑ(Ô(ˆFØ˜Ð/Ô0Ò0Ð0Ý Ð!L¸{Ð!LÐ!LÑMÔMÐMØ/5ˆN�3˜{Ñ+Ô+Ñ,Ø!&ÐMˆ~ˆ~­N¸4ÀÑ,MÔ,MˆØð 	&Ø�NŠN˜A˜t˜9Ñ%Ô%Ð%øÝ
ˆ7�|„|�qÒÐØ˜!”*‰ˆˆ4Ø¨!¨J¬-À!ÀGÄ*Ø˜*œ°A°k´NØ!"Ð#7Ô!8ÈÈ:ÌÈðYð Yð 	Yð 3:ð  JÐ.Ð.Ðblð  @JÐ?^Ð?^ð  sJØÐ(KÐ(KÀ
Ð(KÑ(KÔ(KðMð Mð Mr.   c           
     ój  — g }t          | ¦  «        5 }d„ |                     ¦   «         D ¦   «         }t          |¦  «        t          t          |¦  «        ¦  «        k    rt	          d¦  «        ‚|                     ¦   «         D �]}|                     ¦   «         rŒt          j        |j        dz	  ¦  «        rt	          d¦  «        ‚t          ||j
        ¦  «        }|                     |¦  «        }t          |¦  «        |j        k    rt	          d¦  «        ‚t          ||¦  «         |                     |j
        t          |¦  «        t          j        |¦  «                             ¦   «         t          j        |¦  «                             ¦   «         dœ¦  «         �Œ	 d d d ¦  «         n# 1 swxY w Y   |S )Nc                óD   — g | ]}|                      ¦   «         °|j        ‘ŒS r-   )Úis_dirr£   )rV   rÇ   s     r/   rb   z"extract_inputs.<locals>.<listcomp>9  s'   € ÐDÐDÐD ¸¿º¹¼ÐD�”ÐDÐDÐDr.   zDuplicate ZIP pathsé   zZIP symlinks are not acceptedzZIP member size mismatch)ÚmemberÚbytesÚsha256Úmd5)r   Úinfolistr�   r1  rC   rl  ÚstatÚS_ISLNKÚexternal_attrrs   r£   ÚreadÚ	file_sizerM   rÄ   Úhashlibrp  Ú	hexdigestrq  )Úarchiverr   Ú	inventoryÚzrª   ÚinforJ   rK   s           r/   Úextract_inputsr~  6  sÞ  € Ø€IÝ	�Ñ	Ô	ð a˜QØDÐD Q§Z¢Z¡\¤\ÐDÑDÔDˆÝˆu‰:Œ:��S ™ZœZ™œÒ(Ð(ÝÐ2Ñ3Ô3Ð3Ø—J’J‘L”Lð 	añ 	aˆDØ�{Š{‰}Œ}ð ØÝŒ|˜DÔ.°"Ñ4Ñ5Ô5ð BÝ Ð!@ÑAÔAÐAÝ˜T 4¤=Ñ1Ô1ˆDà—&’&˜‘,”,ˆCÝ�3‰xŒx˜4œ>Ò)Ð)Ý Ð!;Ñ<Ô<Ð<Ý˜D #Ñ&Ô&Ð&Ø×Ò¨¬ÅÀCÁÄÝ!œ.¨Ñ-Ô-×7Ò7Ñ9Ô9Å'Ä+ÈcÑBRÔBR×B\ÒB\ÑB^ÔB^ð`ð `ñ aô að añ að	að	að að añ aô að að að að að að aøøøð að að að að" Ðs   ’F	F(Æ(F,Æ/F,c                ó  ‡ ‡— d„ |D ¦   «         }t          |¦  «        dk    rt          d¦  «        ‚t          t          |d         d         ¦  «        j        ¦  «        Šd„ |D ¦   «         }ˆˆ fd„} |d¦  «         |d	¦  «         |d
¦  «        }}}t          d„ |D ¦   «         ¦  «        t          |¦  «        k    rt          d¦  «        ‚|df|dffD ]Õ\  }}	g }
|D ]�}‰dz   t          ||	         ¦  «        z   }||         }t          |d         ¦  «        |d         k    s$|d                              ¦   «         |d         k    rt          d|› �¦  «        ‚|
                     |¦  «         Œ�t          |
¦  «        t          t          |
¦  «        ¦  «        k    rt          d¦  «        ‚ŒÖd„ |D ¦   «         }|ˆfd„|D ¦   «         k    rt          d¦  «        ‚|D ]©}|d         sŒ|‰dz   t          |d         ¦  «        z            }t          |d         ¦  «        |d         k    s!|d          
                    |d         ¦  «        st          d¦  «        ‚t          |d         ¦  «        |d         k    rt          d¦  «        ‚Œª‰||||fS )Nc                óN   — g | ]"}t          |d          ¦  «        j        dk    ¯ |‘Œ#S )rn  úgt_manifest.csv)r	   rG   rU   s     r/   rb   z&inventory_metadata.<locals>.<listcomp>M  s2   € ÐUÐUÐU�q­¨a°¬kÑ):Ô):Ô)?ÐCTÒ)TÐ)T�Ð)TÐ)TÐ)Tr.   r   zExpected one GT manifestr   rn  c                ó    — i | ]}|d          |“ŒS )rn  r-   rU   s     r/   r«   z&inventory_metadata.<locals>.<dictcomp>Q  s   € Ð0Ð0Ð0 ˆa�Œk˜1Ð0Ð0Ð0r.   c                ón   •— t          t          ‰‰dz   | z   ¦  «                             ¦   «         ¦  «        S )Nrh   )r|   rs   rB   )rG   Úbaserr   s    €€r/   r°   z$inventory_metadata.<locals>.<lambda>R  s-   ø€ �¥¨4°°c±¸$±Ñ!?Ô!?×!JÒ!JÑ!LÔ!LÑMÔM€ r.   r�  õ   æ¸…å�•_ç‚¹äº‘.csvõ   æ¸…å�•_GTè¡¨æ ¼.csvc                ó   — h | ]
}|d          ’ŒS rü   r-   rU   s     r/   ú	<setcomp>z%inventory_metadata.<locals>.<setcomp>T  s   € Ð*Ð*Ð* ˆAˆlŒOÐ*Ð*Ð*r.   zGT sample keys are not uniqueÚ
pcd_packedÚtable_packedrh   ro  rq  z Archive inventory disagreement: zDuplicate inventory pathc                óT   — h | ]%}|d                                d¦  «        ¯|d          ’Œ&S )rn  ú.pcd©rÞ   rU   s     r/   rˆ  z%inventory_metadata.<locals>.<setcomp>`  s3   € ÐQÐQÐQ !°A°h´K×4HÒ4HÈÑ4PÔ4PÐQ�!�H”+ÐQÐQÐQr.   c                óF   •— h | ]}‰d z   t          |d         ¦  «        z   ’ŒS )rh   r‰  )rn   )rV   rW   r„  s     €r/   rˆ  z%inventory_metadata.<locals>.<setcomp>a  s.   ø€ ÐNÐNÐNÀ!�d˜3‘h�}¨Q¨|¬_Ñ=Ô=Ñ=ÐNÐNÐNr.   z*Cloud inventory does not cover the archiveÚ	pcd_bytesÚpcd_md5z%GT manifest PCD identity disagreementrœ   z"GT manifest timestamp disagreement)r�   rC   rk   r
   rD   rn   r.  rŸ   rÄ   r1  rÅ   rœ   )rr   r{  Ú	manifestsÚlookupÚloadrZ   ÚcloudsÚtablesÚrecordsrË   Úmembersr¯   rG   rh  Ú
actual_pcdr„  s   `              @r/   Úinventory_metadatar™  L  sá  øø€ ØUÐU˜IÐUÑUÔU€IÝ
ˆ9�~„~˜ÒÐÝÐ3Ñ4Ô4Ð4Ý�}˜Y qœ\¨(Ô3Ñ4Ô4Ô;Ñ<Ô<€DØ0Ð0 iÐ0Ñ0Ô0€FØMÐMÐMÐMÐM€DØ˜4Ð 1Ñ2Ô2°D°DÐ9LÑ4MÔ4MÈtÈtÐTiÑOjÔOj�&ˆ&€DÝ
Ð*Ð* TÐ*Ñ*Ô*Ñ+Ô+­s°4©y¬yÒ8Ð8ÝÐ8Ñ9Ô9Ð9Ø" LÐ1°F¸NÐ3KÐLð 	9ð 	9‰ˆ�ØˆØð 	!ð 	!ˆCØ˜‘8�M¨#¨e¬*Ñ5Ô5Ñ5ˆDØ˜D”\ˆFÝ�3�w”<Ñ Ô  F¨7¤OÒ3Ð3°s¸5´z×7GÒ7GÑ7IÔ7IÈVÐTYÌ]Ò7ZÐ7ZÝ Ð!JÀDÐ!JÐ!JÑKÔKÐKØ�NŠN˜4Ñ Ô Ð Ð Ýˆw‰<Œ<�3�s 7™|œ|Ñ,Ô,Ò,Ð,ÝÐ7Ñ8Ô8Ð8ð -àQÐQ yÐQÑQÔQ€JØÐNÐNÐNÐNÀvÐNÑNÔNÒNÐNÝÐEÑFÔFÐFØð Cð CˆØ�<Ô ð 	ØØ˜˜S™¥¨s°<Ô/@Ñ!AÔ!AÑAÔBˆÝˆs�;ÔÑ Ô  F¨7¤OÒ3Ð3¸6À%¼=×;SÒ;SÐTWÐXaÔTbÑ;cÔ;cÐ3ÝÐDÑEÔEÐEÝ�c˜,Ô'Ñ(Ô(¨C°Ô,=Ò=Ð=ÝÐAÑBÔBÐBð >à��v˜v vÐ-Ð-r.   c           	     óþ  — t          | ¦  «        \  }}t          j        |d d …d d…f         ¦  «                             d¬¦  «        t          j                             t          j        |d d …d d…f         ¦  «        d¬¦  «        dk    z  }|t          |¦  «        t          | 	                    ¦   «         ¦  «        dd„ | 
                    dg ¦  «        D ¦   «         v t          |¦  «                             ¦   «         dd	œS )
Nr‰   r   ©Úaxisç:Œ0âŽyE>Ú	intensityc                ó6   — g | ]}|                      ¦   «         ‘ŒS r-   )rŸ   r`   s     r/   rb   z"cloud_metadata.<locals>.<listcomp>r  s    € Ð,XÐ,XÐ,X¸1¨Q¯WªW©Y¬YÐ,XÐ,XÐ,Xr.   ÚFIELDSÚsource_pcd_native_no_rescaling)r®   Úpoint_countÚvalid_xyz_countÚintensity_presentrB  Úcoordinate_unit)r   r  r‚   rð   r  r	  Ú
nan_to_numr�   r.  Úsumr²   rB  Útolist)rJ   r®   ÚpointsÚ	xyz_valids       r/   Úcloud_metadatar«  n  sö   € Ý˜d‘^”^�N€FˆFÝ”˜F 1 1 1 b q b 5œMÑ*Ô*×.Ò.°AÐ.Ñ6Ô6½"¼)¿.º.ÍÌÐW]Ð^_Ð^_Ð^_ÐacÐbcÐacÐ^cÔWdÑIeÔIeÐkl¸.Ñ:mÔ:mÐptÒ:tÑu€IØ­S°©[¬[ÍSÐQZ×Q^ÒQ^ÑQ`ÔQ`ÑMaÔMaØ(Ð,XÐ,XÀÇ
Â
È8ÐTVÑ@WÔ@WÐ,XÑ,XÔ,XÐXÝ˜vÑ&Ô&×-Ò-Ñ/Ô/ÐDdðfð fð fr.   c                óà   — t          | ¦  «                             ¦   «         }t          j        |¦  «                             ¦   «         |k    rt          d| › �¦  «        ‚t          ||¦  «         d S )NzSource asset changed: )r	   rB   rx  rp  ry  rC   rM   )ÚsourceÚdestinationÚexpectedrK   s       r/   Ú
copy_boundr°  v  sg   € Ý
ˆv‰,Œ,×
!Ò
!Ñ
#Ô
#€CÝ„~�cÑÔ×$Ò$Ñ&Ô&¨(Ò2Ð2ÝÐ:°&Ð:Ð:Ñ;Ô;Ð;Ý�K Ñ%Ô%Ð%Ð%Ð%r.   c
                ó
  ‡— |r|d         nd }
|rt          |d         ¦  «        j        nEt          j        |d                              ¦   «         ¦  «                             ¦   «         d d…         }|r|d         nd}|	› d|› d|› �}|rt          |d         d	         ¦  «        n(t          ||dz   t          |d
         ¦  «        z   ¦  «        }|r|d         nt          |¦  «        }t          || |dz   z  |¦  «         t          |¦  «        \  }}t          j        |d d …d d…f         ¦  «                             d¬¦  «        t          j                             t          j        |d d …d d…f         ¦  «        d¬¦  «        dk    z  }||t          j        |d d …df         ¦  «        t          j        t%          |¦  «        t          j        ¬¦  «        dœ}i d|“d|d         “d|d         “d|	“d|“d|
“d|r|d         nd|d         d d…         z   “d|d
         “d|dz   “d|“d|dz   “d|“d|“d d “d!d “d"d#“d$d%“d d d&|	d'v d&d(|d)œ¥}|�r¬|d*         \  }}t%          |¦  «        ||z  k    rt)          d+¦  «        ‚t+          t          j        t%          |¦  «        t          j        ¬¦  «                             ||¦  «        |d,         ¦  «        }||d-<   |                     |d.z   |d/z   ||g|d0         |d         |d,                              d1¦  «        �|d,                              d1¦  «        d2z  nd |d,         |d3         |d4         ¬5¦	  «	         d6D ]B\  }}t          t          |||         ¦  «        | ||z   z  |d7         ||                  ¦  «         ŒC|	dk    rZt%          |d4         ¦  «        dk    rt)          d8¦  «        ‚|                     t3          |
d9¦  «        |d4         d9         d:¬;¦  «         | |dz   z  }|                     ¦   «         r‘t          j        |d&¬<¦  «        5 Št9          ‰j        ¦  «        t9          |¦  «        k    s-t=          ˆfd=„|                     ¦   «         D ¦   «         ¦  «        rt)          d>¦  «        ‚	 d d d ¦  «         n# 1 swxY w Y   nGtA          j!        ¦   «         }t          j"        |fi |¤Ž tG          || $                    ¦   «         ¦  «         tK          | |d?z   z  |¦  «         |S )@NrR  Úimagerœ   é   r$   Ú
unassignedrh   rV  rW  r‰  rX  rŒ  r‰   r   r›  r�  r=  )Úpoints_xyziÚ	valid_xyzÚvalid_intensityÚsource_point_indexÚ	sample_idÚcapture_timeÚsubsetrZ  zarchive/é
   Úsource_archive_pcdÚ
pointcloudÚpointcloud_sha256r©  z.npzÚposer!   Údetection_target_keyÚbox_xywhr#   Ú"source_sample_only_no_existing_boxÚpointcloud_coordinate_unitr¡  F©r!   Úarchive_onlyT)Úpointcloud_scale_to_mÚcoordinate_transform_to_robotÚsix_dof_training_eligibleÚ source_task_supervision_eligibleÚnegative_exampleÚ#source_reference_not_assumed_centerÚinput_headerÚsizez%Formal cloud differs from native gridÚsensor_policyÚpixel_to_source_indexú.pngú.sensor.npzÚpixel_rotation_degreesÚscale_to_mmiè  r[  Úboxes)	r²  ÚsensorÚnative_sizerÓ  Úoriginal_splitrÇ  rÏ  Úformal_instancesÚformal_boxes))r²  rÑ  )rÖ  rÒ  Úfilesz<A pose target cannot be assigned to ambiguous detector boxesr   Ú0unique_existing_human_box_frame_level_assumption)rÁ  rÂ  r#   ©Úallow_picklec              3  óZ   •K  — | ]%\  }}t          j        ‰|         |d ¬¦  «         V — Œ&dS )TrD  N)r  rH  )rV   r©   rŒ   Úolds      €r/   rX   z!export_example.<locals>.<genexpr>®  sC   øè è € Ð3zÐ3zÑdgÐdeÐfg½¼ÀsÈ1ÄvÈaÐZ^Ð8_Ñ8_Ô8_Ð4_Ð3zÐ3zÐ3zÐ3zÐ3zÐ3zr.   zExisting point tensor differsz.json)&r	   Ústemrx  rp  r9   ry  rs   rn   r   r°  r   r  r‚   rð   r  r	  r¦  Úaranger�   Úint32rC   r   ÚreshapeÚupdater²   r   rA   r“  r1  rÛ  rŽ   r/  ry   rå   Úsavez_compressedrM   ÚgetvaluerP   )ÚdatasetÚinputsr„  r¯   Úlabelr!   Úformalr­  Ú
annotationÚcategoryÚfidrÈ   r$   rÌ   Úraw_pathÚraw_shar®   rK   ÚvalidÚoutputÚrecordÚwrš   ÚindicesrË   ÚsuffixÚnpz_pathÚbufferrà  s                               @r/   Úexport_examplerù  }  sB  ø€ Ø &Ð
0ˆ&�Ô
Ð
¨D€CØ(.Ð
o�$ˆv�gŒÑ
Ô
Ô
$Ð
$µG´NÀ3À|ÔCT×C[ÒC[ÑC]ÔC]Ñ4^Ô4^×4hÒ4hÑ4jÔ4jÐknÐlnÐknÔ4o€CØ%Ð7ˆF�7ŒOˆO¨<€EØÐ(Ð(˜5Ð(Ð( 3Ð(Ð(€FØ6<Ð}�t�F˜>Ô*¨5Ô1Ñ2Ô2Ð2Å)ÈFÐSWÐX[ÑS[Õ\iÐjmÐnzÔj{Ñ\|Ô\|ÑS|ÑB}ÔB}€HØ.4ÐJˆfÐ)Ô*Ð*½&ÀÑ:JÔ:J€GÝˆx˜ &¨¡-Ñ0°'Ñ:Ô:Ð:Ý˜8Ñ$Ô$�K€FˆCÝŒK˜˜A˜A˜A˜r ˜r˜Eœ
Ñ#Ô#×'Ò'¨QÐ'Ñ/Ô/µ2´9·>²>Å"Ä-ÐPSÐTUÐTUÐTUÐVXÐWXÐVXÐTXÔPYÑBZÔBZÐ`a°>Ñ3bÔ3bÐeiÒ3iÑj€Eà ¨uÍÌÐUXÐYZÐYZÐYZÐ[\ÐY\ÔU]ÑI^ÔI^Ý œi­¨C©¬µr´xÐ@Ñ@Ô@ðBð B€Fð ˆk˜3ð   ¨c°,Ô.?ð  ÀÐQTÐUcÔQdð  Ø�(ð Ø# Uð Ø,6¸ð à¨&ÐY�F˜:Ô&Ð&°jÀÀ^ÔATÐUXÐVXÐUXÔAYÑ6Yð ð 	˜c ,Ô/ð ð 2>¸vÀf¹}ð ð ObÐcjð ð 	�&˜‘-ð	 ð "(¨ð	 ð
 	�7ð ð
 3°Dð ð
 ;EÀdð ð 	ÐBð ð 	%Ð&Fð ð "&Ø)-ÈEØ,4Ð8RÐ,RØ!È$Øð ð  ð  €Fð ñ WØ�fŒ~‰ˆˆ1Ýˆs‰8Œ8�q˜‘sŠ?ˆ?ÝÐDÑEÔEÐEÝ�bœi­¨C©¬µr´xÐ@Ñ@Ô@×HÒHÈÈ1ÑMÔMÈfÐUdÔNeÑfÔfˆØ*1ˆÐ&Ñ'Ø�Š˜F 6™M°&¸Ñ2FÐUVÐWXÐTYØ#)Ð*BÔ#CÐTZÐ[bÔTcà˜/Ô*×.Ò.¨}Ñ=Ô=ÐIð $*¨/Ô#:×#>Ò#>¸}Ñ#MÔ#MÈdÑ#RÐ#RØOSØ  Ô1Ø# KÔ0¸zÈ'Ô?Rð 	ñ 	Tô 	Tð 	Tð Ið 	oð 	o‰MˆE�6Ý•y ¨¨u¬Ñ6Ô6°wÀÀvÁÑ7NÈvÐV]ÌÐ_eÐfkÔ_lÔOmÑnÔnÐnÐnØ�yÒ Ð Ý�:˜gÔ&Ñ'Ô'¨1Ò,Ð,Ý Ð!_Ñ`Ô`Ð`Ø�MŠM­z¸#¸aÑ/@Ô/@È*ÐU\ÔJ]Ð^_ÔJ`Ø#Uð ñ Wô Wð Wð ˜˜v™Ñ&€HØ‡‚ÑÔð 4ÝŒW�X¨5Ð1Ñ1Ô1ð 	B°SÝ�3”9‰~Œ~¥ V¡¤Ò,Ð,µÐ3zÐ3zÐ3zÐ3zÐkq×kwÒkwÑkyÔkyÐ3zÑ3zÔ3zÑ0zÔ0zÐ,Ý Ð!@ÑAÔAÐAð -ð	Bð 	Bð 	Bñ 	Bô 	Bð 	Bð 	Bð 	Bð 	Bð 	Bð 	Bøøøð 	Bð 	Bð 	Bð 	Bøõ
 Œz‰|Œ|ˆÝ
Ô˜FÐ,Ð, VÐ,Ð,Ð,Ý˜ §¢Ñ!2Ô!2Ñ3Ô3Ð3Ýˆw˜˜w™Ñ'¨Ñ/Ô/Ð/Ø€Ms   Ð)A"RÒRÒRc                óÜ  ‡— g d¢}t          j        d¬¦  «        }t          j        ||¬¦  «        }|                     ¦   «          |D ]í}|d         |d         cŠ}|                     |d         |d         ‰d	         |d	         |                     d
¦  «        |                     d¦  «        |                     d¦  «        |                     d¦  «        |d         d                     |d         ¦  «        dœ
ˆfd„dD ¦   «         ¥t          j	        ‰d         ¦  «        |d         d         dœ¥¦  «         Œît          | d|                     ¦   «         z                        ¦   «         ¦  «         d S )N)rœ   rº  Ú
label_kindÚoverlap_kindrR  r$   rZ  r[  r»  r$  r   r   r   r   rº   Úsource_tablerR   )Únewline)Ú
fieldnamesrê  r!   rœ   rº  r»   rR  r$   rZ  r[  r»  rˆ   r$  )
rœ   rº  rû  rü  rR  r$   rZ  r[  r»  r$  c                ó.   •— i | ]}|‰d          |         “ŒS )r�   r-   )rV   r©   rê  s     €r/   r«   zwrite_csv.<locals>.<dictcomp>Å  s$   ø€ ÐQÐQÐQ¨ˆq��x” Ô#ÐQÐQÐQr.   )r   r   r   r   rº   Ú
source_rowÚauthoritative_table)rº   rý  u   ï»¿)ry   rz   rw   Ú
DictWriterÚwriteheaderÚwriterowr²   rY   r7   r8   rM   rç  r9   )rJ   r–  rª   ÚstreamÚwriterrW   r!   rê  s          @r/   Ú	write_csvr  ¹  s˜  ø€ ðdð dð d€EåŒ[ Ð$Ñ$Ô$€FÝŒ^˜F¨eÐ4Ñ4Ô4€FØ
×ÒÑÔÐØð oð oˆØ˜7œ Q y¤\ˆˆˆwØ�Š a¨¤oÀQÀ~ÔEVØ˜vœ°g¸f´oÐQX×Q\ÒQ\Ð]gÑQhÔQhØ—K’K Ñ(Ô(°G·K²KÀ
Ñ4KÔ4KÐX_×XcÒXcÐdoÑXpÔXpØ�x”[¨#¯(ª(°1°X´;Ñ*?Ô*?ðnð nð RÐQÐQÐQÐ-PÐQÑQÔQð	nõ
 œ
 5¨Ô#5Ñ6Ô6ÀaÈÄoÐVkÔFlðnð nð nñ 	oô 	oð 	oð 	oõ �D˜( 6§?¢?Ñ#4Ô#4Ñ4×<Ò<Ñ>Ô>Ñ?Ô?Ð?Ð?Ð?r.   c                ó  ‡ ‡— t          ‰ ¦  «                             ¦   «         Š t          j        ‰ dz                       ¦   «         ¦  «        }|d         }|                     ¦   «         D ]8\  }}t          t          ‰ |¦  «        ¦  «        |k    rt          d|› �¦  «        ‚Œ9ˆ fd„‰  	                    d¦  «        D ¦   «         }|t          |¦  «        ddhz  k    rt          d¦  «        ‚d                     d	„ t          i |¥dt          ‰ dz  ¦  «        i¥                     ¦   «         ¦  «        D ¦   «         ¦  «        }‰ dz                       ¦   «         |k    rt          d
¦  «        ‚t          ‰ dz  ¦  «        }d„ |D ¦   «         }	t          d„ |D ¦   «         ¦  «        t          |¦  «        k    s*t          d„ |D ¦   «         ¦  «        t          |¦  «        k    rt          d¦  «        ‚t          t          ¦  «        }
t          t          ¦  «        }|D �]EŠ‰d         }|d         s|d         s‰d         rt          d¦  «        ‚‰d         dk    r‰d         dk    rt          d¦  «        ‚‰d         dk    rƒ‰d         ‰d         k    s‰d         dk    s‰d         st          d¦  «        ‚|
‰d                                        ‰d         ¦  «         |‰d!                                       ‰d         ¦  «         t#          t          ‰ ‰d"         ¦  «        ¦  «        \  }}t%          j        t          ‰ ‰d#         ¦  «        d$¬%¦  «        5 }t%          j        |d&         |d'¬(¦  «        st          d)¦  «        ‚t%          j        |d d …d d*…f         ¦  «                             d¬+¦  «        t$          j                             t%          j        |d d …d d*…f         ¦  «        d¬+¦  «        d,k    z  }t%          j        ||d-         ¦  «        r:t%          j        |d.         t%          j        t          |¦  «        ¦  «        ¦  «        st          d/¦  «        ‚‰d         dk    rŠ‰d0         \  }}t7          t%          j        t          |¦  «        t$          j        ¬1¦  «                             ||¦  «        ‰d2         ¦  «        }t%          j        ||d3         ¦  «        st          d4¦  «        ‚d d d ¦  «         n# 1 swxY w Y   |‰d5         k    rt          d6¦  «        ‚‰d         d7         d8k    r*t-          ˆfd9„d:D ¦   «         ¦  «        st          d;¦  «        ‚�ŒGt=          d<„ |
                     ¦   «         D ¦   «         ¦  «        s+t=          d=„ |                     ¦   «         D ¦   «         ¦  «        rt          d>¦  «        ‚|�rtA          |¦  «        5 }d?„ | !                    ¦   «         D ¦   «         }||k    s2t          |¦  «        t          | !                    ¦   «         ¦  «        k    rt          d@¦  «        ‚t          |¦  «        D ]n}| "                    |¦  «        }|dAv rt          ‰ |z  ¦  «        n||         }tG          j$        |¦  «         %                    ¦   «         |k    rt          dB¦  «        ‚Œo	 d d d ¦  «         n# 1 swxY w Y   dCt          |¦  «        t          |¦  «        t          |	¦  «        dDdDd'tM          |¦  «        dEœS )FNúmanifest.jsonrÛ  zDataset checksum mismatch: c                ó|   •— h | ]8}|                      ¦   «         ¯t          |                     ‰¦  «        ¦  «        ’Œ9S r-   )Úis_filerk   Úrelative_to)rV   Úprè  s     €r/   rˆ  zverify.<locals>.<setcomp>Ñ  s:   ø€ ÐUÐUÐU¨aÈÏÊÉÌÐU�c�!—-’- Ñ(Ô(Ñ)Ô)ÐUÐUÐUr.   Ú*úchecksums.sha256z#Unexpected or missing dataset filesrR   c              3  ó,   K  — | ]\  }}|› d |› d�V — ŒdS ©z  r6   Nr-   ©rV   rG   rš   s      r/   rX   zverify.<locals>.<genexpr>Ô  sO   è è € ð  Fð  F±°°a˜qÐ,Ð, DÐ,Ð,Ð,ð  Fð  Fð  Fð  Fð  Fð  Fr.   z#Checksum list differs from manifestúannotations.jsonlc                ó*   — g | ]}|d          dk    ¯|‘ŒS )r»  r!   r-   rU   s     r/   rb   zverify.<locals>.<listcomp>Ø  s&   € Ð:Ð:Ð:�a 1 X¤;°	Ò#9Ð#9�Ð#9Ð#9Ð#9r.   c                ó   — h | ]
}|d          ’ŒS )r¹  r-   rU   s     r/   rˆ  zverify.<locals>.<setcomp>Ù  s   € Ð)Ð)Ð)˜qˆAˆkŒNÐ)Ð)Ð)r.   c                ó   — h | ]
}|d          ’ŒS )r¿  r-   rU   s     r/   rˆ  zverify.<locals>.<setcomp>Ù  s   € Ð?eÐ?eÐ?eÐ[\ÀÐBUÔ@VÐ?eÐ?eÐ?er.   zDuplicate sample or pointcloudrÀ  r$  r)  rÉ  zInvalid eligibilityr»  rÆ  r$   r´  z3Archive-only samples must not get unverified splitsr!   rØ  rÙ  r   rÂ  z Formal split/association changedrZ  r¿  r¾  r©  FrÝ  rµ  TrD  zPoint tensor differs from PCDr‰   r›  r�  r¶  r¸  zPoint validity or order changedr×  r=  rÏ  rÐ  z/Registered pixels do not map back to native PCDrÍ  zPCD header changedr»   rø   c              3  ó@   •K  — | ]}‰d          d         |         V — ŒdS )rÀ  r#  Nr-   )rV   r©   rW   s     €r/   rX   zverify.<locals>.<genexpr>ö  sL   øè è € ð  <Dð  <DÐab¸A¸f¼IÐFXÔ<YÐZ[Ô<\ð  <Dð  <Dð  <Dð  <Dð  <Dð  <Dr.   r÷   zMissing planar labelc              3  ó<   K  — | ]}t          |¦  «        d k    V — ŒdS ©r   Nr­   r‹   s     r/   rX   zverify.<locals>.<genexpr>ø  s,   è è € Ð
-Ð
-˜�3ˆq‰6Œ6�!Š8Ð
-Ð
-Ð
-Ð
-Ð
-Ð
-r.   c              3  ó<   K  — | ]}t          |¦  «        d k    V — ŒdS r  r­   r‹   s     r/   rX   zverify.<locals>.<genexpr>ø  s,   è è € Ð4^Ð4^À!µS¸±V´V¸A²XÐ4^Ð4^Ð4^Ð4^Ð4^Ð4^r.   z Cross-split source/group leakagec                ó<   — h | ]}|                      d ¦  «        °|’ŒS )rh   r�  )rV   Úns     r/   rˆ  zverify.<locals>.<setcomp>ü  s'   € ÐBÐBÐB˜°!·*²*¸S±/´/ÐB�1ÐBÐBÐBr.   zArchive member set differs©r
  r  zArchive member hash differsÚpassedr   )ÚstateÚfiles_verifiedÚexamples_verifiedÚoverlap_examplesÚcross_split_group_leakageÚcross_split_source_leakageÚ,native_pcd_tensor_and_pixel_mapping_verifiedÚarchive_verified)'r	   rp   r7   r_   rc   r/  r   rs   rC   Úrglobr1  rY   r0  re   r�   r   Úaddr   r  r“  rH  r‚   rð   r  r	  r¦  râ  r   rã  rä  rŽ   r�   r   Únamelistrv  rx  rp  ry  r   )rè  rz  ÚmanifestrÛ  Úrelativer¯  rh  Úexpected_sumsrZ   Úassignedr”   Úsource_hashesrê  r®   rK   Útensorrñ  rô  rš   r¨   r|  rª   rG   rW   s   `                      @r/   Úverifyr1  Ê  s  øø€ Ý�7‰mŒm×#Ò#Ñ%Ô%€GÝŒz˜7 ?Ñ2×=Ò=Ñ?Ô?Ñ@Ô@€HØ�WÔ€EØ#Ÿkšk™mœmð Gð GÑˆ�(Ý•)˜G HÑ-Ô-Ñ.Ô.°(Ò:Ð:ÝÐE¸8ÐEÐEÑFÔFÐFð ;àUÐUÐUÐU°7·=²=ÀÑ3EÔ3EÐUÑUÔU€FØ•�U‘”˜_Ð-?Ð@Ñ@Ò@Ð@ÝÐ>Ñ?Ô?Ð?Ø—G’Gð  Fð  F½6ÐB{ÀUÐB{È?Õ[aÐbiÐjyÑbyÑ[zÔ[zÐB{ÐB{÷  CBò  CBñ  CDô  CDñ  <Eô  <Eð  Fñ  Fô  Fñ  Fô  F€MØÐ"Ñ"×-Ò-Ñ/Ô/°=Ò@Ð@ÝÐ>Ñ?Ô?Ð?Ý�WÐ0Ñ0Ñ1Ô1€DØ:Ð:˜4Ð:Ñ:Ô:€HÝ
Ð)Ð) DÐ)Ñ)Ô)Ñ*Ô*­c°$©i¬iÒ7Ð7½3Ð?eÐ?eÐ`dÐ?eÑ?eÔ?eÑ;fÔ;fÕjmÐnrÑjsÔjsÒ;sÐ;sÝÐ9Ñ:Ô:Ð:Ý�ÑÔ€FÝ¥Ñ$Ô$€MØð 5ñ 5ˆØ�&”	ˆØ�Œ?ð 	4˜eÐ$6Ô7ð 	4¸1Ð=XÔ;Yð 	4ÝÐ2Ñ3Ô3Ð3ØˆXŒ;˜Ò&Ð&¨1¨W¬:°|Ò+CÐ+CÝÐRÑSÔSÐSØˆXŒ;˜	Ò!Ð!ØÐ!Ô" A g¤JÒ.Ð.°!Ð4FÔ2GÈÒ2JÐ2JÐRSÐT^ÔR_Ð2JÝ Ð!CÑDÔDÐDØ�1�Z”=Ô!×%Ò% a¨¤jÑ1Ô1Ð1Ø˜!Ð/Ô0Ô1×5Ò5°a¸´jÑAÔAÐAÝ�y¨°°<´ÑAÔAÑBÔB‰ˆ�ÝŒW•Y˜w q¨¤{Ñ3Ô3ÀÐGÑGÔGð 
	XÈ6Ý”> &¨Ô"7¸ÀdÐKÑKÔKð BÝ Ð!@ÑAÔAÐAÝ”+˜c ! ! ! B Q B $œiÑ(Ô(×,Ò,°!Ð,Ñ4Ô4µb´i·n²nÅRÄ]ÐSVÐWXÐWXÐWXÐY[ÐZ[ÐY[ÐW[ÔS\ÑE]ÔE]Ðcd°nÑ6eÔ6eÐfjÒ6jÑkˆEÝ”> %¨¨{Ô(;Ñ<Ô<ð DÅBÄNÐSYÐZnÔSoÕprÔpyÕz}ð  Bñ  {Cô  {Cñ  qDô  qDñ  EEô  EEð DÝ Ð!BÑCÔCÐCØ�Œ{˜IÒ%Ð%Ø�mÔ$‘��!Ý!¥"¤)­C°©H¬H½2¼8Ð"DÑ"DÔ"D×"LÒ"LÈQÈqÑ"QÔ"QÐRSÐTcÔRdÑeÔe�Ý”~ e¨FÐ3JÔ,KÑLÔLð XÝ$Ð%VÑWÔWÐWð
	Xð 
	Xð 
	Xñ 
	Xô 
	Xð 
	Xð 
	Xð 
	Xð 
	Xð 
	Xð 
	Xøøøð 
	Xð 
	Xð 
	Xð 
	Xð �Q�~Ô&Ò&Ð&ÝÐ1Ñ2Ô2Ð2ØˆVŒ9�VÔÐ/Ò/Ð/½ð  <Dð  <Dð  <Dð  <Dð  gCð  <Dñ  <Dô  <Dñ  9Dô  9DÐ/ÝÐ3Ñ4Ô4Ð4ùÝ
Ð
-Ð
-˜VŸ]š]™_œ_Ð
-Ñ
-Ô
-Ñ-Ô-ð =µÐ4^Ð4^À}×G[ÒG[ÑG]ÔG]Ð4^Ñ4^Ô4^Ñ1^Ô1^ð =ÝÐ;Ñ<Ô<Ð<Øñ 	DÝ�WÑÔð 	D ØBÐB˜aŸjšj™lœlÐBÑBÔBˆEØ�fŠ}ˆ}¥ E¡
¤
­C°·
²
±´Ñ,=Ô,=Ò =Ð =Ý Ð!=Ñ>Ô>Ð>Ý˜u™œð Dð D�Ø—F’F˜4‘L”L�Ø15Ð9]Ð1]Ð1]� ¨¡Ñ-Ô-Ð-ÐchÐimÔcn�Ý”> #Ñ&Ô&×0Ò0Ñ2Ô2°HÒ<Ð<Ý$Ð%BÑCÔCÐCð =ðDð		Dð 	Dð 	Dñ 	Dô 	Dð 	Dð 	Dð 	Dð 	Dð 	Dð 	Døøøð 	Dð 	Dð 	Dð 	Dð ­c°&©k¬kÍcÐRVÉiÌiÝ˜x™=œ=ÀQÐdeØ7;ÍtÐT[É}Ì}ð^ð ^ð ^s&   ÍFS6Ó6S:	Ó=S:	×C$[Û[Û	[Fc                óÀ   ‡:‡;‡<‡=‡>‡?— t          | ¦  «                             ¦   «         } t          j        |                      ¦   «         ¦  «        }|d         dk    s|d         t
          k    rt          d¦  «        ‚t          |d         z                       ¦   «         }t          |d         z                       ¦   «         }t          t          j        |                     ¦   «         ¦  «        d         ¦  «                             ¦   «         }t          |d         z                       ¦   «         }||k    s*|                     |¦  «        s|                     |¦  «        rt          d	¦  «        ‚t          | ¦  «        t          |¦  «        t          |¦  «        t          |d
z  ¦  «        t          t          ¦  «        t          t          t          ¦  «        j        dz  ¦  «        t          t          t          ¦  «        j        dz  ¦  «        dœ}|dz  }|                     ¦   «         rEt          j        |                     ¦   «         ¦  «        }	|r|	d         |k    rt          d¦  «        ‚�nI|                     ¦   «         r0t          |                     ¦   «         ¦  «        rt          d¦  «        ‚|                     dd¬¦  «         t!          j        |¦  «        j        |d         dz  k     rt          d¦  «        ‚t'          |¦  «        }
t          j        |d
z                       ¦   «         ¦  «        d         Š<t          ˆ<fd„|
                     ¦   «         D ¦   «         ¦  «        rt          d¦  «        ‚dt+          ¦   «         ||
t-          |¦  «        t-          |¦  «        dœ}	t/          ||	¦  «         t'          |¦  «        |	d         k    rt          d¦  «        ‚|dz  }t1          ||¦  «        }t3          ||¦  «        \  }}}}}t5          t          j        dt9          |¦  «        t9          |¦  «        t9          |¦  «        t9          |¦  «        d œ¦  «        d¬!¦  «         |dz  Š:‰:                     d¬"¦  «         i }|D ]’}|d#z   t;          |d$         ¦  «        z   }t=          ||¦  «                             ¦   «         }t;          |d$         ¦  «        t9          d%¦  «        d …         }tA          ||¦  «        ||<   tC          ‰:d&z  |z  |¦  «         Œ“d'D ]A}tC          ‰:d&z  |z  |z  t=          ||d#z   |z   ¦  «                             ¦   «         ¦  «         ŒBtE          |¦  «        \  }}d(„ |D ¦   «         }tG          tH          ¦  «        tG          tH          ¦  «        }}| %                    ¦   «         D ]m}||d)                   &                    |¦  «         tO          t          |d*         d+         ¦  «        j(        ¦  «        }|r||          &                    |¦  «         Œni }g }|D ]Ù}|d#z   t;          |d,         ¦  «        z   }||         d-         } | )                    | g ¦  «        }!| &                    i |¥| d.„ |!D ¦   «         d/„ | )                    |d0         g ¦  «        D ¦   «         tU          |!¦  «        tU          tW          j,        d1t;          |d,         ¦  «        ¦  «        ¦  «        |d2         d3k    d4œ¥¦  «         ŒÚg g c}"Š;t[          |¦  «        D �]�\  }#}$|$d5         rt;          |$d5         ¦  «        nd6}t]          |$| )                    |g ¦  «        ¦  «        }%d7d | )                    |$d0         g ¦  «        rd8„ ||$d0                  D ¦   «         pg d9œ}&d }'|$d,         r`|d#z   t;          |$d,         ¦  «        z   }t=          ||¦  «        }(t_          |(||         d-         |$d0         |||¦  «        }&ta          |(¦  «        }'| )                    |& )                    d:¦  «        ¦  «        }tI          |%d;         ¦  «        })|$d,         s|) &                    d7¦  «         |'r|'d<         s|) &                    d=¦  «         |r/|d>         dk    r#|) &                    |d>         dk    rd?nd@¦  «         |&dA         dBv r|) &                    dC¦  «         |)rdDn|rdEndFŠ?|$d0         |$dG         |$|%|&|'‰?tc          te          |)¦  «        ¦  «        dHœ}*|" &                    |*¦  «         |)sEtg          ‰:|||$|%|&|||r |j)        |d:         ¦  «        nd ‰?¦
  «
        }+‰; &                    |+¦  «         |#dz   dIz  dJk    r7t5          t          j        dK|#dz   t9          ‰;¦  «        dLœ¦  «        d¬!¦  «         �Œ’i dMt9          |¦  «        “dNt9          |¦  «        “dOti          dP„ |D ¦   «         ¦  «        “dQti          dR„ |D ¦   «         ¦  «        “dSt9          |¦  «        “dTt9          |¦  «        “dUtk          tm          dV„ |"D ¦   «         ¦  «        ¦  «        “dWti          dX„ |D ¦   «         ¦  «        “dYt9          dZ„ |D ¦   «         ¦  «        “d[tk          tm          d\„ |"D ¦   «         ¦  «        ¦  «        “d]ti          d^„ |"D ¦   «         ¦  «        “d_tk          tm          d`„ |"D ¦   «         ¦  «        ¦  «        “datk          tm          db„ |"D ¦   «         ¦  «        ¦  «        “dct9          ‰;¦  «        “ddtk          tm          de„ ‰;D ¦   «         ¦  «        ¦  «        “dfˆ;fdg„dhD ¦   «         “ditk          tm          dj„ ‰;D ¦   «         ¦  «        ¦  «        “ti          dk„ |"D ¦   «         ¦  «        dJdldldldldmœ¥},to          ‰:dnz  ‰;¦  «         doD ]?Š?dhD ]:Š=‰?dEk    rdpndqD ]-Š>to          ‰:dr‰?› d#‰=› d#‰>› ds�z  ˆ=ˆ>ˆ?fdt„‰;D ¦   «         ¦  «         Œ.Œ;Œ@to          ‰:duz  |"¦  «         to          ‰:dvz  |¦  «         to          ‰:dwz  dx„ |"D ¦   «         ¦  «         to          ‰:dyz  dz„ | %                    ¦   «         D ¦   «         ¦  «         t/          ‰:d{z  |¦  «         tq          ‰:d|z  |"¦  «         t/          ‰:d}z  |,¦  «         t/          ‰:d~z  |	¦  «         tC          ‰:dz  ts          |,|j(        ¦  «         :                    ¦   «         ¦  «         tc          d€„ ‰: ;                    d�¦  «        D ¦   «         ¦  «        }-ty          d‚¬ƒ¦  «        5 }.tI          |. =                    t          |-¦  «        ¦  «        }/d d d ¦  «         n# 1 swxY w Y   ˆ:fd„„t}          |-|/¦  «        D ¦   «         }0t/          ‰:d
z  ddd…|j(        |	d†         ||d         |,|0d‡œ	¦  «         i |0¥d
t          ‰:d
z  ¦  «        i¥}1tC          ‰:dˆz  d6 ?                    d‰„ tc          |1                     ¦   «         ¦  «        D ¦   «         ¦  «         :                    ¦   «         ¦  «         ||j(        dŠz   z  }2|2                     ¦   «         sÊ|2 @                    d‹¦  «        }3tƒ          |3dŒt„          d�¬Ž¦  «        5 }4tc          ‰: ;                    d�¦  «        ¦  «        D ]L}5|5 C                    ¦   «         r6|4 D                    |5t-          |5 E                    ‰:¦  «        ¦  «        ¦  «         ŒM	 d d d ¦  «         n# 1 swxY w Y   |3 F                    |2¦  «         t�          ‰:|2¦  «        }6t'          |¦  «        |	d         k    rt          d�¦  «        ‚|                     ¦   «         D ]'\  }7}8t          |7¦  «        |8k    rt          d�¦  «        ‚Œ(|6 H                    t9          |	d         ¦  «        t9          |¦  «        ¬‘¦  «         t/          |d’z  |6¦  «         d“|	d†         t-          ‰:¦  «        t-          |2¦  «        t          |2¦  «        |2 I                    ¦   «         jJ        t          ‰:d
z  ¦  «        |,|6d”œ	}9t/          |d•z  |9¦  «         t5          t          j        |9dl¬–¦  «        d¬!¦  «         |9S )—NÚversionr   ÚpolicyzUnsupported pose dataset policyrz  Úformal_dataset_configrè  rò  z-Pose output must be separate from formal datar
  zdata/pcd.pyzdata/orientation.py)Úconfig_sha256Úarchive_sha256Úformal_config_sha256Úformal_manifest_sha256Úcode_sha256Úpcd_reader_sha256Úorientation_code_sha256zrun_manifest.jsonÚbindingzNExisting run: use --resume with identical inputs/code, or a new output versionzOutput is not emptyTr>   Úminimum_free_gibi   @zInsufficient free spacerÛ  c              3  ó^   •K  — | ]'\  }}|d k    ¯‰                      ||¦  «        |k    V — Œ(dS )r
  N)r²   )rV   r  rš   Úfrozens      €r/   rX   zbuild.<locals>.<genexpr>%  sB   øè è € ÐTÐT¡c a¨ÀÀOÒASÐASˆv�zŠz˜!˜A‰Œ Ò!ÐASÐASÐASÐASÐTÐTr.   z5Formal labels or metadata differ from frozen manifestÚpartial_pallet_pose_dataset)r»   Ú
created_atr=  Úprotected_formal_filesrz  Úformal_datasetrC  zProtected formal data changedré  r'  )ÚstagerÛ  Úgt_rowsr”  r•  )Úflush)r@   rh   rŠ  u	   GTè¡¨æ ¼/Ú
provenance)z	README.mdr�  r…  r†  c                ó    — i | ]}|d          |“ŒS rQ  r-   rU   s     r/   r«   zbuild.<locals>.<dictcomp><  s   € Ð6Ð6Ð6 Q��:”˜qÐ6Ð6Ð6r.   rX  rV  rW  r‰  rp  c                ó   — g | ]
}|d          ‘ŒS rQ  r-   rS  s     r/   rb   zbuild.<locals>.<listcomp>I  s   € ÐFdÐFdÐFdÐYZÀqÈÄ}ÐFdÐFdÐFdr.   c                ó   — g | ]
}|d          ‘ŒS rQ  r-   rS  s     r/   rb   zbuild.<locals>.<listcomp>J  s   € Ð.fÐ.fÐ.fÀ¨q°¬}Ð.fÐ.fÐ.fr.   rœ   zH(?:_seg|_normal|_crop|_face|_filtered|_label)(?:/|\.|$)|/(?:seg|normal)/Úis_derived_outputr  )rp  Úexact_formal_frame_idsÚsame_timestamp_formal_frame_idsÚcontent_matchÚderived_path_hintÚdeclared_is_derivedr  rR   Úmissing_pcdc                ó   — g | ]
}|d          ‘ŒS rQ  r-   rS  s     r/   rb   zbuild.<locals>.<listcomp>R  s8   € ð  j]ð  j]ð  j]Ð|}ÐjkÐlvÔjwð  j]ð  j]ð  j]r.   rU  rR  r$  r£  Úno_valid_xyz_pointsr[  Úambiguous_multiple_boxesÚ#formal_negative_conflicts_with_poser»   )r^  rO  r]  Úsample_identity_not_provenÚ
quarantiner!   rÆ  rº  )rœ   rº  r  rê  r!   Úcloudr»  r$  é2   r   Úmatched)rE  ÚsamplesÚexamplesÚarchive_membersÚpointcloud_filesÚdeclared_raw_cloudsc              3  ó.   K  — | ]}|d          dk    V — ŒdS )rL  ÚNNr-   ©rV   rÉ   s     r/   rX   zbuild.<locals>.<genexpr>j  s-   è è € Ð!NÐ!NÀ! !Ð$7Ô"8¸#Ò"=Ð!NÐ!NÐ!NÐ!NÐ!NÐ!Nr.   Údeclared_derived_cloudsc              3  ó.   K  — | ]}|d          dk    V — ŒdS )rL  r  Nr-   rc  s     r/   rX   zbuild.<locals>.<genexpr>k  s-   è è € Ð%RÐ%RÀa aÐ(;Ô&<¸cÒ&AÐ%RÐ%RÐ%RÐ%RÐ%RÐ%Rr.   Úsource_gt_tablesÚgt_manifest_samplesÚsource_label_kindsc              3  ó2   K  — | ]}|d          d         V — ŒdS )rê  r»   Nr-   ©rV   rJ  s     r/   rX   zbuild.<locals>.<genexpr>m  s+   è è € Ð)MÐ)MÀ¨!¨G¬*°VÔ*<Ð)MÐ)MÐ)MÐ)MÐ)MÐ)Mr.   Úall_cloud_exact_overlap_filesc              3  ó&   K  — | ]}|d          V — ŒdS )rO  Nr-   rj  s     r/   rX   zbuild.<locals>.<genexpr>n  s'   è è € Ð+TÐ+TÀ1¨A¨oÔ,>Ð+TÐ+TÐ+TÐ+TÐ+TÐ+Tr.   Ú$all_cloud_exact_unique_formal_framesc                ó(   — h | ]}|d          D ]}|’ŒŒS )rM  r-   )rV   rJ  rT  s      r/   rˆ  zbuild.<locals>.<setcomp>o  s,   € Ð3pÐ3pÐ3p¸!ÐTUÐVnÔToÐ3pÐ3pÈq°AÐ3pÐ3pÐ3pÐ3pr.   Úmanifest_overlap_kindsc              3  ó2   K  — | ]}|d          d         V — ŒdS )r!   r»   Nr-   rj  s     r/   rX   zbuild.<locals>.<genexpr>p  s+   è è € Ð-SÐ-SÀq¨a°	¬l¸6Ô.BÐ-SÐ-SÐ-SÐ-SÐ-SÐ-Sr.   Ú%manifest_verified_overlapping_samplesc              3  óf   K  — | ],}t          |d                               d¦  «        ¦  «        V — Œ-dS )r!   rR  N)r   r²   rj  s     r/   rX   zbuild.<locals>.<genexpr>q  s=   è è € Ð3gÐ3gÐ[\µD¸¸9¼×9IÒ9IÈ*Ñ9UÔ9UÑ4VÔ4VÐ3gÐ3gÐ3gÐ3gÐ3gÐ3gr.   Úsubsetsc              3  ó&   K  — | ]}|d          V — ŒdS )r»  Nr-   rj  s     r/   rX   zbuild.<locals>.<genexpr>r  s&   è è € Ð;Ð;¨q˜q œ{Ð;Ð;Ð;Ð;Ð;Ð;r.   Úquarantine_reasonsc              3  ó0   K  — | ]}|d          D ]}|V — ŒŒdS )r$  Nr-   )rV   rJ  r©   s      r/   rX   zbuild.<locals>.<genexpr>s  s3   è è € Ð)QÐ)Q°ÀQÀxÄ[Ð)QÐ)QÀ¨!Ð)QÐ)QÐ)QÐ)QÐ)QÐ)QÐ)Qr.   Úexported_examplesÚoverlap_split_countsc              3  ó>   K  — | ]}|d          dk    ¯|d         V — ŒdS )r»  r!   r$   Nr-   rU   s     r/   rX   zbuild.<locals>.<genexpr>u  s5   è è € Ð+cÐ+c¸1ÈAÈhÌKÐYbÒLbÐLb¨A¨g¬JÐLbÐLbÐLbÐLbÐ+cÐ+cr.   Úoverlap_task_split_countsc           	     ód   •‡— i | ]+Š‰t          t          ˆfd „‰D ¦   «         ¦  «        ¦  «        “Œ,S )c              3  ód   •K  — | ]*}|d          dk    ¯|d         d         ‰k    ¯ |d         V — Œ+dS )r»  r!   rÀ  r»   r$   Nr-   )rV   rW   r»   s     €r/   rX   z#build.<locals>.<dictcomp>.<genexpr>v  s�   øè è € ð  7Kð  7KÀaÐWXÐYaÔWbÐdmÒWmÐWmÐrsÐtzÔr{ð  }Cô  sDð  FJò  sJð  sJ°q¸´zð  sJð  sJð  sJð  sJð  7Kð  7Kr.   )r,  r   )rV   r»   r]  s    @€r/   r«   zbuild.<locals>.<dictcomp>v  sx   øø€ ð %Dð %Dð %DØð &*­$­wð  7Kð  7Kð  7Kð  7KÈ8ð  7Kñ  7Kô  7Kñ  0Kô  0Kñ  +Lô  +Lð %Dð %Dð %Dr.   )rø   rù   Úarchive_only_task_countsc              3  óJ   K  — | ]}|d          dk    ¯|d         d         V — ŒdS )r»  rÆ  rÀ  r»   Nr-   rU   s     r/   rX   zbuild.<locals>.<genexpr>x  s=   è è € Ð/sÐ/sÀaÐWXÐYaÔWbÐdrÒWrÐWr°°&´	¸&Ô0AÐWrÐWrÐWrÐWrÐ/sÐ/sr.   c              3  ó*   K  — | ]}d |d         v V — ŒdS )r+  rê  Nr-   rj  s     r/   rX   zbuild.<locals>.<genexpr>y  s-   è è € Ð3eÐ3eÐYZÐ4FÈ!ÈGÌ*Ð4TÐ3eÐ3eÐ3eÐ3eÐ3eÐ3er.   F)Ú%authoritative_table_index_correctionsÚsix_dof_examplesÚnormalization_fittedÚtraining_startedÚ"original_detection_labels_modifiedÚhuman_review_database_accessedr  rÅ  )ÚtrainÚvalÚtest)r´  zindices/z.jsonlc                óh   •— g | ].}|d          ‰k    ¯|d         d         ‰k    ¯ |d         ‰k    ¯,|‘Œ/S )r»  rÀ  r»   r$   r-   )rV   rW   r»   r$   r»  s     €€€r/   rb   zbuild.<locals>.<listcomp>�  sM   ø€ ÐrÐrÐr˜1¨A¨h¬K¸Ò,?Ð,?ÀAÀfÄIÈfÔDUÐW[ÒD[ÐD[Ð`aÐbiÔ`jÐlqÒ`qÐ`q�QÐ`qÐ`qÐ`qr.   zaudit/samples.jsonlzaudit/cloud_inventory.jsonlzaudit/quarantine.jsonlc                ó"   — g | ]}|d          ¯
|‘ŒS )r$  r-   rj  s     r/   rb   zbuild.<locals>.<listcomp>„  s!   € Ð0RÐ0RÐ0R°qÀaÈÄkÐ0R°Ð0RÐ0RÐ0Rr.   zaudit/table_evidence.jsonlc                ó   — g | ]	}|D ]}|‘ŒŒ
S r-   r-   )rV   Úrows_rý   s      r/   rb   zbuild.<locals>.<listcomp>…  s'   € Ð4nÐ4nÐ4n¸5ÐhmÐ4nÐ4nÐcd°QÐ4nÐ4nÐ4nÐ4nr.   zaudit/archive_inventory.jsonzoverlap_and_quality.csvzstatistics.jsonzprovenance/run_manifest.jsonzREADME_zh.mdc              3  óT   K  — | ]#}|                      ¦   «         ¯|j        d v¯|V — Œ$dS )r  N)r  rG   )rV   r  s     r/   rX   zbuild.<locals>.<genexpr>‹  s<   è è € ÐuÐu�q°!·)²)±+´+ÐuÀ!Ä&ÐPtÐBtÐBt�ÐBtÐBtÐBtÐBtÐuÐur.   r  é   )Úmax_workersc                ó\   •— i | ](\  }}t          |                     ‰¦  «        ¦  «        |“Œ)S r-   )rk   r  )rV   r  rš   rè  s      €r/   r«   zbuild.<locals>.<dictcomp>�  s3   ø€ Ð
FÐ
FÐ
F©S¨Q¨q�3ˆq�}Š}˜WÑ%Ô%Ñ&Ô& qÐ
FÐ
FÐ
Fr.   r@  rB  )	r»   r3  r   ÚrevisionrB  r=  r4  ÚsummaryrÛ  r  c              3  ó,   K  — | ]\  }}|› d |› d�V — ŒdS r  r-   r  s      r/   rX   zbuild.<locals>.<genexpr>‘  s8   è è € Ð6kÐ6kÉFÈDÐQR¸!Ð7GÐ7G¸tÐ7GÐ7GÐ7GÐ6kÐ6kÐ6kÐ6kÐ6kÐ6kr.   z.zipz.zip.tmprô  r¼   )Úcompresslevelz,Protected formal labels changed during buildzUsed raw source changed)Ú protected_formal_files_unchangedÚused_formal_pcds_unchangedzverification.jsonÚcomplete)	r   rB  rè  rz  r7  Úarchive_bytesÚdataset_manifest_sha256r’  Úverificationzdelivery_manifest.json©r2   )Kr	   rp   r7   r_   rc   ÚREQUIRED_POLICYrC   ÚPROJECTrq   r   Ú__file__rD   rA   rŽ   ÚiterdirrE   ÚshutilÚ
disk_usageÚfreer   r/  r*   rk   rP   r~  r™  Úprintr8   r�   rn   rs   rB   rè   rM   r   r   rv   r�   rÄ   rœ   rG   r²   r   r’   r“   rÂ   r8  ri  r«  r0  r1  rù  r§  r,  r   r[   r  Úreadmer9   r(  r   ÚmapÚziprY   Úwith_suffixr   r   r  Úwriter  rI   r1  rå  rs  Úst_size)@Úconfig_pathÚresumeÚconfigrz  Úformal_configrë  Úoutr=  Úrun_pathÚrunÚsnapshotré  r{  r„  rZ   r”  r•  r’  Úevidence_by_tabler·   rn  rK   rG   r   Úsourcesrb  rc  rT  rÈ   rd  Úcloud_auditrÉ   ra  re  ÚauditsrÇ   r¯   rê  r!   ÚmetarJ   r$  ró  Úexampler’  ÚpathsÚpoolÚhashesrÛ  ÚsumsÚpackagerL   r|  r  r„   rg  r¯  Údeliveryrè  r]  r@  r»   r$   r»  s@                                                             @@@@@@r/   Úbuildr¾  	  sª  øøøøøø€ Ý�[Ñ!Ô!×)Ò)Ñ+Ô+€KÝŒ:�k×+Ò+Ñ-Ô-Ñ.Ô.€FØˆiÔ˜!ÒÐ˜v hÔ/µÒ@Ð@ÝÐ:Ñ;Ô;Ð;Ý�V˜IÔ&Ñ&×/Ò/Ñ1Ô1€GÝ˜6Ð"9Ô:Ñ:×CÒCÑEÔE€MÝ•”
˜=×2Ò2Ñ4Ô4Ñ5Ô5°iÔ@ÑAÔA×IÒIÑKÔK€FÝ	�˜Ô!Ñ	!×*Ò*Ñ,Ô,€CØ
ˆF‚{€{�c×(Ò(¨Ñ0Ô0€{°F×4IÒ4IÈ#Ñ4NÔ4N€{ÝÐHÑIÔIÐIÝ# KÑ0Ô0Å&ÈÁ/Ä/Ý% mÑ4Ô4ÍfÐU[Ð\kÑUkÑNlÔNlÝ�XÑ&Ô&½6Å$ÅxÁ.Ä.ÔBWÐXeÑBeÑ;fÔ;fÝ"(­­h©¬Ô)>Ð?TÑ)TÑ"UÔ"UðWð W€Gð Ð$Ñ$€HØ‡‚ÑÔð !ÝŒJ�x×)Ò)Ñ+Ô+Ñ,Ô,ˆØð 	o˜˜Yœ¨Ò0Ð0ÝÐmÑnÔnÐnñ 1ð �:Š:‰<Œ<ð 	4�C §¢¡¤Ñ.Ô.ð 	4ÝÐ2Ñ3Ô3Ð3Ø�	Š	˜$¨ˆ	Ñ-Ô-Ð-ÝÔ˜SÑ!Ô!Ô& vÐ.@Ô'AÀ'Ñ'IÒIÐIÝÐ6Ñ7Ô7Ð7Ý# FÑ+Ô+ˆÝŒz˜6 /Ñ1×<Ò<Ñ>Ô>Ñ?Ô?ÀÔHˆÝÐTÐTÐTÐT¨X¯^ª^Ñ-=Ô-=ÐTÑTÔTÑTÔTð 	VÝÐTÑUÔUÐUØ1½s¹u¼uÈwØ%-½¸G¹¼ÕVYÐZ`ÑVaÔVaðcð cˆå�8˜CÑ Ô Ð Ý˜&Ñ!Ô! 3Ð'?Ô#@Ò@Ð@ÝÐ8Ñ9Ô9Ð9Øˆx‰<€FÝ˜W VÑ,Ô,€IÝ#5°f¸YÑ#GÔ#GÑ"€Dˆˆf�V˜FÝ	�$Œ*Ð0½¸Y¹¼ÕRUÐVZÑR[ÔR[ÕehÐioÑepÔepÕz}ð  Eñ  {Fô  {Fð  Gð  Gñ  Hô  Hð  OSð  Tñ  Tô  Tð  TØ�	‰M€GØ‡M‚M˜4€MÑ Ô Ð ØÐØð 9ð 9ˆØ�C‰x� e¨NÔ&;Ñ<Ô<Ñ<ˆÝ�f˜VÑ$Ô$×/Ò/Ñ1Ô1ˆÝ˜5 Ô0Ñ1Ô1µ#°kÑ2BÔ2BÐ2CÐ2CÔDˆÝ +¨C°Ñ 5Ô 5Ð˜$ÑÝ˜ Ñ,¨VÑ3°CÑ8Ô8Ð8Ð8ØYð eð eˆÝ˜ Ñ,¨TÑ1°$Ñ6µyÀÈÈSÉÐQUÉÑ7VÔ7V×7aÒ7aÑ7cÔ7cÑdÔdÐdÐdÝ$ VÑ,Ô,Ñ€K�Ø6Ð6¨+Ð6Ñ6Ô6€KÝ¥Ñ%Ô%¥kµ$Ñ&7Ô&7ˆG€GØ�^Š^ÑÔð &ð &ˆØ�Ð&Ô'Ô(×/Ò/°Ñ2Ô2Ð2Ý•t˜A˜nÔ-¨eÔ4Ñ5Ô5Ô:Ñ;Ô;ˆØÐ%ˆw�sŒ|×"Ò" 1Ñ%Ô%Ð%øØ€NØ€Kàð @ð @ˆØ�C‰x� a¨¤oÑ6Ô6Ñ6ˆØ�6ŒN˜8Ô$ˆØ�kŠk˜#˜bÑ!Ô!ˆØ×Òð ?˜að ?¨ÐFdÐFdÐ^cÐFdÑFdÔFdØ.fÐ.fÀgÇkÂkÐRSÐT`ÔRaÐbdÑFeÔFeÐ.fÑ.fÔ.fÝ  ™KœKÝ $¥R¤YÐ/zõ  |Ið  JKð  LXô  JYñ  |Zô  |Zñ  &[ô  &[ñ  !\ô  !\Ø"#Ð$7Ô"8¸#Ò"=ð	?ð ?ð ?ñ 	@ô 	@ð 	@ð 	@ð
 �r€O€Fˆ8Ý˜4‘”ð pñ p‰ˆˆ#Ø;>Ð?TÔ;UÐ]�m˜CÐ 5Ô6Ñ7Ô7Ð7Ð[]ˆÝ˜sÐ#4×#8Ò#8¸¸rÑ#BÔ#BÑCÔCˆØ%°À7Ç;Â;ÈsÐS_ÔO`ÐacÑCdÔCdð  D]ð  j]ð  j]ð  BIð  JMð  NZô  J[ô  B\ð  j]ñ  j]ô  j]ð  Dcð  acð  dð  dˆØˆØˆ|Ôð 	&Ø˜‘8�M¨#¨lÔ*;Ñ<Ô<Ñ<ˆFÝ˜6 &Ñ)Ô)ˆDÝ   f¨V¤n°XÔ&>¸sÀ<Ô?PÐQXÐY`ÐaoÑpÔpˆGÝ Ñ%Ô%ˆDØ
�+Š+�g—k’k *Ñ-Ô-Ñ
.Ô
.ˆÝ�E˜(”OÑ$Ô$ˆØ�<Ô Ð= §¢¨}Ñ!=Ô!=Ð!=ØÐT˜Ð.Ô/ÐT°·²Ð>SÑ0TÔ0TÐ0TØð  	L��;” Ò"Ð" 6§=¢=ÈqÐQ\Ì~Ð^_ÒO_ÐO_Ð1KÐ1Kð  fKñ  $Lô  $Lð  $LØ�6Œ?ÐrÐrÐrØ�MŠMÐ6Ñ7Ô7Ð7Ø%ÐMˆ|ˆ|¸Ð+M¨9¨9¸~ˆØ  Ô.¸cÀ.Ô>QØ U°WÀTÐSYÕciÕjmÐntÑjuÔjuÑcvÔcvðxð xˆà�Š�fÑÔÐØð 	%Ý" 7¨6°$°s¸5ÀÈÐPQØ23Ð=��”  *¤Ñ.Ô.Ð.¸¸fñFô FˆGà�OŠO˜GÑ$Ô$Ð$Øˆa‰C�‰8�QŠ;ˆ;•u�TœZ°ÀQÀqÁSÕTWÐX`ÑTaÔTaÐ(bÐ(bÑcÔcÐjnÐoÑoÔoÐoùð[Ð�s 9™~œ~ð [Ð.@ÅÀVÁÄð [Ø�cÐ!NÐ!NÀvÐ!NÑ!NÔ!NÑNÔNð[à!¥#Ð%RÐ%RÈ6Ð%RÑ%RÔ%RÑ"RÔ"Rð[ð 	�3˜v™;œ;ð[ð (=½SÀ¹Y¼Yð[ð 	�T¥'Ð)MÐ)MÀfÐ)MÑ)MÔ)MÑ"MÔ"MÑNÔNð	[ð
 	(­Ð+TÐ+TÈÐ+TÑ+TÔ+TÑ(TÔ(Tð[ð 	/­sÐ3pÐ3p¸{Ð3pÑ3pÔ3pÑ/qÔ/qð[ð 	!¥¥gÐ-SÐ-SÈFÐ-SÑ-SÔ-SÑ&SÔ&SÑ!TÔ!Tð[ð 	0µÐ3gÐ3gÐ`fÐ3gÑ3gÔ3gÑ0gÔ0gð[ð 	•$•wÐ;Ð;°FÐ;Ñ;Ô;Ñ;Ô;Ñ<Ô<ð[ð 	�T¥'Ð)QÐ)Q°VÐ)QÑ)QÔ)QÑ"QÔ"QÑRÔRð[ð 	�C ™MœMð[ð 	�t¥GÐ+cÐ+cÀÐ+cÑ+cÔ+cÑ$cÔ$cÑdÔdð[ð 	$ð %Dð %Dð %Dð %DØBð%Dñ %Dô %Dð[ð 	#¥4­Ð/sÐ/sÈ8Ð/sÑ/sÔ/sÑ(sÔ(sÑ#tÔ#tð[õ  14Ð3eÐ3eÐ^dÐ3eÑ3eÔ3eÑ0eÔ0eØ°EÈUØ-2ÐTYð%[ð [ð [€Gõ& ˆwÐ*Ñ*¨8Ñ4Ô4Ð4Ø,ð tð tˆØ>ð 	tð 	tˆDØ4:¸IÒ4EÐ4EÐ0Ð0È?ð tð t�Ý˜7Ð#K¨fÐ#KÐ#K°tÐ#KÐ#K¸eÐ#KÐ#KÐ#KÑKØrÐrÐrÐrÐrÐr ÐrÑrÔrñtô tð tð tðtð	tõ ˆwÐ,Ñ,¨VÑ4Ô4Ð4ÝˆwÐ4Ñ4°[ÑAÔAÐAÝˆwÐ/Ñ/Ð0RÐ0R¸FÐ0RÑ0RÔ0RÑSÔSÐSÝˆwÐ3Ñ3Ð4nÐ4nÐDU×D\ÒD\ÑD^ÔD^Ð4nÑ4nÔ4nÑoÔoÐoÝˆwÐ5Ñ5°iÑ@Ô@Ð@ÝˆgÐ/Ñ/°Ñ7Ô7Ð7ÝˆwÐ(Ñ(¨Ñ1Ô1Ð1ÝˆwÐ5Ñ5°cÑ:Ô:Ð:Ý�G˜NÑ*­6°'¸#¼(Ñ+CÔ+C×+JÒ+JÑ+LÔ+LÑMÔMÐMÝ
ÐuÐu˜GŸMšM¨#Ñ.Ô.ÐuÑuÔuÑ
uÔ
u€EÝ	¨Ð	*Ñ	*Ô	*ÐV¨d½$¸t¿xºxÍÈuÑ?UÔ?UÑ:VÔ:V°6ÐVÐVÐVÑVÔVÐVÐVÐVÐVÐVÐVøøøÐVÐVÐVÐVØ
FÐ
FÐ
FÐ
FµC¸¸fÑ4EÔ4EÐ
FÑ
FÔ
F€EÝˆw�Ñ&Ð/LÐWXÐaiØ”8¨¨\Ô):ÀWÐV\Ð]eÔVfÐqxð  BGð(Hð (Hñ Iô Ið Ià	BˆEÐ	B�/¥&¨°Ñ)@Ñ"AÔ"AÐ	BÐ	B€DÝ�GÐ.Ñ.¨r¯wªwÐ6kÐ6kÕV\Ð]a×]gÒ]gÑ]iÔ]iÑVjÔVjÐ6kÑ6kÔ6kÑ/kÔ/k×/rÒ/rÑ/tÔ/tÑuÔuÐuØ�”˜&‘Ñ!€GØ�>Š>ÑÔð #Ø×%Ò% jÑ1Ô1ˆ	Ý�Y˜s¥<¸aÐ@Ñ@Ô@ð 	FÀAÝ˜GŸMšM¨#Ñ.Ô.Ñ/Ô/ð Fð F�Ø—9’9‘;”;ÐE˜qŸwšw q­¨Q¯]ª]¸7Ñ-CÔ-CÑ)DÔ)DÑEÔEÐEøðFð	Fð 	Fð 	Fñ 	Fô 	Fð 	Fð 	Fð 	Fð 	Fð 	Fð 	Føøøð 	Fð 	Fð 	Fð 	Fð 	×Ò˜'Ñ"Ô"Ð"Ý�'˜'Ñ"Ô"€FÝ˜&Ñ!Ô! 3Ð'?Ô#@Ò@Ð@ÝÐGÑHÔHÐHØ .× 4Ò 4Ñ 6Ô 6ð Uð UÑˆ�HÝ�+ÑÔ Ò(Ð(­zÐ:SÑ/TÔ/TÐ)TÐ(Ø
‡M‚Mµ3°sÐ;SÔ7TÑ3UÔ3UÕqtð  vDñ  rEô  rE€Mñ  Fô  Fð  FÝˆsÐ&Ñ& vÑ.Ô.Ð.Ø ¨c°,Ô.?Í#ÈgÉ,Ì,ÕadÐelÑamÔamÝ ™œ¸¿º¹¼Ô9OÝ"(¨°Ñ)@Ñ"AÔ"AÈGÐciðkð k€Hõ ˆsÐ+Ñ+¨HÑ5Ô5Ð5Ý	�$Œ*�X¨5Ð
1Ñ
1Ô
1¸Ð=Ñ=Ô=Ð=Ø€Os%   ô)uõuõuù+A0{(û({,û/{,Úpallet_pose_dataset_v2c                ó>   — d|› dt          j        | dd¬¦  «        › d�S )Nu   # æ‰˜ç›˜ä½�å§¿æ•°æ�®é›†ï¼ˆuµ   ï¼›éƒ¨åˆ†ä½�å§¿ç›‘ç�£ï¼‰

æ�¥æº�ï¼š2026_10_17.zipï¼›åŽŸæ£€æµ‹é›†ä¿�æŒ�ä¸�å�˜ã€‚æœ¬åŒ…ç‹¬ç«‹æž„å»ºï¼Œä¸�è®­ç»ƒæ¨¡åž‹ã€�ä¸�ä¿®æ”¹å½“å‰�æ´»åŠ¨æ£€æµ‹æ•°æ�®å…¥å�£ã€‚

## æ•°é‡�

```json
Fr1   )r2   r4   u
  
```

## ä½¿ç”¨ä¸Žè¾¹ç•Œ

- `indices/overlap/planar_xy_theta/train|val|test.jsonl`ï¼šä¸Žæ­£å¼�æ£€æµ‹é›†æ ¸éªŒé‡�å� ã€�å”¯ä¸€äººå·¥æ¡†ã€�æ— å†²çª�çš„x/y/thetaç›‘ç�£ã€‚
- `indices/overlap/reference_xyz_normal/`ï¼šåŽŸè¡¨ä¸­çš„å�‚è€ƒç‚¹XYZå’Œæ³•å�‘é‡�ç›‘ç�£ï¼›ä¸Žå¹³é�¢ä½�å§¿åˆ†å¼€ä½¿ç”¨ã€‚æ³•å�‘é‡�ä¸�èƒ½ç¡®å®šç»•æ³•çº¿çš„æ—‹è½¬ï¼Œä¸�èƒ½å½“å®Œæ•´6Då§¿æ€�ã€‚
- `indices/archive_only/`ï¼šæœ‰æ˜Žç¡®GTä½†æœªè¯�å®žå±žäºŽå½“å‰�æ­£å¼�é›†çš„æ‰©å±•æ ·æœ¬ã€‚æ— æ£€æµ‹æ¡†ã€�split=unassignedï¼›æœªç¡®è®¤å®Œæ•´ç›®æ ‡/é‡‡é›†ç»„åˆ’åˆ†å‰�ï¼Œä¸�è‡ªåŠ¨è¿›å…¥è®­ç»ƒæˆ–æµ‹è¯•ã€‚
- `audit/quarantine.jsonl`ï¼šå…¨éƒ¨æŽ’é™¤åŽŸå› ã€�å†²çª�åŽŸå€¼å’Œæ�¥æº�å¼•ç”¨ã€‚æ— GTä¸�ç­‰äºŽè´Ÿä¾‹ï¼Œå¤šæ¡†ä¸�æ“…è‡ªç»‘å®šå…¶ä¸­ä¸€æ¡†ï¼Œç¼ºå¤±PCDä¸�çŒœæµ‹å¯¹åº”æ–‡ä»¶ã€‚
- æ¯�ä¾‹æœ‰åŽŸç”ŸPCDã€�float32 `points_xyzi`ï¼ˆä¸�åˆ ç‚¹/ä¸�æ”¹å�˜é¡ºåº�ï¼‰ã€�æœ‰æ•ˆæŽ©ç �å’Œæº�ç‚¹ç´¢å¼•ï¼›é‡�å� ä¾‹å�¦æœ‰åŽŸPNGã€�å››é€šé�“sensor NPZå’Œ `pixel_to_source_index`ã€‚åŽŸPNGå�¯ç»�è¿‡180Â°æ–¹å�‘æ ¡æ­£ï¼›PCDæœªæ—‹è½¬ï¼Œæ˜ å°„æ˜¾å¼�è®°å½•ï¼Œä¸�ç»™GTè§’åº¦æ“…åŠ 180Â°ã€‚
- æ ‡ç­¾è§�æ¯�ä¾‹JSONå�Š `annotations.jsonl`ï¼Œç¼ºå¤±ç»´åº¦ä¸ºnullï¼Œ`supervision_mask`æŽ§åˆ¶æ�Ÿå¤±ã€‚ç¼ºå°‘z/roll/pitchæ—¶ä¸�å¡«0ï¼›ä¸�å¯¼å‡ºè™šæž„å››å…ƒæ•°/åˆšä½“å�˜æ�¢æˆ–YOLOäººä½“å…³é”®ç‚¹æ ‡ç­¾ã€‚
- æ�ƒå¨�åŽŸè¡¨ä¼˜å…ˆäºŽæ´¾ç”ŸCSVç´¢å¼•ï¼›ç´¢å¼•çš„æ³•å�‘é‡�ç§‘å­¦è®¡æ•°æ³•æ�Ÿå��æ—¶ï¼Œå�ªåœ¨åŽŸè¡¨å�Œä¸€æ ·æœ¬æ˜Žç¡®æ•°å€¼æ— æ­§ä¹‰ä¸”å�„åˆ—ä¸€è‡´æ—¶æ�¢å¤�ï¼Œå¹¶è®°å½•index_correctionä¸Žç´¢å¼•åŽŸå€¼ã€‚çœŸå®žGTå†²çª�ä¸�è‡ªåŠ¨è£�å†³ã€‚
- `x_gt/y_gt/theta_d_gt`ä»…æ�¥è‡ªæ˜Žç¡®GTåˆ—ï¼Œä¸�è¯»å�–x/y/thetaã€�ICPè¾“å‡ºæˆ–theta_d_convert_gtä½œä¸ºçœŸå€¼ã€‚å�•ä½�æŒ‰æ�¥æº�åŒ…ä¸ºm/degreeï¼›ç‚¹äº‘åŽŸå�•ä½�ä¿�ç•™ï¼Œå�ªæœ‰åŽŸæ­£å¼�æ”¿ç­–å·²æœ‰æ ¸éªŒæ—¶æ‰�ç»™scale_to_mã€‚
- å�‚è€ƒç³»ã€�ç›®æ ‡å�‚è€ƒç‚¹å’Œè§’åº¦æ–¹å�‘ä¿�æŒ�æ�¥æº�è¯­ä¹‰ï¼Œå°šæ— ç»Ÿä¸€ä¼ æ„Ÿå™¨â†’æœºå™¨äººå¤–å�‚ï¼Œä¸�å£°ç§°æ‰€æœ‰è¡¨å·²ç»Ÿä¸€åˆ°å�Œä¸€ä¸ªæœºå™¨äººå��æ ‡ç³»ï¼Œä¹Ÿä¸�é»˜è®¤ä½�ç½®å°±æ˜¯å‡ ä½•ä¸­å¿ƒã€‚ç”¨äºŽè·¨åŸŸç»�å¯¹ä½�å§¿å‰�é¡»è¡¥å……æ ‡å®šå’Œå®šä¹‰ã€‚
- åŽŸåˆ’åˆ†å®Œæ•´ç»§æ‰¿ï¼Œæ²¡æœ‰ä¸ºå‡‘æ¯”ä¾‹æŠŠval/testè¿�å…¥trainï¼›å�ªæœ‰ä¸€ä¸ªæ¡†æ—¶æŒ‰å¸§çº§å”¯ä¸€ç›®æ ‡å…³è�”ï¼Œä»�éœ€æ³¨æ„�äººå·¥GTæ˜¯å�¦é’ˆå¯¹è¯¥ç›®æ ‡çš„ç‰©ç�†å�‚è€ƒç‚¹ã€‚
- archiveä¸­çš„å�Œå��ç‚¹äº‘åŒ…å�«è£�å‰ª/åˆ†å‰²/å¼ºåº¦ä¿®æ”¹ç‰ˆæœ¬ï¼›å�ªæœ‰SHA-256ç›¸å�Œæˆ–é€�ç‚¹æœ‰åº�XYZä¸ŽVIEWPOINTå®Œå…¨ç›¸å�Œæ‰�è®¤å®šé‡�å� ã€‚å¼ºåº¦ä¸�å�Œæ—¶ä¿�ç•™æ­£å¼�é›†è¾“å…¥ï¼Œè®°å½•å·®å¼‚ï¼Œä¸�è¦†ç›–è¾“å…¥ã€‚

## æ ¸éªŒ

`sha256sum -c checksums.sha256`ï¼›æˆ– `.venv/bin/python -m pallet.pose_dataset verify --dataset è§£åŽ‹ç›®å½•`ã€‚
å®Œæ•´è¾“å…¥/é€�è¡¨é€�è¡Œè¯�æ�®è§�provenanceå’Œauditã€‚CSVå�¯ç›´æŽ¥åœ¨Excelä¸­æŸ¥çœ‹é‡�å� å’ŒæŽ’é™¤æ¸…å�•ã€‚
rT   )r’  r‘  s     r/   r¤  r¤  ¨  s=   € ð¨(ð ð õ „ˆG ¨aÐ0Ñ0Ô0ðð ð ð r.   c                 ó’  — t          j        t          ¬¦  «        } |                      dd¬¦  «        }|                     d¦  «        }|                     dt          t          dz  ¬¦  «         |                     d	d
¬¦  «         |                     d¦  «        }|                     dt          d¬¦  «         |                     dt          ¬¦  «         |                      ¦   «         }|j	        dk    rt          |j        |j        ¦  «         d S t          t          j        t!          |j        |j        ¦  «        d¬¦  «        ¦  «         d S )N)ÚdescriptionÚcommandT)Údestr
  r¾  z--configz#configs/pallet_pose_dataset_v2.json)ÚtypeÚdefaultz--resumeÚ
store_true)Úactionr1  z	--dataset)rÅ  r
  z	--archive)rÅ  Fr›  )ÚargparseÚArgumentParserÚ__doc__Úadd_subparsersÚ
add_parserÚadd_argumentr	   r�  Ú
parse_argsrÃ  r¾  r¬  r«  r£  r7   r8   r1  rè  rz  )Úparserrž   r  Úargss       r/   ÚmainrÒ  È  s  € ÝÔ"­wÐ7Ñ7Ô7€FØ×Ò 9°dÐÑ;Ô;€CØ	‡n‚n�WÑÔ€A˜aŸnšn¨Z½TÍ'ÐRwÑJw˜nÑxÔxÐxØ‡N‚N�: \€NÑ2Ô2Ð2Ø	‡n‚n�XÑÔ€A˜qŸ~š~¨k½tÈT˜~ÑRÔRÐRÐST×SaÒSaÐbmÕswÐSaÑSxÔSxÐSxØ	×	Ò	Ñ	Ô	€DØ„|�WÒÐ�U 4¤;¨t¬{Ñ;Ô;Ð;Ð;Ð;Ý	�tŒz�& ¤¨d¬lÑ;Ô;ÈÐOÑOÔOÑ	PÔ	PÐ	PÐ	PÐ	Pr.   Ú__main__rO   )F)r¿  )JrË  Ú
__future__r   rÉ  Úcollectionsr   r   Úconcurrent.futuresr   r   r   rw   rx  ry   r7   r�   Úpathlibr	   r
   r’   r   rs  ÚtempfileÚzipfiler   r   Únumpyr  Úcluster_targetsr   r   r   r   Údata.orientationr   Údata.pcdr   rž  rp   r?   r�  rÃ   rœ  r*   r<   rM   rP   r[   re   rn   rs   r|   r…   r�   rœ   r    rÎ   rè   rò   r8  rB  rM  ri  r~  r™  r«  r°  rù  r  r1  r¾  r¤  rÒ  Ú__name__r-   r.   r/   ú<module>rß     s¦  ððð ð #Ð "Ð "Ð "Ð "Ð "à €€€Ø ,Ð ,Ð ,Ð ,Ð ,Ð ,Ð ,Ð ,Ø 1Ð 1Ð 1Ð 1Ð 1Ð 1Ø 'Ð 'Ð 'Ð 'Ð 'Ð 'Ð 'Ð 'Ø 
€
€
€
Ø €€€Ø 	€	€	€	Ø €€€Ø €€€Ø 'Ð 'Ð 'Ð 'Ð 'Ð 'Ð 'Ð 'Ø 	€	€	€	Ø €€€Ø €€€Ø €€€Ø )Ð )Ð )Ð )Ð )Ð )Ð )Ð )à Ð Ð Ð à QÐ QÐ QÐ QÐ QÐ QÐ QÐ QÐ QÐ QÐ QÐ QØ )Ð )Ð )Ð )Ð )Ð )Ø Ð Ð Ð Ð Ð à
ˆ$ˆx‰.Œ.×
 Ò
 Ñ
"Ô
"Ô
*¨1Ô
-€ØS€	àBØ:Ø?Ø@ØCØKðð €ðDð Dð Dðlð lð lð	ð 	ð 	ð-ð -ð -ð(ð (ð (ð
Uð Uð Uðð ð ðð ð ðFð Fð Fðð ð ðð ð ð	ð 	ð 	ð>ð >ð >ð&ð &ð &ðRð ð ð ð ð ðBð Bð BðJð ð ðsð sð sðMð Mð Mð8ð ð ð,.ð .ð .ðDfð fð fð&ð &ð &ð9ð 9ð 9ðx@ð @ð @ð"<^ð <^ð <^ð <^ð~\ð \ð \ð \ð~ð ð ð ð@Qð Qð Qð ˆZÒÐ˜˜™œ˜˜˜ÐÐr.   