§
    ÞÑj(  ã                  ó€  — d Z ddlmZ ddlZddlmZ ddlmZmZ ddl	Z	ddl
mZ ddlZddlZddlmZ ddlmZmZ  ee¦  «                             ¦   «         j        d	         Zej                             d ee¦  «        ¦  «         dd
lmZmZmZmZ ddlm Z m!Z! ddl"m#Z#m$Z$ d„ Z%d„ Z&d„ Z'e(dk    r e'¦   «          dS dS )zPIndependent identities, checksums, masks, offline JS data and HTTP smoke checks.é    )ÚannotationsN)ÚThreadPoolExecutor)ÚSimpleHTTPRequestHandlerÚThreadingHTTPServer)ÚPath)Úquote)ÚRequestÚurlopené   )ÚdigestÚencodedÚprotected_writeÚ	safe_path)Ú	read_jsonÚ
read_jsonl)Ú
STRUCTURESÚvalidate_resultsc                óv  — |                       ¦   «         }t          j        ¦   «         }|                     d¦  «        t	          d¦  «        z   }|                     ||d …         ¦  «        \  }}|||z   d …         }|                     d¦  «        st          d¦  «        ‚|                     |t	          d¦  «        d …         ¦  «        \  }}|t	          d¦  «        |z   d …         }|                     d¦  «        st          d¦  «        ‚|                     |t	          d¦  «        d …         ¦  «        \  }}	|||fS )Nzconst rows=z,groups=z$Unexpected gallery group data layoutz,roots=z"Unexpected gallery resource layout)Ú	read_textÚjsonÚJSONDecoderÚindexÚlenÚ
raw_decodeÚ
startswithÚ
ValueError)
ÚpathÚtextÚdecoderÚstartÚrowsÚendÚrestÚgroupsÚrootsÚ_s
             ú&scripts/verify_structure_attributes.pyÚdecode_galleryr(      s+  € Ø�>Š>ÑÔ€DÝÔÑ Ô €GØ�JŠJ�}Ñ%Ô%¥c¨-Ñ&8Ô&8Ñ8€EØ×"Ò" 4¨¨¨¤<Ñ0Ô0�I€Dˆ#Ø��c‘	�
�
Ô€DØ�?Š?˜:Ñ&Ô&ð AÝÐ?Ñ@Ô@Ð@Ø×$Ò$ T­#¨j©/¬/Ð*:Ð*:Ô%;Ñ<Ô<�K€FˆCØ•�J‘” Ñ#Ð$Ð$Ô%€DØ�?Š?˜9Ñ%Ô%ð ?ÝÐ=Ñ>Ô>Ð>Ø×!Ò! $¥s¨9¡~¤~  Ô"7Ñ8Ô8�H€Eˆ1Ø�˜ÐÐó    c                óì  ‡ ‡"‡#— t          ‰ dz  ¦  «        }|d         dk    rt          d¦  «        ‚ˆ fd„}t          d¬¦  «        5 }t          |                     ||d                              ¦   «         ¦  «        ¦  «         d d d ¦  «         n# 1 swxY w Y   t          ‰ d	z  ¦  «        }t          d
„ |d         D ¦   «         ¦  «        }t          |¦  «        t          ‰ dz  ¦  «        }}‰ dz  }	|	                     ¦   «         rd„ t          |	¦  «        d         D ¦   «         ni }
t          |||
¦  «         t          ‰ dz  ¦  «        }t          ‰ dz  ¦  «        }t          |¦  «        t          |d                              ¦   «         ¦  «        k    s¿t          |¦  «        t          |d                              ¦   «         ¦  «        |d                              dd¦  «        z   |d                              dd¦  «        z   k    sMt          |¦  «        t          d„ |D ¦   «         ¦  «        k    s#t          t          ‰ dz  ¦  «        ¦  «        dk    rt          d¦  «        ‚t          ‰ dz  ¦  «        \  }}}t          |¦  «        t          |¦  «        k    s||k    rt          d¦  «        ‚t          ¦   «         }|D �]	}|                     ‰ |d         z  |d         › d�z                       ¦   «         ¦  «         |                     ‰ |d          z  |d!         z                       ¦   «         ¦  «         |d"         }|d#         |                     d$¦  «        fD ]'}|r#|                     t%          ‰ |¦  «        ¦  «         Œ(|                     d%¦  «        r/|                     t%          ‰ |d%         d&         ¦  «        ¦  «         �Œ|D ](}|                     ¦   «         st          d'|› �¦  «        ‚Œ)|D �]Š"‰ d(‰"d)         d*›d+�z  }|                     ¦   «         }d,‰"d)         › d-�}|                     |¦  «        r|                     d.¦  «        st          d/¦  «        ‚t/          j        |t          |¦  «        d0…         ¦  «        }ˆ"fd1„|D ¦   «         }t          |¦  «        d2„ |D ¦   «         k    rt          d3¦  «        ‚|D ]5}||d                  d4         |d"         d4         k    rt          d5¦  «        ‚Œ6�Œ	g }g t3          j        ¦   «         ¢d ‘R D ]Š#ˆ#fd6„|D ¦   «         }||d d7…         z  }Œ|d8„ |D ¦   «         z  }|d9„ |D ¦   «         d d:…         z  }‰ dz  ‰ d;z  ‰ d<z  ‰ d=z  h}|t          ‰                      d>¦  «        ¦  «        z  }|D �]
}|                     ‰ |d         z  |d         › d�z                       ¦   «         ¦  «         |                     ‰ |d          z  |d!         z                       ¦   «         ¦  «         |d"         }|                     ‰ |d#         z  ¦  «         |                     d$¦  «        r|                     ‰ |d$         z  ¦  «         |                     d%¦  «        r$|                     ‰ |d%         d&         z  ¦  «         �Œ G d?„ d@t6          ¦  «        }t9          dA|¦  «        }t;          j        |j        dB¬C¦  «        }|                      ¦   «          	 |j!        dD         }|D ]ª}dE|› dF�tE          |                     ¦   «          #                    tH          ¦  «         %                    ¦   «         ¦  «        z   }tM          tO          |dG¬H¦  «        dI¬J¦  «        5 } | j(        dKk    rt          dL|› �¦  «        ‚	 d d d ¦  «         n# 1 swxY w Y   Œ«	 | )                    ¦   «          | *                    ¦   «          | +                    ¦   «          nA# | )                    ¦   «          | *                    ¦   «          | +                    ¦   «          w xY wdMt          |¦  «        t          |¦  «        t          |d         ¦  «        t          |¦  «        t          |¦  «        t          |¦  «        dBdBdNdOtY          tZ          ¦  «        tY          ‰ dz  ¦  «        dPœ}!t]          |dQz  t_          |!¦  «        ¦  «         ta          t/          j1        |!dN¬R¦  «        ¦  «         d S )SNzoutput_manifest.jsonÚstateÚcompletezDataset has not completedc                óx   •— | \  }}t          t          ‰|¦  «        ¦  «        |k    rt          d|› �¦  «        ‚d S )NzOutput checksum mismatch: )r   r   r   )ÚitemÚnameÚexpectedÚoutputs      €r'   Ú
check_filezverify.<locals>.check_file*   sH   ø€ Ø‰ˆˆhÝ•)˜F DÑ)Ô)Ñ*Ô*¨hÒ6Ð6ÝÐ@¸$Ð@Ð@ÑAÔAÐAð 7Ð6r)   é   )Úmax_workersÚfileszrun_manifest.jsonc              3  ó^   K  — | ](}|                      d ¦  «        ¯t          |¦  «        V — Œ)dS )z(center_reclassification_v1/targets.jsonlN)Úendswithr   )Ú.0Úps     r'   ú	<genexpr>zverify.<locals>.<genexpr>1   s:   è è € ÐkÐk˜a°A·J²JÐ?iÑ4jÔ4jÐk•$�q‘'”'ÐkÐkÐkÐkÐkÐkr)   Úinputsztargets.jsonlz%inputs/necessary_visual_rechecks.jsonc                ó    — i | ]}|d          |“ŒS ©Ú
target_key© ©r8   Úrs     r'   ú
<dictcomp>zverify.<locals>.<dictcomp>4   s   € ÐUÐUÐU q��,” ÐUÐUÐUr)   Úobservationszsummary.jsonzgroups.jsonÚstatesÚ
structuresÚpartialr   Úunknownc              3  ó&   K  — | ]}|d          V — ŒdS )ÚtargetsNr?   )r8   Úgs     r'   r:   zverify.<locals>.<genexpr>:   s&   è è € Ð=Ð=°  )¤Ð=Ð=Ð=Ð=Ð=Ð=r)   zseed_targets.jsonli¸  z4Structure totals or seed identities are inconsistentzgallery.htmlz)Gallery counts disagree with full resultsÚmediar>   z.jpgÚdatasetÚimageÚstructure_projection_evidenceÚthreshold_maskÚforeground_maskÚpointcloud_evidenceÚnative_maskzMissing gallery resource: zevidence/class_Úfinal_class_idÚ02dz.jszOwindow.structureEvidence=window.structureEvidence||{};window.structureEvidence[z]=z;
z'Invalid offline evidence script wrapperéþÿÿÿc                ó8   •— g | ]}|d          ‰d          k    ¯|‘ŒS )rS   r?   )r8   rA   rJ   s     €r'   ú
<listcomp>zverify.<locals>.<listcomp>R   s/   ø€ ÐRÐRÐR˜! qÐ)9Ô':¸aÐ@PÔ>QÒ'QÐ'Q�AÐ'QÐ'QÐ'Qr)   c                ó   — h | ]
}|d          ’ŒS r=   r?   r@   s     r'   ú	<setcomp>zverify.<locals>.<setcomp>S   s   € Ð;Ð;Ð;¨Q˜˜<œÐ;Ð;Ð;r)   z*Evidence script target identities disagreeÚsupport_leg_countz)Evidence script changed projection valuesc                ó,   •— g | ]}|d          ‰k    ¯|‘ŒS )Ústructure_labelr?   )r8   rA   Úlabels     €r'   rW   zverify.<locals>.<listcomp>\   s)   ø€ ÐGÐGÐG˜A¨Ð+<Ô)=ÀÒ)FÐ)F�aÐ)FÐ)FÐ)Fr)   é   c                ó"   — g | ]}|d          ¯
|‘ŒS )Ústructure_visual_recheckedr?   r@   s     r'   rW   zverify.<locals>.<listcomp>^   s#   € ÐAÐAÐA�A Ð#?Ô!@ÐAˆaÐAÐAÐAr)   c                ó*   — g | ]}|d          dk    ¯|‘ŒS )Ústructure_label_sourceÚ#pointcloud_mask_projection_fallbackr?   r@   s     r'   rW   zverify.<locals>.<listcomp>_   s)   € ÐfÐfÐf�A Ð#;Ô!<Ð@eÒ!eÐ!eˆaÐ!eÐ!eÐ!er)   é   zreport_zh.htmlu   æ‰˜ç›˜ç»“æž„åˆ†ç±»ç»“æžœ.xlsxzassets/ReportSans.woffzevidence/*.jsc                  ó$   ‡ — e Zd Zˆ fd„Zd„ Zˆ xZS )úverify.<locals>.Handlerc                ób   •—  t          ¦   «         j        |dt          t          ¦  «        i|¤Ž d S )NÚ	directory)ÚsuperÚ__init__ÚstrÚPROJECT)ÚselfÚargsÚkwargsÚ	__class__s      €r'   rj   z verify.<locals>.Handler.__init__j   s2   ø€ Ð-=­U©W¬WÔ-=¸tÐ-fÍsÕSZÉ|Ì|Ð-fÐ_eÐ-fÐ-fÐ-fÐ-fÐ-fr)   c                ó   — d S )Nr?   )rm   rn   s     r'   Úlog_messagez#verify.<locals>.Handler.log_messagek   s   € € € r)   )Ú__name__Ú
__module__Ú__qualname__rj   rr   Ú__classcell__)rp   s   @r'   ÚHandlerrf   i   s/   ø€ € € € € ØfÐfÐfÐfÐfØ*Ð*Ð*Ð*Ð*Ð*Ð*r)   rw   )z	127.0.0.1r   T)ÚtargetÚdaemonr   zhttp://127.0.0.1:ú/ÚHEAD)Úmethodé   )ÚtimeoutéÈ   zHTTP resource failed: ÚpassedFz]Playwright bundled Node requires GLIBC_2.28; local libc is older, no system browser available)r+   rI   r$   Úoutput_files_sha256_checkedÚ referenced_local_resources_existÚ%offline_evidence_bundles_json_checkedÚhttp_head_200_checksÚstructure_counts_consistentÚoriginal_fields_unchangedÚbrowser_interaction_testedÚbrowser_blockerÚvalidator_sha256Údelivery_manifest_sha256zverification.json)Úensure_ascii)2r   r   r   ÚlistÚmapÚitemsÚnextr   Úexistsr   r   ÚsumÚvaluesÚgetr(   ÚsetÚaddÚresolver   Úis_filer   r   r7   r   Úloadsr   Úglobr   r   Ú	threadingÚThreadÚserve_foreverr    Úserver_addressr   Úrelative_torl   Úas_posixr
   r	   ÚstatusÚshutdownÚserver_closeÚjoinr   Ú__file__r   r   ÚprintÚdumps)$r1   Ú	artifactsÚmanifestr2   ÚpoolÚrunÚsourceÚoriginalr!   Úrechecks_pathÚrechecksÚsummaryr$   ÚpublicÚgallery_groupsr%   Ú	resourcesrA   Úer   r   ÚprefixÚdataÚselectedÚpicksÚ
candidatesÚ
http_pathsrw   ÚserverÚthreadÚportÚurlÚresponseÚresultrJ   r]   s$   `                                 @@r'   ÚverifyrÀ   &   s
  øøø€ Ý˜Ð 6Ñ6Ñ7Ô7€HØ�Ô˜JÒ&Ð&ÝÐ4Ñ5Ô5Ð5ðBð Bð Bð Bð Bõ 
¨Ð	*Ñ	*Ô	*ð >¨dÝˆT�XŠX�j (¨7Ô"3×"9Ò"9Ñ";Ô";Ñ<Ô<Ñ=Ô=Ð=ð>ð >ð >ñ >ô >ð >ð >ð >ð >ð >ð >øøøð >ð >ð >ð >å
�FÐ.Ñ.Ñ
/Ô
/€CÝÐkÐk 3 x¤=ÐkÑkÔkÑkÔk€FÝ Ñ'Ô'­°F¸?Ñ4JÑ)KÔ)Kˆd€HØÐBÑB€MØYf×YmÒYmÑYoÔYoÐwÐUÐU­I°mÑ,DÔ,DÀ^Ô,TÐUÑUÔUÐUÐuw€HÝ�X˜t XÑ.Ô.Ð.Ý˜˜~Ñ-Ñ.Ô.€GÝ�v˜mÑ+Ñ,Ô,€FÝˆD‰	Œ	•S˜ Ô*×1Ò1Ñ3Ô3Ñ4Ô4Ò4Ð4Ý�4‰yŒy�C ¨Ô 5× <Ò <Ñ >Ô >Ñ?Ô?ÀÈÔ@Q×@UÒ@UÐV_ÐabÑ@cÔ@cÑcÐdkÐltÔdu×dyÒdyð  {Dð  FGñ  eHô  eHñ  Hò  Hð  HÝ�4‰yŒy�CÐ=Ð=°fÐ=Ñ=Ô=Ñ=Ô=Ò=Ð=Ý•:˜fÐ%9Ñ9Ñ:Ô:Ñ;Ô;¸sÒBÐBÝÐOÑPÔPÐPÝ$2°6¸.Ñ3HÑ$IÔ$IÑ!€FˆN˜EÝ
ˆ6�{„{•c˜$‘i”iÒÐ >°VÒ#;Ð#;ÝÐDÑEÔEÐEÝ‘”€IØð Vñ VˆØ�Š�v˜e GœnÑ,°°,´Ð-EÐ-EÐ-EÑE×NÒNÑPÔPÑQÔQÐQØ�Š�v˜e IÔ.Ñ.¨q°¬zÑ9×BÒBÑDÔDÑEÔEÐEØÐ-Ô.ˆØÐ'Ô(¨!¯%ª%Ð0AÑ*BÔ*BÐCð 	<ð 	<ˆDØÐ;�Y—]’]¥9¨V°TÑ#:Ô#:Ñ;Ô;Ð;øØ�5Š5Ð&Ñ'Ô'ð 	VØ�MŠM�) F¨AÐ.CÔ,DÀ]Ô,SÑTÔTÑUÔUÐUùØð Uð UˆØ�|Š|‰~Œ~ÐT¥ZÐ0SÈTÐ0SÐ0SÑ%TÔ%TÐTÐTØð Nñ NˆØÐD¨Ð*:Ô(;ÐDÐDÐDÐDÑDˆØ�~Š~ÑÔˆØ|ÐefÐgwÔexÐ|Ð|Ð|ˆØ�Š˜vÑ&Ô&ð 	H¨d¯mªm¸EÑ.BÔ.Bð 	HÝÐFÑGÔGÐGÝŒz˜$�s 6™{œ{¨2˜~Ô.Ñ/Ô/ˆØRÐRÐRÐR˜tÐRÑRÔRˆÝˆt‰9Œ9Ð;Ð;°(Ð;Ñ;Ô;Ò;Ð;ÝÐIÑJÔJÐJØð 	Nð 	NˆAØ�A�l”OÔ$Ð%8Ô9¸QÐ?^Ô=_Ð`sÔ=tÒtÐtÝ Ð!LÑMÔMÐMð uñ	Nð
 €EØ-•:Ô$Ñ&Ô&Ð-¨Ð-Ð-ð  ð  ˆØGÐGÐGÐG ÐGÑGÔGˆ
Ø�˜B˜Q˜B”ÑˆˆØ	ÐAÐA˜ÐAÑAÔAÑA€EØ	ÐfÐf˜ÐfÑfÔfÐgiÐhiÐgiÔjÑj€EØ˜Ñ'¨Ð0@Ñ)@À&ÐIhÑBhÐjpð  rJñ  kJð  K€JØ•#�f—k’k /Ñ2Ô2Ñ3Ô3Ñ3€JØð hñ hˆØ�Š˜˜u Wœ~Ñ-°°<´Ð.FÐ.FÐ.FÑF×OÒOÑQÔQÑRÔRÐRØ�Š˜˜u YÔ/Ñ/°°'´
Ñ:×CÒCÑEÔEÑFÔFÐFØÐ-Ô.ˆØ�Š�v˜aÐ 0Ô1Ñ1Ñ2Ô2Ð2Ø�5Š5Ð"Ñ#Ô#ÐP Z§^¢^°F¸1Ð=NÔ;OÑ4OÑ%PÔ%PÐ%PØ�5Š5Ð&Ñ'Ô'Ðg¨¯ª¸¸qÐAVÔ?WÐXeÔ?fÑ8fÑ)gÔ)gÐ)gùð+ð +ð +ð +ð +Õ*ñ +ô +ð +õ !Ð!1°7Ñ;Ô;€FÝÔ VÔ%9À$ÐGÑGÔG€FÈÏÊÉÌÈð@ØÔ$ QÔ'ˆØð 	]ð 	]ˆDØ- dÐ-Ð-Ð-­e°D·L²L±N´N×4NÒ4NÍwÑ4WÔ4W×4`Ò4`Ñ4bÔ4bÑ.cÔ.cÑcˆCÝ� ¨VÐ4Ñ4Ô4¸bÐAÑAÔAð ]ÀXØ”? cÒ)Ð)µÐ<[ÐUYÐ<[Ð<[Ñ1\Ô1\Ð+\Ð)ð]ð ]ð ]ñ ]ô ]ð ]ð ]ð ]ð ]ð ]ð ]øøøð ]ð ]ð ]ð ]øð	]ð
 	�ŠÑÔÐ˜6×.Ò.Ñ0Ô0Ð0°&·+²+±-´-°-°-øˆ�ŠÑÔÐ˜6×.Ò.Ñ0Ô0Ð0°&·+²+±-´-°-°-øøøð  ­C°©I¬IÅÀVÁÄÝ'*¨8°GÔ+<Ñ'=Ô'=ÕcfÐgpÑcqÔcqÝ14°V±´ÕVYÐZdÑVeÔVeØ'+È$Ø&+ØzÝ"¥8Ñ,Ô,Í&ÐQWÐXnÑQnÑJoÔJoðqð q€Fõ �IÐ1Ñ1µ7¸6±?´?ÑCÔCÐCÝ	�$Œ*�V¨%Ð
0Ñ
0Ô
0Ñ1Ô1Ð1Ð1Ð1sC   Á<BÂBÂBÛ2B_* Ý5^ Þ_* Þ ^$	Þ$_* Þ'^$	Þ(_* ß*>`(c                 ór  — t          j        t          ¬¦  «        } |                      dt          t
          dz  ¬¦  «         |                      dt          t
          dz  ¬¦  «         |                      ¦   «         }t          |j         	                    ¦   «         |j
         	                    ¦   «         ¦  «         d S )N)Údescriptionz--outputz&outputs/pallet_structure_attributes_v1)ÚtypeÚdefaultz--artifactsz1outputs/pallet_structure_attributes_validation_v1)ÚargparseÚArgumentParserÚ__doc__Úadd_argumentr   rl   Ú
parse_argsrÀ   r1   r–   r§   )Úparserrn   s     r'   ÚmainrË   ƒ   sš   € ÝÔ$µÐ9Ñ9Ô9€FØ
×Ò˜
­µwÐ?gÑ7gÐÑhÔhÐhØ
×Ò˜­D½'ÐBuÑ:uÐÑvÔvÐvØ×ÒÑÔ€DÝ
ˆ4Œ;×ÒÑ Ô  $¤.×"8Ò"8Ñ":Ô":Ñ;Ô;Ð;Ð;Ð;r)   Ú__main__))rÇ   Ú
__future__r   rÅ   Úconcurrent.futuresr   Úhttp.serverr   r   r   Úpathlibr   Úsysrš   Úurllib.parser   Úurllib.requestr	   r
   r¤   r–   Úparentsrl   r   Úinsertrk   Úpallet.fork_face_anylabelingr   r   r   r   Úpallet.merge_appearance_classesr   r   Úpallet.structure_attributesr   r   r(   rÀ   rË   rs   r?   r)   r'   ú<module>rÙ      s�  ðØ VÐ VØ "Ð "Ð "Ð "Ð "Ð "à €€€Ø 1Ð 1Ð 1Ð 1Ð 1Ð 1Ø EÐ EÐ EÐ EÐ EÐ EÐ EÐ EØ €€€Ø Ð Ð Ð Ð Ð Ø 
€
€
€
Ø Ð Ð Ð Ø Ð Ð Ð Ð Ð Ø +Ð +Ð +Ð +Ð +Ð +Ð +Ð +à
ˆ$ˆx‰.Œ.×
 Ò
 Ñ
"Ô
"Ô
*¨1Ô
-€Ø „‡‚��3�3�w‘<”<Ñ  Ô  Ð  à TÐ TÐ TÐ TÐ TÐ TÐ TÐ TÐ TÐ TÐ TÐ TØ AÐ AÐ AÐ AÐ AÐ AÐ AÐ AØ DÐ DÐ DÐ DÐ DÐ DÐ DÐ Dðð ð ð Z2ð Z2ð Z2ðz<ð <ð <ð ˆzÒÐ˜4˜4™6œ6˜6˜6˜6ÐÐr)   