Ë
|
ê^i(1 ã ó¸ d dl mZ d dlZd dlZd dlZd dlmZ d dlmZ d dl m
|
Z
|
d dl m Z d dl mZ d dlmZ d d
|
lmZmZmZmZmZmZmZ e
|
e¬ « d+d « Z e
|
e¬ « d,d « Z e
|
e¬ « d-d« Z e
|
e¬ « d+d« Z e
|
e¬ « d+d« Z e
|
e¬ « d+d« Z e
|
e¬ « d+d« Z e
|
e¬ « d+d« Z e
|
e¬ « d+d« Z! e
|
e¬ « d+d« Z" e
|
e¬ « d+d« Z# e
|
e¬ « d+d« Z$ e
|
e¬ « d+d« Z% e
|
e¬ « d+d« Z& e
|
e¬ « d+d« Z' e
|
e¬ « d+d« Z( e
|
e¬ « d+d « Z) e
|
e*e« ¬ « d.d « Z+ e
|
e¬ « d+d « Z,d/d0d Z- e
|
d ¬ « d1d!« Z.d2d"Z/d3d#Z0d4d5d$Z1d6d%Z2d7d&Z3d'ejh d(f d8d)Z5 d9 d:d*Z6y);é )Ú annotationsN)ÚIncrementalDecoder)Úaliases)Ú lru_cache)Úfindall)Ú Generator)ÚMultibyteIncrementalDecoderé )ÚENCODING_MARKSÚIANA_SUPPORTED_SIMILARÚ RE_POSSIBLE_ENCODING_INDICATIONÚUNICODE_RANGES_COMBINEDÚ UNICODE_SECONDARY_RANGE_KEYWORDÚUTF8_MAXIMAL_ALLOCATIONÚCOMMON_CJK_CHARACTERS)Úmaxsizec ó¨ t j | « }d|v xs( d|v xs" d|v xs d|v xs d|v xs d|v xs
|
d|v xs d |v S # t $ r Y yw xY w)
|
NFz
|
WITH GRAVEz
|
WITH ACUTEz WITH CEDILLAzWITH DIAERESISzWITH CIRCUMFLEXz
|
WITH TILDEz WITH MACRONzWITH RING ABOVE©Ú unicodedataÚnameÚ
|
ValueError©Ú characterÚ descriptions õk H:\项ç®\archive\æµè¯ç»\èæ¬\Change_password\venv_build\Lib\site-packages\charset_normalizer/utils.pyÚis_accentuatedr s ðÜ&×+Ñ+¨IÓ6 ð Ð#ò ,Ø ;Ð &ò ,à [Ð (ò ,ð {Ð *ò ,ð Ð +ò ,ð
|
;Ð &ò ,ð KÐ 'ò ,ð Ð +ð øô ò Ùðús A Á AÁAc ó t j | « }|s| S |j d« }t t |d d« « S )Nú r é )r Ú decompositionÚsplitÚchrÚint)r Ú
|
decomposedÚcodess r Ú remove_accentr& - sA ä!×/Ñ/° Ó:JÙ ØÐà!×'Ñ'¨Ó,Eä s58RÓ Ó !Ð!ó c ób t | « }t j « D ] \ }}||v s |c S y)zK
|
Retrieve the Unicode range official name from a single character.
|
N)Úordr Úitems)r Ú character_ordÚ
|
range_nameÚ ord_ranges r Ú unicode_ranger. 8 s= ô
|
Y Mä!8×!>Ñ!>Ó!@ò Ñ
|
IØ IÒ %Ø Ò ð ð r' c óT t j | « }d|v S # t $ r Y yw xY w)NFÚLATINr r s r Úis_latinr1 F s8 ðÜ&×+Ñ+¨IÓ6 ð kÐ !Ð!øô ò Ùðúó '¦'c óZ t j | « }d|v ryt | « }|yd|v S )NÚPTFÚ Punctuation©r Úcategoryr. ©r Úcharacter_categoryÚcharacter_ranges r Úis_punctuationr; O s= ä )× 2Ñ 2°9Ó =Ðà
|
Ð Ñ Øä"/° Ó":OàÐ Øà OÐ +Ð+r' c óp t j | « }d|v sd|v ryt | « }|yd|v xr |dk7 S )NÚSÚNTFÚFormsÚLor6 r8 s r Ú is_symbolrA ^ sP ä )× 2Ñ 2°9Ó =Ðà
|
Ð Ñ CÐ+=Ñ$=Øä"/° Ó":OàÐ Øà oÐ %Ò DÐ*<ÀÑ*DÐDr' c ó2 t | « }|yd|v xs d|v S )NFÚ EmoticonsÚ Pictographs)r. )r r: s r Ú is_emoticonrE m s* ä"/° Ó":OàÐ Øà /Ð )Ò M¨]¸oÐ-MÐMr' c ój | j « s| dv ryt j | « }d|v xs |dv S )N> õ ï½ú+ú<ú>TÚZ> ÚPcÚPdÚPo)Úisspacer r7 )r r9 s r Ú is_separatorrP w sB à×ÑÔiÐ+AÑ AØä )× 2Ñ 2°9Ó =Ðà Ð$Ð $Ò PÐ(:Ð>PÐ(PÐPr' c óD | j « | j « k7 S ©N)ÚislowerÚisupper©r s r Úis_case_variablerV s à × Ñ Ó )×"3Ñ"3Ó"5Ñ 5Ð5r' c óT t j | « }d|v S # t $ r Y yw xY w)NFÚCJKr ©r Úcharacter_names r Úis_cjkr[ s8 ðÜ$×)Ñ)¨)Ó4ð NÐ "Ð"øô ò Ùðúr2 c óT t j | « }d|v S # t $ r Y yw xY w)NFÚHIRAGANAr rY s r Ú is_hiraganar^ ó8 ðÜ$×)Ñ)¨)Ó4ð Ð 'Ð'øô ò Ùðúr2 c óT t j | « }d|v S # t $ r Y yw xY w)NFÚKATAKANAr rY s r Ú is_katakanarb r_ r2 c óT t j | « }d|v S # t $ r Y yw xY w)NFÚHANGULr rY s r Ú is_hangulre ¤ ó8 ðÜ$×)Ñ)¨)Ó4ð ~Ð %Ð%øô ò Ùðúr2 c óT t j | « }d|v S # t $ r Y yw xY w)NFÚTHAIr rY s r Úis_thairi ® s8 ðÜ$×)Ñ)¨)Ó4ð ^Ð #Ð#øô ò Ùðúr2 c óT t j | « }d|v S # t $ r Y yw xY w)NFÚARABICr rY s r Ú is_arabicrl ¸ rf r2 c ó` t j | « }d|v xr d|v S # t $ r Y yw xY w)NFrk z ISOLATED FORMr rY s r Úis_arabic_isolated_formrn  sB ðÜ$×)Ñ)¨)Ó4ð ~Ð %Ò K¨/¸^Ð*KÐKøô ò Ùðús ! ¡ -¬-c ó | t vS rR )r rU s r Úis_cjk_uncommonrp Ì s à Ô 1Ð 1Ð1r' c ó4 t fdt D « « S )Nc 3 ó& K | ] }|v
|
y wrR © )Ú.0Úkeywordr, s r ú <genexpr>z-is_unicode_range_secondary.<locals>.<genexpr>Ó s øè ø ÒT¨w*Ô$ÑTùs )Úanyr )r, s `r Úis_unicode_range_secondaryrx Ñ s ø ä ÓTÔ4SÔTÓ TÐTr' c ój | j « du xr | j « du xr | dk7 xr | dk7 S )NFúu )rO Ú isprintablerU s r Úis_unprintabler| Ö sL ð ×ÑÓuÐ$ò "Ø × !Ñ !Ó # uÐ ,ò "à Ñ ò "ð Ñ !ð r' c ór t | t « st t | « }t t
|
| dt ||« j dd¬« « }t |« dk( ry|D ]T }|j « j dd« }t j « D ] \ }}||k( r|c c S ||k( s|c c S V y)zW
|
Extract using ASCII-only decoder any specified encoding in the first n-bytes.
|
NÚasciiÚignore©Úerrorsr ú-Ú_) Ú
|
isinstanceÚbytesÚ TypeErrorÚlenr r ÚminÚdecodeÚlowerÚreplacer r* )ÚsequenceÚ search_zoneÚseq_lenÚresultsÚspecified_encodingÚencoding_aliasÚ encoding_ianas r Úany_specified_encodingr á sÇ ô h¤Ô &Üäx=Gä Ü'ØÐ,3w Ó,Ð-×4Ñ4°WÀXÐ4ÓNóGô
|
7|qÒØà %ò
|
%ÐØ /× 5Ñ 5Ó 7× ?Ñ ?ÀÀSÓ IÐô
|
.5¯]©]«_ò %Ñ )NMØ Ð!3Ò3Ø$Ô$Ø Ð 2Ó2Ø$Ô$ñ %ð
|
%ð r' é c ón | dv xs0 t t j d| « j t « S )zQ
|
Verify is a specific encoding is a multi byte one based on it IANA name
|
> Úutf_7Úutf_8Úutf_16Úutf_32Ú utf_16_beÚ utf_16_leÚ utf_32_beÚ utf_32_leÚ utf_8_sigú
|
encodings.)Ú
|
issubclassÚ importlibÚ import_moduler r )r s r Úis_multi_byte_encodingr£ sC ð
|
ð
|
ð
|
ò ô
|
Ü× Ñ *¨T¨FÐ 3Ó4×GÑGÜ#ó
|
ð r' c ó t D ]> }t | }t |t « r|g}|D ] }| j |« s||fc c S @ y)z9
|
Identify and extract SIG/BOM in given sequence.
|
)Nr' )r r r
Ú
|
startswith)r Ú iana_encodingÚmarksÚmarks r Úidentify_sig_or_bomr© s[ ô
|
(ò + Ü%3°MÑ%Bä eUÔ #ØGEàò +DØ×"Ñ" 4Õ(Ø$ dÐ*Ô*ñ +ð +ð r' c ó
|
| dvS )N> r r rs )r¦ s r Úshould_strip_sig_or_bomr« ( s Ø Ð 4Ð 4Ð4r' c ó´ | j « j dd« } t j « D ] \ }}| ||fv s |c S |rt d| d« | S )zIReturns the Python normalized encoding name (Not the IANA official name).r r z Unable to retrieve IANA for 'ú')r r r r* r )Úcp_nameÚstrictr r s r Ú iana_namer° , sh àmmo×%Ñ% c¨3Ó/Gô
|
*1¯ © « ò !Ñ% Ø ~ }Ð5Ò 5Ø Ò ð!ñ ÜÐ8¸¸ ÀÐCÓDÐDà Nr' c ót t | « s t |« ryt j d| « j }t j d| « j } |d¬« } |d¬« }d}t d« D ]7 }t |g« }|j |« |j |« k( s3|dz }9 |dz S ) Ng r r r r éÿ r
|
éþ )r£ r¡ r¢ r Úranger
r ) Ú iana_name_aÚ iana_name_bÚ decoder_aÚ decoder_bÚid_aÚid_bÚcharacter_match_countÚiÚ to_be_decodeds r Ú cp_similarityr¾ = s¹ Ü kÔ*Ô.DÀ[Ô.QØä×'Ñ'¨*°[°MÐ(BÓC×VÑVIÜ×'Ñ'¨*°[°MÐ(BÓC×VÑVIá (°Ô 9DÙ (°Ô 9Dà!"Ðä 3Zò 'Ü $ a Sz Ø ;;}Ó %¨¯©°]Ó)CÓ CØ ! QÑ &Ñ !ð'ð
|
! 3Ñ &Ð&r' c ó, | t v xr |t | v S )z
|
Determine if two code page are at least 80% similar. IANA_SUPPORTED_SIMILAR dict was generated using
|
the function cp_similarity.
|
)r )rµ r¶ s r Ú is_cp_similarrÀ Q s% ð Ô-Ð-ò ?Ø Ô1°+Ñ>Ð >ðr' Úcharset_normalizerz)%(asctime)s | %(levelname)s | %(message)sc óâ t j | « }|j |« t j « }|j t j
|
|« « |j |« y rR )ÚloggingÚ getLoggerÚsetLevelÚ StreamHandlerÚ setFormatterÚ FormatterÚ
|
addHandler)r ÚlevelÚ format_stringÚloggerÚhandlers r Úset_logging_handlerrÎ \ sU ô
|
× Ñ tÓ $FØ
|
OOEÔä×#Ñ#Ó%GØ ×Ñ×*Ñ*¨=Ó9Ô:Ø
|
×ÑgÕ r' c # ó K |r |du r|D ] } || | |z }
|
|
|
s y |
|
y |D ]¤ } | |z } | t | « dz kD r| | | |z } |r |du r|| z } | j ||rdnd¬« }
|
|r[| dkD rVt |d« } |rH|
|
d | |vrAt | | dz
|
d « D ]. }| || } |r |du r|| z } | j |d¬« }
|
|
|
d | |v s. n |
|
¦ y w)
|
NFé r r¯ r r r é éÿÿÿÿ)r r r r´ )Ú sequencesr ÚoffsetsÚ
|
chunk_sizeÚbom_or_sig_availableÚstrip_sig_or_bomÚ sig_payloadÚis_multi_byte_decoderÚdecoded_payloadr¼ ÚchunkÚ chunk_endÚ cut_sequenceÚchunk_partial_size_chkÚjs r Úcut_sequence_chunksrà i sK è ø ñ Ð0°EÑ9Øò AØ# A¨¨J©Ð7EÙÙØKñ ð ò # AØJIØ3y>¨AÑ-Ò-Øà$ Q¨¨Z© Ð8Lá#Ð(8¸EÑ(AØ *¨\Ñ 9 à ×'Ñ'Ø Ù#8x¸hð (ó Eñ %¨¨QªÜ.1°*¸bÓ.AÐ&ñ $Ø Ð 5Ð 5Ð6¸oÑMä " 1 a¨!¡e¨RÓ 0ò "Ø'0°°9Ð'= á/Ð4DÈÑ4MØ+6¸ Ñ+ELà ,× 3Ñ 3°MÈ(Ð 3Ó Sà Ð!8Ð"8Ð9¸_ÒLÙ !ð "ð KñG# ùs B>C Ã
|
C )r ÚstrÚreturnÚbool)r rá râ rá )r rá râ ú
|
str | None)r, rá râ rã )i )r r
r r# râ rä )r rá râ rã )r r
râ ztuple[str | None, bytes])r¦ rá râ rã )T)r® rá r¯ rã râ rá )rµ rá r¶ rá râ Úfloat)rµ rá r¶ rá râ rã )r rá rÊ r# rË rá râ ÚNonerR )rÓ r
r rá rÔ r´ rÕ r# rÖ rã r× rã rØ r
rÙ rã rÚ rä râ zGenerator[str, None, None])7Ú
|
__future__r r¡ rà r Úcodecsr Úencodings.aliasesr Ú functoolsr Úrer Útypingr Ú_multibytecodecr Úconstantr r r r r r r r r& r. r1 r; rA rE rP rV r[ r^ rb re ri rl rn rp r rx r| r r£ r© r« r° r¾ rÀ ÚINFOrÎ rà rs r' r ú<module>rð s ðÝ "ã Û Û Ý %Ý %Ý Ý Ý õ÷÷ ñ ñ Ð*Ô+òó ,ðñ" Ð*Ô+ò"ó ,ð"ñ Ð*Ô+ò
|
ó ,ð
|
ñ Ð*Ô+ò"ó ,ð"ñ Ð*Ô+ò ,ó ,ð ,ñ Ð*Ô+ò Eó ,ð Eñ Ð*Ô+òNó ,ðNñ Ð*Ô+òQó ,ðQñ Ð*Ô+ò6ó ,ð6ñ Ð*Ô+ò#ó ,ð#ñ Ð*Ô+ò(ó ,ð(ñ Ð*Ô+ò(ó ,ð(ñ Ð*Ô+ò&ó ,ð&ñ Ð*Ô+ò$ó ,ð$ñ Ð*Ô+ò&ó ,ð&ñ Ð*Ô+òLó ,ðLñ Ð*Ô+ò2ó ,ð2ñ 3Ð.Ó/Ô0òUó 1ðUñ Ð*Ô+òó ,ðô ñ@ 3Ôòó ðó(ó$5ôó"'ó(ð %Ø ØDð
|
Ø
|
ð
|
à ð
|
ð ð
|
ð
|
ó
|
ð, #'ð5Øð5àð5ð ð5ð ð 5ð
|
ð 5ð ð 5ð ð5ð ð5ð ð5ð ô5r'
|
