+
jej
R t ^ RIt^ RIt^ RIHt ^ RIHt ]P ! ]4 t Rt
]
R, t Rt Rt
RtR t]P ! R
]P" ]P$ , 4 t]P ! R ]P" ]P$ , 4 t]P ! R 4 t ! R
R]4 tR R ltR R ltR R ltRR R lltR R lt R R R llt R# ) u SICAE — Sistema de Informação da Classificação Portuguesa de Actividades Económicas.
Fonte oficial do CAE Rev.4, gratuita e sem quota. Substitui o ptdata, que
morreu (503) e era de onde vinha o CAE.
Portado de `funcoes/empresa_nif_api.php` do Sabichão, que faz esta agregação em
produção há meses. Preservam-se duas decisões de lá que não são óbvias:
* **O NIF aparece duas vezes na resposta** — na linha de resultado e no ``
da pesquisa, porque o WebForms reescreve o valor submetido. Só contam as
ocorrências dentro de `
`, senão qualquer pesquisa "encontra" o NIF.
* **Não encontrar não é erro.** É o caso normal para NIFs de pessoa singular ou
entidades sem CAE registado. O sinal de "o site mudou" é dado noutro sítio —
quando o formulário deixa de ter o `__VIEWSTATE` ou o campo do NIPC. Se o
alarme fosse no parse, cada "não encontrado" seria um falso alarme e afogava
o sinal verdadeiro.
N)Any) build_clientzhttp://www.sicae.pt/z
Consulta.aspxzctl00$MainContent$ipNipczctl00$MainContent$ipFirmazctl00$MainContent$ipCaez ctl00$MainContent$btnPesquisaz]*>(.*?)z]*>(.*?)
z<[^>]+>c ] tR t^'tRtRtR# )SicaeFormChangedu@ O formulário do SICAE mudou; o scraping precisa de ser revisto. N)__name__
__module__ __qualname____firstlineno____doc____static_attributes__r app/scrapers/sicae.pyr r ' s Jr
r c R V ^8 d QhR\ R\ \ \ 3, /# htmlreturn)strdict)formats "r __annotate__r + s" # $sCx. r
c , / p\ P ! R V \ P 4 Fg p\ P ! RV4 p\ P ! RV4 pV' g K; V' d VP ^4 MRWP ^4 & Ki V# )z ]*type=\"hidden\"[^>]*>zname="([^"]+)"zvalue="([^"]*)" )refindallIsearchgroup)r outtagnamevalues & r _hiddenr# + sn Czz=tRTTJyy*C0 ,c2 438Q bC
1
K
Jr
c F V ^8 d QhR\ R\ \ , /# )r row_htmlr )r list)r s "r r r 5 s S T#Y r
c
^ RI p. p\ P V 4 F] p\ P RV4 pVP \ P ! RRVP V4 4 P 4 4 K_ V# ) N z\s+) r _CELL_REr _TAG_REsubappendr unescapestrip)r% _htmlr celltexts & r _cellsr3 5 sa
C *{{3%
266&#u~~d';<BBDE + Jr
c h V ^8 d QhR\ R\ \ \ \ 3, , /# r r r& r r )r s "r r r ? s' c d4S> 2 r
c
` . p\ P V 4 EF p\ V4 p\ V4 ^8 d K! \ P
! RRV^ , 4 p\ V4 ^ 8w d KR V^, ;' g Rp\ P
! RRV^, 4 ;' g Rp\ V4 ^8 d. V^, ' d \ P ! RV^, 4 M. pV' g V' g K TP
RTRTRTR R
P V4 ;' g R/4 EK V# ) zCLinhas de resultado -> [{nipc, denominacao, cae, cae_secundarios}].\D+r Nz[^0-9]z\d{4,5}nipc denominacaocaecae_secundariosz, )_ROW_REr r3 lenr r, r- join)r r rowvalsr8 denomr: secss & r _parse_rowsrC ? s "Ct$c{ t9q= vvfb$q'* t9> Q4ffYDG,4425d)a-DGGrzz*d1g.QSS
us!499T?#:#:d
%( Jr
c t V ^8 d QhR\ R\ R\ \ \ \ 3, , /# )r r8 firmar r5 )r s "r r r Y s. # # # #d4S>6J #r
c " \ R R7 ;_uu_4 GRj xL
pVP \ 4 G Rj xL
pVP 4 \ VP
4 pRV9 g \ VP
9 d! \ P R4 \ R4 h/ VCRRRR\ V \ V\ R\ R /CpVP \ VR
\ R R /R
7 G Rj xL
pVP 4 \ VP
4 uuRRR4 GRj xL
# EL L L@ L + GRj xL
' g i R# ; i5i)g 4@)timeoutN __VIEWSTATEu@ SICAE: o formulário de Consulta.aspx mudou — scraping a reveru formulário do SICAE alterado
__EVENTTARGETr __EVENTARGUMENT PesquisarRefererz Content-Typez!application/x-www-form-urlencoded)dataheaders)r getCONSULTAraise_for_statusr# r2 F_NIPCloggererrorr F_FIRMAF_CAEF_BTNpostrC )r8 rE clientpagehiddenrM rs && r _searchr] Y s D)))VZZ)) # && *A LL[ \"#BC C
R r D U 2 ;
++ .:]^
166"5 *)))&
) *)))sm ED ED(D"B*D(#D$$(D(
ED&E"D($D(&E(E .D1/
E :E < Ec ` V ^8 d QhR\ R\ \ \ 3, R, /# )r nifr N)r r r )r s "r r r w s'
=
=c
=d38nt&;
=r
c D a " \ P ! RRS ;' g R4 o \ S 4 ^ 8w d R# \ S R7 G Rj xL
p\ T 3R lT 4 R4 # L \ d h \
d# p\ P RS T4 Rp?R# Rp?ii ; i5i)uu Denominação social + CAE principal e secundários. None quando não há
registo — o que é normal, não é falha.r7 r N)r8 zSICAE lookup %s falhou: %sc 3 F <" T F qR , S8X g K Vx K R# 5i)r8 Nr ).0r\ r_ s & r !lookup_by_nipc.. s 5DqfI$4Ds !
!) r r, r= r] r ExceptionrS infonext)r_ rowses f r lookup_by_nipcrj w s
&&SYYB
'C
3x1} #&& 5D5t <<
'
0#q9sF 5B A% A# A%
B #A% %B :B ;BB B B c t V ^8 d QhR\ R\ R\ \ \ \ 3, , /# )r r! limitr )r intr& r r )r s "r r r s.
s
3
T#s(^8L
r
c " T ;' g RP 4 p \ V 4 ^8 d . # \ V R7 G Rj xL
pTRT # L \ d h \ d# p\
P
RY4 . u Rp?# Rp?ii ; i5i)uf Pesquisa inversa nome -> NIPC. Útil quando uma publicação ou um anúncio
traz uma entidade sem NIF.r )rE Nz%SICAE pesquisa por nome %r falhou: %s)r/ r= r] r re rS rf )r! rl rh ri s && r search_by_namero s~
JJB D
4y1} 4(( <
)
;TE sK -BA A A B A B B!A>8B9B>BB)r r )
) r loggingr typingr app.scrapers.baser getLoggerr rS BASErP rR rU rV rW compiler Sr< r* r+ RuntimeErrorr r# r3 rC r] rj ro r r
r ry s " * 8 $ / ! #
%!'
**+RTTBDD[
9
::,bddRTTk :
**Z
K| K4#<
=
r