Erro ao usar a lib

[PauloKoglin]

Olá,

Importei a lib para fazer um teste básico do seu funcionamento, porém estou obtendo um erro ao importar a lib. Alguma ideia?

Versão do node: v10.16.0

Meu código:

index.js

const CeiCrawler = require("cei-crawler");

console.log("hallo world");

O erro:

C:\Git\Github\vs-code-ws\cei-test\node_modules\cei-crawler\src\lib\CeiCrawler.js:13
    _isLogged = false;
              ^

SyntaxError: Unexpected token =
    at Module._compile (internal/modules/cjs/loader.js:721:23)
    at Object.Module._extensions..js (internal/modules/cjs/loader.js:787:10)
    at Module.load (internal/modules/cjs/loader.js:653:32)
    at tryModuleLoad (internal/modules/cjs/loader.js:593:12)
    at Function.Module._load (internal/modules/cjs/loader.js:585:3)
    at Module.require (internal/modules/cjs/loader.js:690:17)
    at require (internal/modules/cjs/helpers.js:25:18)
    at Object.<anonymous> (C:\Git\Github\vs-code-ws\cei-test\node_modules\cei-crawler\src\app.js:1:20)
    at Module._compile (internal/modules/cjs/loader.js:776:30)
    at Object.Module._extensions..js (internal/modules/cjs/loader.js:787:10)

[felipesdias]

Você esta usando algum transpiler ?

[Menighin]

Olá @PauloKoglin ,
A lib usa private class fields que é uma feature do Node 12+.
Da uma olhada nessa issue: #1

Lembrando que a versão 14 é a LTS corrente.
Abs,

[PauloKoglin]

Legal esse app, é de sua autoria?

Pois então, também já entramos em contato com a B3, na ocasião para saber se havia uma API para obter as cotação, mas eles somente nos encaminharam para os "vendors", ou seja, teria de pôr a mão no bolso. Apenas comentaram que estavam desenvolvendo APIs, mas não especificaram quais e para quando. Tempo depois descobri esse link que você comentou ai, mas outra vez não diz muito a respeito de prazos e como será a comercialização.

Me pergunto como apps como Kinvo, TradeMap, etc obtém essas informações. Não acredito que seja através de webscrapping, porque há planos pagos nessas plataformas e seria muito arriscado depender somente da boa vontade da B3 não alterar o CEI.

[felipesdias]

Eu não duvidaria destes grandes apps fazerem scrapping não, ao menos para os serviços gratuitos. Lembro que na época em que colocaram o CAPTCHA alguns deles ficaram sem funcionar a importação por um tempo

[PauloKoglin]

@felipesdias, não sabia tiveram problamas com o CAPTCHA, interessante. Isso realmente diz muita coisa. Acho pouco provável que eles tenham uma forma de importar os dados para o "free" e outra para os "pagos". Neste caso realmente pode ser que se arrisquem depender da estabilidade do scrapper.

Até imagino que o fato que o @Menighin comentou, que eles disponibilizaram um link sem CAPTCHA pode ter sido pressão desses "grandes" que devem ter networking lá dentro, vide Kinvo por exemplo, que tem um pezinho do Tiago Nigro lá dentro, que por sua vez tem a XP.

[felipesdias]

@PauloKoglin realmente, deve ter rolado uma pressão mesmo hahah.

Outra coisa que observei, pode ter sido coincidência, mas depois que fizemos as melhorias no crawler para não usar mais o pupperter vi que o serviço de integração de alguns apps melhoraram também hahah

[PauloKoglin]

@felipesdias não duvido que eles usem essa lib também. 😄
Bom, então torçamos que a B3 não faça nenhum movimento brusco, se fizer, que ao menos entregue as tão esperadas APIs antes.