Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

progress bar 기능이 있으면 좋겠습니다. #59

Open
youngwoos opened this issue Jun 1, 2022 · 1 comment
Open

progress bar 기능이 있으면 좋겠습니다. #59

youngwoos opened this issue Jun 1, 2022 · 1 comment

Comments

@youngwoos
Copy link

youngwoos commented Jun 1, 2022

안녕하세요? 훌륭한 패키지 만들어주셔서 감사합니다.

tokenize_tidy()를 실행했을 때 종료 시점을 예상할 수 있도록 progress bar가 출력되면 좋겠다는 생각이 들어 의견 남깁니다.
progress 패키지를 활용하면 가능하지 않을까요?
https://github.com/r-lib/progress

감사합니다!

@mrchypark
Copy link
Owner

@youngwoos 안녕하세요 의견 감사드립니다.

진행사항을 작성하는 것은 고민해야 할 부분이 좀 있어서 아직 넣지 않았습니다.
예를 들어 대량 분석이 필요하다면, 상황에 따라 2~3 단계의 프로세스가 필요한데요.
데이터 불러오기, 분석하기, 저장하기 가 그것입니다.
대량을 메모리 한계까지의 대량으로 볼 것인지, 메모리 한계를 벗어나는 대량으로 볼것인지에 따라 저장하기를 넣거나 뺄 수 있을 것 같습니다.

아직 패키지에서 모든 것을 대응할지를 결정하지 못한 상황입니다.
참고로 모 패키지인 kiwi의 파이썬 버전에서는 불러오기와 저장하기를 대응하지는 않고 있습니다.
하지만 효율적인 인터페이스로서 이터레이터를 사용해서 병렬화 가능하도록 설계되어 있습니다.

R에는 아시다시피 네이티브 이터레이터가 없는 상태구요. 패키지가 있긴 합니다만, 제가 아직 공부해야 하는 상황입니다.

정리해보면, 아직 본 패키지의 병렬구조에 대해 확정하지 못한 상황이고, 이에 따라 진행바의 설계도 함께 작성될 것 같습니다.

의견 주셔서 정말 감사드리고, 많이 사용해주세요.

또 사용하시는데 의견있으시면 언제든지 제안주세요. 감사합니다.

@mrchypark mrchypark pinned this issue Jun 18, 2022
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

2 participants