You signed in with another tab or window. Reload to refresh your session.You signed out in another tab or window. Reload to refresh your session.You switched accounts on another tab or window. Reload to refresh your session.Dismiss alert
진행사항을 작성하는 것은 고민해야 할 부분이 좀 있어서 아직 넣지 않았습니다.
예를 들어 대량 분석이 필요하다면, 상황에 따라 2~3 단계의 프로세스가 필요한데요.
데이터 불러오기, 분석하기, 저장하기 가 그것입니다.
대량을 메모리 한계까지의 대량으로 볼 것인지, 메모리 한계를 벗어나는 대량으로 볼것인지에 따라 저장하기를 넣거나 뺄 수 있을 것 같습니다.
아직 패키지에서 모든 것을 대응할지를 결정하지 못한 상황입니다.
참고로 모 패키지인 kiwi의 파이썬 버전에서는 불러오기와 저장하기를 대응하지는 않고 있습니다.
하지만 효율적인 인터페이스로서 이터레이터를 사용해서 병렬화 가능하도록 설계되어 있습니다.
R에는 아시다시피 네이티브 이터레이터가 없는 상태구요. 패키지가 있긴 합니다만, 제가 아직 공부해야 하는 상황입니다.
정리해보면, 아직 본 패키지의 병렬구조에 대해 확정하지 못한 상황이고, 이에 따라 진행바의 설계도 함께 작성될 것 같습니다.
안녕하세요? 훌륭한 패키지 만들어주셔서 감사합니다.
tokenize_tidy()를 실행했을 때 종료 시점을 예상할 수 있도록 progress bar가 출력되면 좋겠다는 생각이 들어 의견 남깁니다.
progress 패키지를 활용하면 가능하지 않을까요?
https://github.com/r-lib/progress
감사합니다!
The text was updated successfully, but these errors were encountered: