Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

KeyError: Caught KeyError in DataLoader worker process 1. #15

Closed
tonhathuy opened this issue Oct 9, 2020 · 4 comments
Closed

KeyError: Caught KeyError in DataLoader worker process 1. #15

tonhathuy opened this issue Oct 9, 2020 · 4 comments

Comments

@tonhathuy
Copy link

Chào anh, em train lại model của anh trên dataset SROIE, em đã config lại dataset cho giống dataset của anh mà khi train nó bị lỗi này em fix hoài không được ,
image
Code và dataset của em trên colab
em cảm ơn

@pbcquoc
Copy link
Owner

pbcquoc commented Oct 9, 2020

Hi e,
hiện tại a dự đoán các kí tự nằm trong vocab: 'aAàÀảẢãÃáÁạẠăĂằẰẳẲẵẴắẮặẶâÂầẦẩẨẫẪấẤậẬbBcCdDđĐeEèÈẻẺẽẼéÉẹẸêÊềỀểỂễỄếẾệỆfFgGhHiIìÌỉỈĩĨíÍịỊjJkKlLmMnNoOòÒỏỎõÕóÓọỌôÔồỒổỔỗỖốỐộỘơƠờỜởỞỡỠớỚợỢpPqQrRsStTuUùÙủỦũŨúÚụỤưƯừỪửỬữỮứỨựỰvVwWxXyYỳỲỷỶỹỸýÝỵỴzZ0123456789!"#$%&''()*+,-./:;<=>?@[]^_`{|}~ '

Do đó, e cần bổ sung kí tự kia vào tập vocab bằng cách thay đổi biến config['vocab']
image

@tonhathuy
Copy link
Author

dạ lúc đầu nó văn ra lỗi này, KeyError: '·' , em thử thêm '·' vào vocab thì nó chuyển qua KeyError: " ' " như trên
Nhưng giờ em reset chạy lại colab thì có thêm '·' cũng ko fix dc lỗi KeyError: '·'
config['vocab'] = 'aAàÀảẢãÃáÁạẠăĂằẰẳẲẵẴắẮặẶâÂầẦẩẨẫẪấẤậẬbBcCdDđĐeEèÈẻẺẽẼéÉẹẸêÊềỀểỂễỄếẾệỆfFgGhHiIìÌỉỈĩĨíÍịỊjJkKlLmMnNoOòÒỏỎõÕóÓọỌôÔồỒổỔỗỖốỐộỘơƠờỜởỞỡỠớỚợỢpPqQrRsStTuUùÙủỦũŨúÚụỤưƯừỪửỬữỮứỨựỰvVwWxXyYỳỲỷỶỹỸýÝỵỴzZ0123456789!"#$%&''()*+,-./:;<=>?@[]^_`{|}~· '

@pbcquoc
Copy link
Owner

pbcquoc commented Oct 9, 2020

em thống kê các kí tự trong dataset kia và thay toàn bộ vào config['vocab'] nhé

@tonhathuy
Copy link
Author

Em mới fix được rồi anh, e search '·' trong dataset rồi xóa nó đi :))
do ký tự này chỉ có 1 chổ trong dataset nên ko ảnh hưởng
em cảm ơn anh

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
None yet
Projects
None yet
Development

No branches or pull requests

2 participants