Table 2.
Data pre-processing methods, step by step.
| Processing | Text |
|---|---|
| Original | আমরা কাজ করবো কিভাবে! Document তৈরী করতে আমাদের সবাইকে কি করতে হবে ? ৫-৬ জন আমরা,কঠিন হবে | ( How we work! What do we all have to do to create the document? 5-6 of us, it will be difficult ) |
| Removing Punctuation | আমরা কাজ করবো কিভাবে Document তৈরী করতে আমাদের সবাইকে কি করতে হবে ৫ ৬ জন আমরা কঠিন হবে ( We will work on how to create a document We five six person will be difficult ) |
| Removing Digits | আমরা কাজ করবো কিভাবে Document তৈরী করতে আমাদের সবাইকে কি করতে হবে জন আমরা কঠিন হবে ( We will work out how to create a document what we all have to do John we will be difficult ) |
| Removing Non-Bangla Character | আমরা কাজ করবো কিভাবে তৈরী করতে আমাদের সবাইকে কি করতে হবে জন আমরা কঠিন হবে ( We will work hard to create what we all need to do ) |
| Removing Emoticons | আমরা কাজ করবো কিভাবে তৈরী করতে আমাদের সবাইকে কি করতে হবে জন আমরা কঠিন হবে ( We will work hard to create what we all need to do ) |
| Removing Stopwords | কাজ করবো কিভাবে তৈরী জন আমরা কঠিন হবে ( How will we work We will be difficult ) |
৫-৬ জন আমরা,কঠিন হবে | ( How we work! What do we all have to do to create the document? 5-6 of us, it will be difficult )