Update
Muft Shiksha™ एक 100% Free Education Portal है 🇮🇳, जिसका उद्देश्य Class 9–12 के हर विद्यार्थी तक High-Quality Education को पूरी तरह मुफ्त पहुँचाना है। 🇮🇳 हम मानते हैं कि अच्छी शिक्षा किसी student की आर्थिक स्थिति पर निर्भर नहीं होनी चाहिए। 🇮🇳 हर विद्यार्थी को वही Quality Study Material, MCQs, Quizzes, Exam Preparation, Concept-Based Learning और Bilingual Support मिलना चाहिए, जो आमतौर पर महंगी Coaching या Premium Platforms में मिलता है। Muft Shiksha™ 🇮🇳 इसी सोच के साथ बनाया गया है • Muft Shiksha™ एक 100% Free Education Portal है 🇮🇳, जिसका उद्देश्य Class 9–12 के हर विद्यार्थी तक High-Quality Education को पूरी तरह मुफ्त पहुँचाना है। 🇮🇳 हम मानते हैं कि अच्छी शिक्षा किसी student की आर्थिक स्थिति पर निर्भर नहीं होनी चाहिए। 🇮🇳 हर विद्यार्थी को वही Quality Study Material, MCQs, Quizzes, Exam Preparation, Concept-Based Learning और Bilingual Support मिलना चाहिए, जो आमतौर पर महंगी Coaching या Premium Platforms में मिलता है। Muft Shiksha™ 🇮🇳 इसी सोच के साथ बनाया गया है • Muft Shiksha™ एक 100% Free Education Portal है 🇮🇳, जिसका उद्देश्य Class 9–12 के हर विद्यार्थी तक High-Quality Education को पूरी तरह मुफ्त पहुँचाना है। 🇮🇳 हम मानते हैं कि अच्छी शिक्षा किसी student की आर्थिक स्थिति पर निर्भर नहीं होनी चाहिए। 🇮🇳 हर विद्यार्थी को वही Quality Study Material, MCQs, Quizzes, Exam Preparation, Concept-Based Learning और Bilingual Support मिलना चाहिए, जो आमतौर पर महंगी Coaching या Premium Platforms में मिलता है। Muft Shiksha™ 🇮🇳 इसी सोच के साथ बनाया गया है
Subjects
Concept-wise Practice

tokenization MCQ Questions for Class 12

tokenization se related questions ko ek jagah revise karein. Har question me bilingual content, answer feedback aur explanation available hai.

Practice Questions

2 questions tagged with tokenization.

प्राकृतिक भाषा संसाधन में शब्द विभाजन क्यों किया जाता है?

Why is tokenization done in natural language processing?

Explanation opens after your attempt
Correct Answer

A. पाठ को छोटे भागों में विश्लेषण के लिए बांटने हेतुTo divide text into smaller parts for analysis

Step 1

Concept

भाषा में वाक्य और शब्द होते हैं। / Language contains sentences and words.

Step 2

Why this answer is correct

शब्द विभाजन पाठ को छोटे भागों में बांटता है। / Tokenization divides text into smaller parts.

Step 3

Exam Tip

इससे आगे का पाठ विश्लेषण आसान होता है। / This makes further text analysis easier.

Open Question Page
Ask Friends

शब्द विभाजन का सरल अर्थ क्या है?

What is the simple meaning of tokenization?

Explanation opens after your attempt
Correct Answer

A. वाक्य को छोटे शब्दों या भागों में तोड़नाBreaking a sentence into smaller words or parts

Step 1

Concept

भाषा प्रसंस्करण में पाठ को छोटे भागों में बांटा जाता है। / In language processing text is divided into smaller parts.

Step 2

Why this answer is correct

इससे शब्दों का विश्लेषण आसान होता है। / This makes word analysis easier.

Step 3

Exam Tip

यह कई भाषा कार्यों का प्रारंभिक चरण है। / It is an early step in many language tasks.

Open Question Page
Ask Friends