4. Stemming and lemmatizationLemmat

4. Stemming and lemmatization

Lemmatisation (or lemmatization) in linguistics is the process of grouping together the different inflected forms of a word so they can be analyzed as a single item. In computational linguistics, lemmatisation is the algorithmic process of determining the lemma for a given word. Since the process may involve complex tasks such as understanding context and determining the part of speech of a word in a sentence

(requiring, for example, knowledge of the grammar of a language) it can be a hard task to implement a lemmatiser for a new language. In many languages, words appear in several inflected forms. For example, in English, the verb 'to walk' may appear as 'walk', 'walked', 'walks', 'walking'. The base form, 'walk', that one might look up in a dictionary, is called the lemma for the word. The combination of the base form with the part of speech is often called the lexeme of the word. Lemmatisation is closely related to stemming. The difference is that a stemmer operates on a single word without knowledge of the context, and therefore cannot discriminate

ผลลัพธ์ (ไทย) 1:

4. ประเทศ และ lemmatizationLemmatisation (หรือ lemmatization) ในภาษาศาสตร์เป็นกระบวนการจัดกลุ่มเข้าด้วยกันแบบ inflected แตกต่างกันของคำเพื่อให้สามารถวิเคราะห์รายการเดียว ในภาษาศาสตร์เชิงคำนวณ lemmatisation คือ กระบวนการ algorithmic กำหนดจับมือคำกำหนด ตั้งแต่กระบวนการอาจเกี่ยวข้องกับงานที่ซับซ้อนเช่นความเข้าใจบริบทและการกำหนดส่วนของประโยคคำในประโยค(ต้องการ เช่น ความรู้ด้านไวยากรณ์ของภาษา) ก็ได้เป็นงานที่ยากจะใช้ lemmatiser สำหรับภาษาใหม่ ในหลายภาษา คำที่ปรากฏในแบบฟอร์ม inflected หลาย ตัวอย่าง ภาษาอังกฤษ คำกริยา 'ควง ' อาจปรากฏเป็น 'เดิน' 'เดิน' 'เดิน' 'เดิน' แบบฟอร์มพื้นฐาน 'เดิน' ที่หนึ่งอาจหาได้ในพจนานุกรม จะเรียกว่าการจับมือการสำหรับคำ ชุดแบบฟอร์มพื้นฐานกับส่วนหนึ่งของประโยคมักจะเรียก lexeme ของคำ Lemmatisation สัมพันธ์กับประเทศ ความแตกต่างคือ stemmer ตัวในคำเดียวโดยไม่มีความรู้ในบริบท และดังนั้น ไม่ถือเขาถือเรา

ผลลัพธ์ (ไทย) 2:

4. กั้นและ lemmatization Lemmatisation (หรือ lemmatization) ภาษาศาสตร์เป็นกระบวนการของการจัดกลุ่มกันในรูปแบบที่แตกต่างกันผันของคำเพื่อให้พวกเขาสามารถวิเคราะห์ได้เป็นรายการเดียว ในภาษาศาสตร์ lemmatisation เป็นกระบวนการขั้นตอนของการกำหนดแทรกสำหรับคำที่กำหนด ตั้งแต่กระบวนการอาจจะเกี่ยวข้องกับงานที่ซับซ้อนเช่นการทำความเข้าใจบริบทและการกำหนดในส่วนของคำพูดของคำในประโยค(ต้องเช่นความรู้เกี่ยวกับไวยากรณ์ของภาษา) มันจะเป็นงานที่ยากที่จะดำเนินการ lemmatiser สำหรับใหม่ ภาษา ในหลายภาษาคำพูดที่ปรากฏในรูปแบบผันหลาย ยกตัวอย่างเช่นในภาษาอังกฤษคำกริยา 'การเดิน' อาจปรากฏเป็นเดิน ',' เดิน ',' เดิน ',' เดิน ' รูปแบบฐานเดิน 'ที่หนึ่งอาจจะดูในพจนานุกรมที่เรียกว่าแทรกคำว่า การรวมกันของรูปแบบฐานที่มีส่วนในการพูดมักจะเรียกว่า lexeme ของคำว่า Lemmatisation เป็นอย่างใกล้ชิดที่เกี่ยวข้องกับการเกิด ความแตกต่างคือว่า Stemmer ทำงานในคำเดียวไม่มีความรู้ในบริบทและดังนั้นจึงไม่สามารถเห็นความแตกต่าง

ผลลัพธ์ (ไทย) 3:

4 . กั้น และ lemmatization

lemmatisation ( หรือ lemmatization ) ในภาษาศาสตร์คือขั้นตอนของการจัดกลุ่มเข้าด้วยกันในรูปแบบที่แตกต่างกัน inflected ของคำเพื่อให้พวกเขาสามารถวิเคราะห์ได้ เช่น รายการเดียว ในภาษาศาสตร์ lemmatisation , คือ กระบวนการขั้นตอนของการกำหนดรูปแบบให้คำเนื่องจากกระบวนการอาจเกี่ยวข้องกับงานที่ซับซ้อนเช่นความเข้าใจบริบท และกำหนดส่วนของคำพูดของคำในประโยค

( ที่ต้องการ เช่น ความรู้เกี่ยวกับไวยากรณ์ของภาษา ) มันสามารถจะเป็นงานที่ยากที่จะใช้ lemmatiser สำหรับภาษาใหม่ หลายภาษา , ถ้อยคำที่ปรากฏใน inflected หลายรูปแบบ ตัวอย่างเช่นในภาษาอังกฤษคำกริยา ' เดิน ' อาจปรากฏเป็น ' เดิน '' เดิน ' ' เดิน ' ' เดิน ' รูปแบบฐาน ' เดิน ' ที่คนอาจจะค้นหาในพจนานุกรมเรียกว่าแทรกสำหรับคำ การรวมกันของฐานรูปแบบด้วยส่วนหนึ่งของการพูด คือ มักจะเรียกว่า lexeme ของ Word lemmatisation เกี่ยวข้องอย่างใกล้ชิดเพื่อกั้น . ความแตกต่างคือที่โหลดการคําเดียวโดยปราศจากความรู้ของบริบทและดังนั้นจึงไม่สามารถแบ่งแยก