ฉันกำลังพยายามทำความเข้าใจการจำแนกประเภทของโทเค็นในการเขียนโปรแกรมหรือการประมวลผลภาษา
โดยเฉพาะอย่างยิ่ง ฉันต้องการทราบว่า 'ชื่อ' อยู่ในหมวดหมู่หรือประเภทใดเมื่อเราพูดถึงโทเค็น
7 คำตอบ
JejuSunshineSoulMate
Thu Nov 21 2024
โทเค็นชื่อแสดงถึงองค์ประกอบพื้นฐานของชื่อที่แบ่งแยกไม่ได้
CherryBlossomBloom
Thu Nov 21 2024
โทเค็นเหล่านี้ถูกกำหนดโดย "ช่องว่าง" หรือเครื่องหมายวรรคตอนที่แยกสตริงอักขระ
Daniele
Thu Nov 21 2024
โดยทั่วไปแล้ว โทเค็นชื่อจะประกอบด้วยส่วนต่อท้ายหรือส่วนก้าน
HanjiArtist
Thu Nov 21 2024
คำนำหน้า ได้แก่ คำนำหน้าและคำต่อท้ายที่ปรับเปลี่ยนความหมายของก้านคำ
CrystalPulse
Wed Nov 20 2024
ลำต้นเป็นองค์ประกอบพื้นฐานของชื่อที่มีความหมายหลัก