Confirmation that spaces are really spaces
#28
Let me try to parse the Thai text into words. I put the names (Sanskrit) into brackets, and definitive word breaks as two vertical bars. I put one vertical bar when it is a composite where each part could also be a word.

Example: the English word 'mainstream'  would be parsed as || main | stream || 

|| ถึง || แม้ || ว่า || หนัง | สือ || [ภควัตคีตาฺ] จะ || ได้ || รับ || ความ | นิยม || จาก || 
การ | พิมพ์ || และ || การ | อ่าน || อย่าง || แพร่ | หลาย || เดิม || ที || เป็น || ตอน || 
หนึ่ง || ของ || [มหาภารตะฺ] ซึ่ง || เป็น || วรรณ | กรรม || ประวัติ | ศาสตร์ || ภาษา || 
สันสกฤต || ของ || โลก || ใน || อดีต || [มหาภารตะฺ]

Compare with:

ถึงแม้ว่า | หน | ัง | ส | ือ | ภควัตคีตาฺ | จะ | ได้รับความ | นิ | ยม | จากการ | พิ | ม | พ | ์ | และการ | อ | ่าน | อย่าง | แ | พร | ่ | หลาย | เดิม | ที | เป็น | ตอน | หนึ่ง | ของ | มหา | ภ | าร | ต | ะฺ | ซึ่งเป็น | วรรณกรรม | ประ | วัต | ิ | ศาสตร์ | ภา | ษ | าส | ัน | ส | ก | ฤ | ต | ของ | โลก | ในอ | ดีต | มหา | ภ | าร | ต | ะฺ | กล่าว | ถึง | สถาน | การณ์ | ซึ่ง | น | ํ | า | เร | าม | าส | ู่

For Stolfi: Thai has quite a number of non-separable multi-syllable words. This text has five, not counting สันสกฤต which is a loan word and says 'Sanskrit'.

(Not sure what is happening with the fonts here).
[+] 1 user says Thank You to ReneZ for this post
Reply


Messages In This Thread
RE: Confirmation that spaces are really spaces - by ReneZ - 17-11-2025, 05:33 AM

Possibly Related Threads…
Thread Author Replies Views Last Post
  [split] Measure uncertain spaces? Koen G 8 1,647 24-08-2026, 08:09 AM
Last Post: Pointless..
  Uncertain spaces as evidence of verbose glyph pairs kckluge 0 1,587 01-01-2026, 05:24 AM
Last Post: kckluge
  n-grams while ignoring spaces? Koen G 10 9,804 17-03-2025, 05:32 PM
Last Post: zachary.kaelan
  Using Massimiliano Zattera's slot sequence or a different one to find missing spaces? nablator 8 8,495 15-05-2024, 12:14 AM
Last Post: ReneZ
  Ambiguous Spaces Emma May Smith 28 21,335 19-03-2024, 09:49 AM
Last Post: MarcoP
  Bigrams across uncertain spaces RobGea 26 21,535 24-05-2022, 07:02 AM
Last Post: MarcoP
  Spaces and Entropy Koen G 32 31,683 22-05-2022, 12:28 AM
Last Post: Anton
  Spaces and word cases Barbrey 0 4,597 26-07-2021, 02:17 AM
Last Post: Barbrey

Forum Jump:


Users browsing this thread: 1 Guest(s)