Total Parameters: ~100.6M; Vocab Size: 16384; Features: Interleaved Local-Global Attention + DeepSeek-V3 style MTP; Step: 3800/5000.
Independent publisher
AI
Jommarn
Models in Library4
Datasets in Library1
Models on Hugging Face16
Followers25
Compare the published evidence
This profile connects the 5 model and dataset records shown below to their upstream cards and sources. The library counts describe SAVRN's coverage, rather than this publisher's entire output.
Published tasks: Text generation.
Reported licenses: other. Open a record to review its specific license and conditions.
Compare model specifications, source dates, and hardware estimates on the individual records. Publisher identity verification is separate from a model's quality, deployment readiness, or suitability for your work.
Models
Datasets
ชุดข้อมูลภาษาไทยสำหรับ semi-pretraining: เอกสารเว็บภาษาไทยที่ถูกทำความสะอาดและเรียบเรียงใหม่ด้วย LLM โดยมีบล็อกการวิเคราะห์สั้น ๆ … ฝังอยู่หน้าข้อความ และมีคู่คำถาม-คำตอบ (SFT) พร้อม think full.jsonl (หนึ่งแถวต่อเอกสาร) pretrainwiththink.jsonl / pretrainclean.jsonl: id, type (rewrite), text sft.jsonl: id ( -q ), docid, question, think, answer, messages (รูปแบบแชท: user = คำถาม, assistant = … + คำตอบ) 1. แหล่งข้อมูลดิบ: สตรีมตัวอย่างจาก FineWeb-2 ภาษาไทย (HuggingFaceFW/fineweb-2, thaThai) และ Wikipedia ไทย (wikimedia/wikipedia, 20231101.th) รวม 80,000 เอกสาร (CulturaX ไม่ได้ใช้ เพราะยังไม่ได้รับสิทธิ์เข้าถึง) 2. กรองด้วยกฎ (ไม่ใช้ LLM): normalize Unicode (NFC), ลบอักขระล่องหน/ควบคุม, ลบ URL…