KMITL Innovation Expo 2025 Logo

SignGen: โปรแกรมสร้างวิดีโอภาษามือไทยโดยใช้โมเดลภาษาขนาดใหญ่

SignGen: โปรแกรมสร้างวิดีโอภาษามือไทยโดยใช้โมเดลภาษาขนาดใหญ่

รายละเอียด

ระบบสร้างภาษามือไทยเชิงกำเนิดมีเป้าหมายในการพัฒนาแพลตฟอร์ม การสร้างแบบจำลอง 3 มิติและแอนิเมชัน ที่สามารถแปลง ประโยคภาษาไทยเป็นท่าทางภาษามือไทย (TSL) ที่ถูกต้องและเป็นธรรมชาติ โครงการนี้ช่วยเสริมสร้างการสื่อสารสำหรับ ชุมชนผู้บกพร่องทางการได้ยินในประเทศไทย โดยใช้แนวทางที่อิงกับ แลนมาร์ก (Landmark-Based Approach) ผ่านการใช้ Vector Quantized Variational Autoencoder (VQVAE) และ Large Language Model (LLM) ในการสร้างภาษามือ ระบบเริ่มต้นด้วยการ ฝึกโมเดล VQVAE โดยใช้ข้อมูลแลนมาร์กที่สกัดจากวิดีโอภาษามือ เพื่อให้โมเดลเรียนรู้ การแทนค่าแบบแฝง (Latent Representations) ของท่าทางภาษามือไทย หลังจากนั้น โมเดลที่ฝึกแล้วจะถูกใช้เพื่อ สร้างลำดับแลนมาร์กของท่าทางเพิ่มเติม ซึ่งช่วยขยายชุดข้อมูลฝึกโดยอ้างอิงจาก BigSign ThaiPBS Dataset เมื่อชุดข้อมูลได้รับการขยายแล้ว ระบบจะทำการ ฝึก LLM เพื่อสร้างลำดับแลนมาร์กที่ถูกต้องจากข้อความภาษาไทย โดยลำดับแลนมาร์กที่ได้จะถูกนำไปใช้ สร้างแอนิเมชันของโมเดล 3 มิติใน Blender เพื่อให้ได้ท่าทางภาษามือที่ลื่นไหลและเป็นธรรมชาติ โครงการนี้ถูกพัฒนาด้วย Python โดยใช้ MediaPipe สำหรับการสกัดแลนมาร์ก OpenCV สำหรับการประมวลผลภาพแบบเรียลไทม์ และ Blender’s Python API สำหรับสร้างแอนิเมชัน 3 มิติ ด้วยการผสานเทคโนโลยี AI, การเข้ารหัสผ่าน VQVAE และการสร้างแลนมาร์กด้วย LLM ระบบนี้มุ่งหวังที่จะ เชื่อมช่องว่างระหว่างข้อความภาษาไทยและภาษามือไทย เพื่อมอบแพลตฟอร์มการแปลภาษามือแบบโต้ตอบ ในเวลาจริง ให้กับชุมชนผู้บกพร่องทางการได้ยินในประเทศไทย

วัตถุประสงค์

การสื่อสารระหว่างบุคคลที่ได้ยินกับผู้พิการทางการได้ยินหรือบุคคลที่ไม่สามารถใช้คำพูดเป็นอุปสรรคสำคัญ โดยเฉพาะเมื่อบุคคลที่ได้ยินไม่มีความคุ้นเคยกับภาษามือไทย (TSL) ภาษามือไทยมีความซับซ้อนและต้องใช้การฝึกฝน ความตั้งใจ และประสบการณ์อย่างมากจึงจะเชี่ยวชาญได้ ซึ่งมักต้องใช้เวลาหลายเดือนของการศึกษาอย่างต่อเนื่อง แม้แต่เพื่อให้ได้ระดับความคล่องแคล่วขั้นพื้นฐาน สิ่งนี้ก่อให้เกิดช่องว่างด้านการเข้าถึง โดยเฉพาะกับผู้พิการทางการได้ยินที่อาจไม่เคยเรียนรู้ไวยากรณ์หรือภาษาไทยมาตรฐาน อาจพบความยากลำบากในการทำความเข้าใจข้อความภาษาไทยที่เขียน ซึ่งยิ่งทำให้การสื่อสารเป็นเรื่องที่ท้าทายยิ่งขึ้น แม้ว่าการใช้ข้อความเขียนอาจดูเหมือนเป็นทางออกหนึ่งของการสื่อสาร แต่ในความเป็นจริงอาจไม่ได้ผลเสมอไป เนื่องจากผู้พิการทางการได้ยินบางคนอาจไม่สามารถอ่านหรือทำความเข้าใจข้อความภาษาไทยได้อย่างคล่องแคล่ว อันเนื่องมาจากการไม่ได้สัมผัสกับไวยากรณ์ของภาษาพูดแบบดั้งเดิม นี่จึงเป็นเหตุผลสำคัญที่ต้องมีเครื่องมือแปลภาษาแบบเรียลไทม์ที่สามารถแปลงข้อความภาษาไทยเป็นภาษามือไทยได้อย่างถูกต้อง เพื่อช่วยลดช่องว่างนี้ และส่งเสริมให้เกิดปฏิสัมพันธ์ที่มีความหมายระหว่างผู้พิการทางการได้ยิน บุคคลที่ไม่สามารถใช้คำพูด และบุคคลที่ได้ยิน

นวัตกรรมอื่น ๆ

การศึกษาและวิเคราะห์แบคเทริโอซินจากลำดับจีโนมและความสามารถในการยับยั้งจุลชีพก่อโรคของ Lactococcus lactis TKP1-5 ที่คัดแยกได้จากอุจจาระของเป็ด

คณะวิทยาศาสตร์

การศึกษาและวิเคราะห์แบคเทริโอซินจากลำดับจีโนมและความสามารถในการยับยั้งจุลชีพก่อโรคของ Lactococcus lactis TKP1-5 ที่คัดแยกได้จากอุจจาระของเป็ด

แบคเทอริโอซินเป็นเปปไทด์ต้านจุลชีพชนิดหนึ่งที่จุลินทรีย์เป็นคนผลิตออกมาซึ่งมีความสามารถในการยับยั้งจุลชีพก่อโรคได้ จากงานวิจัยนี้นั้นได้มีการศึกษาความสามารถในการยับยั้งจุลชีพก่อโรคและระบุชนิดของแบคเทอริโอซินของแบคเรียกรดแลคติกสายพันธุ์ TKP1-5 ที่คัดแยกมาจากอุจจาระเป็ด ซึ่งมีการระบุลักษณะสปีชีส์ของสายพันธุ์ TKP1-5 โดยใช้การวิเคราะห์จากลำดับ 16s rRNA และลำดับจีโนมทั้งหมด พบว่าจากค่า ANIb, ANIm, และค่า dDDH พบว่าสายพันธุ์นี้คือ Lactococcus lactis อีกทั้งยังมีการทดสอบลักษณะเฉพาะของสายพันธุ์นี้พบว่ามีความสามารถในการเจริญเติบโตใดในสภาวะแวดล้อมดังต่อไปนี้ สามารถโตได้ที่เปอร์เซ็นต์เกลือที่ 2-6% อุณหภูมิ 25-45 องศาเซลเซียส และพีเอช 3-9 ตามลำดับ โดยการศึกษาและระบุชนิดของแบคเทอริโอซินผ่านการวิเคราะห์ลำดับจีโนมนั้นพบว่าเป็นชนิด ไนซิน-ซี (Nisin-Z) ที่ค่าคะแนนเท่ากับ 114.775 รวมไปถึงการวิเคราะห์ความสามารถในการยับยั้งจุลชีพก่อโรคพบว่ามีความสามารถในการยับยั้งจุลชีพก่อโรคดังนี้ Pediococcus pentosaceus JCM5885, Listeria monocytogenes ATCC 19115, Enterococcus faecalis JCM 5803T, Salmonella Typhimurium ATCC 13311ᵀ, Aeromonas hydrophila B1 AhB1, Streptococcus agalactiae 1611 และ Streptococcus cowan I ตามลำดับ การวิเคราะห์ลำดับจีโนมทั้งหมดยังยืนยันได้อีกว่า L.lactis TKP 1-5 นี้ไม่พบยีนที่สามารถจะเป็นจุลชีพก่อโรค ยีนดื้อยา และพลาสมิด อีกด้วย อีกทั้งยังพบยีนที่มีความเกี่ยวข้องในการเป็นโพรไบโอติกหรือยีนที่ก่อให้เกิดประโยชน์อีกด้วย ทั้งนี้หวังว่าสายพันธุ์ TKP1-5จะเป็นหนึ่งในตัวเลือกที่อุตสาหกรรมอาหารนั้นนำมาใช้ในอุตสาหกรรมอาหารในการต้านจุลชีพก่อโรคในอนาคต

การจัดการตารางการรักษาเคมีบำบัดของผู้ป่วยโรงพยาบาลมะเร็งและแชทบอทให้คำปรึกษา

คณะเทคโนโลยีสารสนเทศ

การจัดการตารางการรักษาเคมีบำบัดของผู้ป่วยโรงพยาบาลมะเร็งและแชทบอทให้คำปรึกษา

การรักษาผู้ป่วยมะเร็งในแผนกเคมีบำบัดของโรงพยาบาลมะเร็งชลบุรีมีขั้นตอนที่ยุ่งยากและไม่สะดวก เนื่องจากกระบวนการส่งผลตรวจเลือดผ่านแอปพลิเคชันไลน์ส่วนตัวของเจ้าหน้าที่ทางการแพทย์ ทำให้การดำเนินงานขาดความคล่องตัว ด้วยเหตุนี้ ผู้วิจัยจึงพัฒนาโปรแกรมบริหารจัดการและติดตามผู้ป่วยมะเร็งในรูปแบบเว็บแอปพลิเคชัน (web-based application) และแอปพลิเคชันไลน์ LINE LIFF (LINE Front-end Framework) เพื่ออำนวยความสะดวกให้กับทั้งบุคลากรทางการแพทย์และผู้ป่วย ระบบเว็บแอปพลิเคชันออกแบบมาเพื่อใช้โดยบุคลากรทางการแพทย์ในการติดตาม นัดหมาย และเก็บข้อมูลผู้ป่วย ส่วนแอปพลิเคชันไลน์ ออกแบบสำหรับผู้ป่วยในการส่งผลตรวจเลือด ดูตารางนัดหมาย บันทึกอาการหลังรับยาเคมีบำบัด บันทึกค่าน้ำหนักของผู้ป่วยทุกสัปดาห์ และแชทบอทสำหรับให้คำปรึกษาแก่ผู้ป่วย ระบบนี้พัฒนาบนพื้นฐานของเทคโนโลยีไคลเอนต์-เซิร์ฟเวอร์ ซึ่งช่วยเพิ่มประสิทธิภาพการวิเคราะห์ข้อมูลและสนับสนุนการวางแผนการรักษาอย่างอัตโนมัติ ส่งผลให้กระบวนการรักษาผู้ป่วยมะเร็งมีความรวดเร็ว ทันสมัย และมีประสิทธิภาพมากยิ่งขึ้น

สื่อการเรียนรู้การประกอบคอมพิวเตอร์ด้วยเทคโนโลยีความจริงเสมือน

คณะเทคโนโลยีสารสนเทศ

สื่อการเรียนรู้การประกอบคอมพิวเตอร์ด้วยเทคโนโลยีความจริงเสมือน

ปัจจุบันการประกอบคอมพิวเตอร์ถือได้ว่าเป็นสิ่งใกล้ตัวผู้คนมากมาย ทุกคนมีโอกาสจับต้องได้ ซึ่งความรู้ในองค์ประกอบต่างๆของคอมพิวเตอร์ และทักษะในการประกอบคอมพิวเตอร์ 2 สิ่งที่กล่าวไปเป็นสิ่งที่บุคคลทั่วไปควรมีความรู้และความเข้าใจพื้นฐาน สำหรับการประกอบคอมพิวเตอร์ด้วยตนเอง เราจึงอยากที่จะให้ความรู้แก่บุคคลทั่วไปที่ต้องการที่จะเรียนรู้วิธีการประกอบ คอมพิวเตอร์ รวมไปข้อมูลต่างๆเกี่ยวกับองค์ประกอบ ผ่านการนำเสนอให้ออกมาในรูปแบบของสื่อการเรียนรู้บนเทคโนโลยี VR ซึ่งจะช่วยลดปัญหาด้านความผิดพลาด และทรัพยากรที่จะใช้ในการประกอบลงไปได้ พร้อมสร้างความตื่นเต้นให้กับผู้ใช้งานด้วยการจำลองการประกอบคอมพิวเตอร์ให้ผู้ใช้ได้มีปฏิสัมพันธ์ภายในโลกเสมือน สร้างประสบการณ์ และให้ความรู้ก่อนที่จะนำไปปฏิบัติจริงกับอุปกรณ์จริง โครงงานนี้จึงถูกสร้างขึ้นเพื่อให้ผู้ที่สนใจในการประกอบคอมพิวเตอร์ โดยเฉพาะบุคคลที่ไม่มีประสบการณ์ในการประกอบคอมพิวเตอร์มาก่อน รวมไปถึงบุคคลที่อยากมีโอกาสได้ลองประกอบคอมพิวเตอร์ด้วยตนเอง