AI Builders Logo

American Sign Language

โดย กรกมล แสงสว่าง (เบลล์)

image

  • แรงบันดาลใจจากการดูวิดีโอที่มีชื่อว่า “ครู…โลกเงียบ” ของ 7Eleven ที่แสดงให้เห็นถึงครูที่เข้าใจหัวอกของเด็กสาวที่ชื่อว่า “บัว” ซึ่งเธอเป็นผู้พิการที่มีความบกพร่องทางการได้ยิน แต่กลับกันแม่ของเธอกลับไม่เข้าใจถึงโลกที่เธออยู่ และเพิกเฉยต่อสิ่งที่เธอเป็น ทำให้เด็กสาวมีความพยายามที่อยากจะพูดให้ได้ เพื่อที่จะให้แม่ของเธอเข้าใจในสิ่งที่เธอนั้นต้องการ (https://www.youtube.com/watch?v=8n6ocbjrZw8),
  • พบข้อจำกัดคือไม่มีชุดข้อมูลภาษามือไทยจึงเริ่มทำโครงงานด้วยชุดข้อมูลตัวอักษรภาษามืออเมริกัน American sign language (ASL) ได้แก่ A , B, C, D, F, G, H, I, J, K, L, M, N, O, P, Q, R, S, T, U, V, W, X, Y, Z, Nothing, Space และ Del,
  • ชุดข้อมูลรวบรวมจาก open source บน Kaggle จำนวน 7 แหล่ง; ทำความสะอาดข้อมูลจาก 352,647 รูป คัดอย่างละเอียดเหลือ 14,498 รูป (หนึงประเภทตัวอักษรมีข้อมูลประมาณ 500 รูป),
  • ปรับจูนสถาปัตยกรรม ResNet50 จำนวน 30 epoch ได้ accuracy บน test set (แบ่ง 90/10) ที่ 71%,
  • พบตัวอักษรที่ใช้สัญลักษณ์มือคล้ายกันทำให้โมเดลอาจจะจำผิดพลาด เช่น A กับ E, S กับ T, G กับ Z เป็นต้น

แรงจูงในในการเข้าร่วมโครงการ (จากใบสมัครเข้าร่วมเมื่อ 10 สัปดาห์ที่แล้ว)

"จากประสบการณ์ที่หนูเคยได้เข้าร่วมกิจกรรม และเข้าร่วมการแข่งขันทางด้าน AI มา มันทำให้หนูค้นพบว่าตนเองสนใจอะไร ค้นพบเส้นทางที่อยากเดินต่อ แต่ตอนนี้ยังขาดความรู้ ยังอ่อนประสบการณ์ ถ้าทางโครงการอยากได้คนที่พร้อมที่จะรับความรู้ คนที่มีความมุ่งมั่นและความตั้งใจ หนูขอให้ทางโครงการลองเปิดโอกาสให้หนูได้แสดงให้เห็น หนูรับรองว่าจะไม่ทำให้ทางโครงการผิดหวังแน่นอนค่ะ ตัวหนูมีความสนใจทางด้าน AI ค่ะ เลยอยากที่จะเข้าร่วมโครงการนี้ เนื่องจากหนูมีเป้าหมายที่อยากจะนำความรู้ที่ได้จากโครงการไปพัฒนาศักยภาพของตนเอง จนสามารถนำความรู้ที่ได้ไปเป็นส่วนหนึ่งในการสร้างสรรค์นวัตกรรมใหม่ๆ และพัฒนาเทคโนโลยีทางด้าน AI เพื่อเข้ามาช่วยเหลือสังคม และตอบสนองความต้องการของผู้คนทั่วโลกค่ะ อยากทำแอปพลิเคชันสำหรับคนพิการทั้งที่เป็นใบ้ และหูหนวกค่ะ โดยโครงงานนี้จะเข้ามาช่วยแก้ปัญหาในเรื่องการสื่อสารระหว่างคนปกติและคนพิการ หลักการทำงานจะใช้กล้องถ่ายเก็บข้อมูลภาษามือ แล้วให้ AI ประมวลผล พร้อมแปลความหมายให้กับคนที่จะสื่อสารด้วย โดยหาชุดข้อมูลจากคนที่หูหนวกและเป็นใบ้ และบุคคลที่เชี่ยวชาญเรื่องการแปลภาษามือ"

Follow AI Builders