• コンピューター工学のバックグラウンドとAIの力を使えば、手話をリアルタイムで認識して翻訳するスマートなシステムを作れることに気づいた」とバーダー・アルシャリフ氏は言う。
• 彼の最初のバージョンは手話を英語に翻訳しているが、すべての言語に適応させることができると彼は言い、次の目標はサウジアラビア手話のバージョンを作ることだという。

レイ・ハナニア

シカゴ：サウジアラビアの人工知能研究者は、聴覚障害者のコミュニティで教師として働くことで、テクノロジーが彼らのコミュニケーション方法を改善する可能性があることに気づいた。

バーダー・アルシャリフ氏は、10年半以上にわたって聴覚障害者とともに働いてきた結果、彼らが直面する最大の課題のひとつは、一般の人々が手話を理解していないことだと理解するようになったという。この障壁を乗り越えることができれば、このコミュニティのコミュニケーション能力を向上させるだけでなく、手話に依存する人々の生活をより広く一般の人々が理解できるようになると彼は悟った。

「手話とAIに焦点を当てようと決めたのは、過去16年間、学生たちと密接に仕事をしてきたからです」と39歳の彼はアラブニュースに語った。「コミュニケーション、特に周囲の人々が手話を理解していない状況で、彼らが直面する課題を目の当たりにしました」

「それは本当に感動的で、力になりたいと思ったのです。そこで、コンピューター工学のバックグラウンドと人工知能の力を使って、リアルタイムで手話を認識し、それを言葉に翻訳するスマートなシステムを作ることができると気づきました」

「これは聴覚障害者と健聴者の間のギャップを埋めるのに役立ちます。簡単に言うと、カメラで人が手のジェスチャーをしているところを撮影し、AIモデルがディープラーニングとハンドトラッキングを使ってそのジェスチャーを分析する。そしてシステムがジェスチャーを文字や単語にマッチングさせ、特定の単語の意味を表示する」

アルシャリフ氏が学術研究に没頭するにつれ、彼はすぐに聴覚障害学生を支援するための変革ツールとなるAIの可能性を見出した。彼自身は手話のジェスチャーの約30パーセントを理解しているが、彼が開発中のAI搭載プログラムは、コミュニケーションのギャップを埋めるのに役立つ、あらゆる種類の手話を解釈するように設計されている。

このコンピューター工学の研究者は、数カ月かけてチームと協力し、各手話のジェスチャーとその英訳のあらゆる側面を含むデータセットを構築した。このデータセットには、手話のジェスチャーの画像が13万点近く含まれており、それぞれのジェスチャーには、システムが手話を正しく識別し、翻訳するのに役立つ21のデータポイントが割り当てられている。

初期バージョンは英語翻訳用だが、アルシャリフ氏によれば、データセットはあらゆる言語用に作成可能で、次の目標はサウジアラビア手話を通訳するバージョンを作成することだという。

「良いデータセットができれば、手話翻訳システムをどの言語にも対応させることができます」と彼は付け加えた。

今のところ、このシステムは手話を英語に翻訳する一方通行で、いくつかの制限がある。次の課題は、プロセスを逆にして、あらゆる言語の音声を手話に翻訳するシステムを拡張することだと彼は言う。

マッカ出身のアルシャリフ氏は、2008年にリヤドの工科大学を卒業し、リヤドの技術・職業訓練公社で働き始めた。2017年にはフロリダ工科大学でコンピューター工学の修士号を取得した。

彼の仕事は、技術革新と社会的インパクトの結合を目指しており、その目標は彼をヘルスケアにおけるコンピュータ工学の利用における先進的リーダーとして位置づけている。

アルシャリフ氏は2021年からフロリダ・アトランティック大学で博士号取得のために勉強しており、手話認識システムのさまざまな側面や、医療サービス提供におけるAIとインターネットの活用を研究テーマとしている。

また、ティーチングアシスタントとして、工学設計プロジェクトを遂行する30人以上の学生を指導・評価している。また、技術的な質問、設計原理、プロジェクト開発に関するアドバイスで200人以上の学生を支援している。

「これらの研究はすべて、人工知能を使って現実世界の問題を解決し、特別なニーズを持つ人々をサポートするものです」とアルシャリフ氏は語った。

フロリダ州ボカラトンに妻と4人の子供と住むアルシャリフ氏は、彼のすべての業績を可能にしてくれたサウジアラビア政府に感謝していると語った。彼が率いた、あるいは関与した他の革新的なプロジェクトには、デジタル通信技術企業CISCOのサウジアラビア初のオフィス開設があり、300台以上の機器のパフォーマンスとセキュリティの最適化を管理してきた。

また、AI、サイバーセキュリティ、モノのインターネット、特にヘルスケアに関連するものを中心に、10本以上の査読付き論文を発表している。彼は、特に特別なニーズを持つ人々との仕事を通じて、テクノロジーを発展させ、包括性を育むことに特別なコミットメントを持っていると言う。