Мъж от Мумбай развива парализата на Бел след завръщането си от Сингапур, изгражда приложение за проследяване на лице с изкуствен интелект за рехабилитация на лицето

Старши бранител на разработчиците от Мумбай, който беше на публично пътешестване и „ прекарваше най-хубавото време в живота си “, беше оставен в потрес, откакто се върна вкъщи, когато откри, че дясната страна на лицето му е спряла да работи. Али Мустафа показа тестването си в X, някогашен Twitter, описвайки по какъв начин е посещавал конференции и е приказвал с хора за изкуствения разсъдък – нещо, което Мустафа разказва като „ главната част от работата си “ и той „ обича “ да прави.

Мустафа, който е взел участие в застъпничеството на разработчиците и обществените изявления през последните 10 години, сподели, че животът му е претърпял злополучен поврат след завръщането си в Мумбай от Сингапур.

" Трябваше да отида в незабавното, тъй като дясната ми страна започваше да се проваля, изключително лицето ми. Не реагираше и не можех да мигна. Не бях в положение да направя каквото и да направих от лявата страна ", сподели той.

Той съобщи, че е развил парализа на Бел - положение, което нормално се появява при хора, които страдат от инфекции заради мощен мраз. Той обаче сподели, че не може да разбере повода зад положението, защото и Сингапур, и Мумбай са влажни места.

" Така че беше доста ненадейно, само че беше засечено и се случи. През нощта не можах да движа дясната страна на лицето си. Колкото и да беше демотивиращо това, че не мога да приказвам, невъзможността да върша това, което обичам да върша, беше по-болезнено ", сподели той.

Инструмент с изкуствен интелект, предопределен за рехабилитация на лицето

Мустафа по-късно построи Задвижван от изкуствен интелект инструмент, наименуван „ Огледало “, за следене на извършения за възобновяване на лицето след диагностициране с парализа на Бел. Той показа плана онлайн, обяснявайки по какъв начин платформата употребява разкриване на лицеви ориентири и разбор на симетрията, с цел да следи напредъка на рехабилитацията и да генерира доклади за физиотерапевтите.

„ Но аз съм разработчик по душа и обичам да работя към машинно образование и AI модели “, сподели той, до момента в който представяше плана. Той добави, че преди този момент е основал курсове, които са обучавали „ повече от 500 000 студенти “ по какъв начин да стартират машинно образование.

Разработчикът изясни, че положението нормално продължава седмици и че възобновяване зависи мощно от постоянните извършения. Желаейки по-добър метод за наблюдаване на подобрението, той реши да комбинира техническия си опит с процеса на възобновяване.

„ Така че събрах малко храброст, седнах с преносимия компютър си, стартирах доста AI модели и сътворих Mirror “, сподели той.

Според него платформата оказва помощ на хора със положения като парализата на Бел да извършват лицеви извършения, до момента в който правят оценка лицевата симетричност сред лявото и дясната страна на лицето.

„ Той ви оказва помощ да вършиме извършения и също по този начин да ги оценявате въз основа на симетрията от лявата страна на лицето ви към дясната страна на лицето “, изясни той.

Проследява напредъка и генерира доклади

Инструментът разрешава на потребителите да записват извършения всекидневно и да поддържат дневник, документиращ тяхното пътешестване за възобновяване. Той също по този начин основава подробни доклади, които могат да бъдат прегледани от физиотерапевти, с цел да обезпечат противоположна връзка и да оценят напредъка.

Разработчикът показва по какъв начин потребителите могат да преразглеждат обособени извършения, да наблюдават продължителността на упражненията и даже да гледат записи с приключване на времето, показващи усъвършенстване на лицето с течение на времето.

„ Идеята е освен да се вършат упражненията, само че и да се види напредъкът “, сподели той.

Използва машинно образование и лицеви ориентири

Бекенд системата се зарежда от модели за машинно образование и употребява технология за лицеви ориентири MediaPipe. Според основателя, моделът първо улавя неутрално изражение на лицето, преди да раздели лицето на две секции за съпоставяне.

Системата записва повече от 400 лицеви точки и проучва симетрията при разнообразни извършения, като придвижване на веждите и усмивка.

„ За всяко упражнение ще направи това. И най-после ще възстановява резултата и по-късно ще го покаже на моя физиотерапевт “, той обяснено.

Съобщава се, че инструментът разчита на близо 478 3D индикатори за лице и ориентири, в това число следене на вежди, клепачи, устни и очни ябълки.

Мобилният метод преди всичко

Разработчикът сподели, че планът е предопределен най-вече за мобилни устройства, тъй че потребителите да могат елементарно да държат телефоните си като огледало, до момента в който извършват извършения.

„ Моделът, който използваме тук, може да работи на всеки браузър и също по този начин да работи на мобилно устройство, ” сподели той.

Той също по този начин разкри проекти за обществено внедряване на плана и вероятно качване на кода в GitHub, тъй че други с сходни условия да могат да се възползват от него.

„ Ако познавате някой, който има това положение и който би се възползвал от това, ще основа вместилище на GitHub и ще основа образец за внедряване, ” добави той.