Маселе эмне? Адам сүйлөгөндө болгону үн чыгарбайт

Адамдын баарлашуусу сөздөрдөн гана турбайт. Сүйлөп жатканда колубузду кыймылдатып, башыбызды кыймылдатып, беттин билдирүүлөрүн колдонуп, дене ритмибиз менен сүйлөшүүгө кошомуз.

Бул кыймылдардын бир бөлүгү сүйлөгөн сөздүн мааниси менен түздөн-түз байланыштуу. Мисалы, «ушуга бардым» деп айтканда колу менен багыт көрсөтүү, «чоң» деп айтканда колдорун ачуу же «болүшүү» деп айтканда колдун тээпин узатуу семантикалык ишараттардын мисалы болушу мүмкүн.

Кээ бир кыймылдар болсо көбүрөөк сүйлөгөндүн ритмин ээрчийт. Алар адатта кичинекей, кайталаган жана басымга байланыштуу кол кыймылдары болуп саналат. Бул түрдөгү кыймылдарга бий джесттери деп аталат. Бий джесттери сөздүн толук маанисин көрсөтпөйт; бирок сүйлөөнүн агымын, басымын жана ритмин колдойт.

Виртуалдык аватарлар, санарип адамдар, оюн каармандары, билим берүүчү жардамчылар жана социалдык роботтор үчүн бул кыймылдарды табигый түрдө жасоо маанилүү. Анткени оозу менен гана кыймылдаган, бирок денеси кызыксыз бойдон калган аватар колдонуучуга механикалык же коопсуз көрүнүшү мүмкүн.

Бул изилдөөнүн негизги суроосу мындай:

Жасалма интеллект сүйлөгөндүн маанисин жана ритмини эске алып, табигый кыймылдарды жарата алабы?

Учурдагы моделдердеги көйгөй эмнеде?

Көптөгөн сүйлөө-жест түзүү моделдери бардык жесттерди бир кыймыл агымы сыяктуу иштетет. Башкача айтканда, модель сүйлөөнү алып, ага туура келген дене кыймылын бир система менен түзүүгө аракет кылат.

Бирок изилдөөчүлөрдүн айтымында, бул ыкма үч маанилүү көйгөйдү жаратышы мүмкүн.

Биринчиден, сүйлөө менен кыймылдын убактысы ар дайым жакшы шайкеш келе бербейт. Аватар кээде туура учурда кыймылдабай калышы мүмкүн же сүйлөөнүн басымына туура келбеген кыймылдарды жаратышы мүмкүн.

Экинчиден, семантикалык ишараттар алсырап калышы мүмкүн. Модель «бөлүшүү», «көргөзүү», «чоң», «бул жерде», «жогору» сыяктуу маанини дене кыймылы менен байланыштырган сөздөрдү жетиштүү деңгээлде ишараттай албай калышы мүмкүн.

Үчүнчүсү, беат кыймылдары тынчсыз же жасалма көрүнүшү мүмкүн. Адам колунун биомеханикалык чектөөлөрү бар; башкача айтканда, колдун кыймылдары бир заматта багытын өзгөрткөн кокустук титирөөлөр сыяктуу эмес, салмак жана инертия көтөргөн кыймылдар сыяктуу көрүнөт.

DuoGesture бу сорунлара şу фикирле яклаşıёр:

Семантик иш-аракет жана бит иш-аракет ошол эле кыймыл түрү эмес; ошондуктан аларды ошол эле механизм менен чыгарбоо керек.

DuoGesture не öнериёр?

DuoGesture, конуşмаыла бирликте жест üретимини ики акışа аыıрıёр.

Семантикалык агым сүйлөөнүн мааниси менен байланышкан жесттерди түзүүгө аракет кылат. Мисалы, кайсы сөздөр, сөз айкаштары же эмоция контексттери кайсы дене кыймылын эске салат?

Бит агымы сүйлөмдүн ритмине, стресс түзүлүшүнө жана убактысына шайкеш келген кичинекей ритмдик кыймылдарды жаратууга аракет кылат.

Бул эки агым толугу менен көз каранды эмес. Модель ар бир кадрда семантикалык жесттинби же бийик кыймылдынбы үстөмдүк кылаарын чечкен эшик механизмин колдонуп турат. Ошентип модель ар дайым «азыр мааниге багытталган жест керекпи, же ритмдик сүйлөө кыймылыбы жакшыраак?» деген суроого жооп берүүгө аракет кылат.

Сүрөт 1 эмне айтып турат?

макаледеки şекил 1, DuoGesture’ин генел фикрини гöстериёр. моделин ики ана ёлу вар: семантик акış ве беат акışı.

Семантик тарапта сөздүктүү текст кыймыл менен байланышкан маанидеги өкүлдүктөргө айлантылат. Бит тарапта болсо үн ритми жана сүйлөөчү жөнүндөгү маалымат кыймыл агымын багыттайт. Бул эки агымдын натыйжасы, кадр кадр өзгөргөн салмак менен бириктирилет.

Форманын негизги кабары мындай:

DuoGesture, конуşма жестини тек парçа бир харекет оларак деğил, анлам ве ритим арасıнда сüрекли деğиşен бир карışıм оларак гöрüёр.

Бул адамдын коммуникациясына жакындатып караган ыкманы сунуштайт. Анткени адам сүйлөгөндө кээде сөздүн маанисин көрсөтүүчү кол кыймылын жасайт, кээде болсо жөн гана ритмге кошулган кичинекей соккуларды жасайт.

MGSC: келимеден харекете даха анламлı кöпрü

DuoGesture’ин илк öнемли билеşени MGSC, яни мотион-гроундед Semantic Conditioning модüлüдüр.

класик моделлерде келимелер генелликле BERT, FastText вея бензери метин темсиллериыле верилир. бу темсиллер дил анламıнı таşıр; факат бир келименин беденде насıл бир харекетле ифаде едилебилецеğини доğрудан билмеыебилир.

Мисалы, “бөлүшүү” сөзү тилдик жактан бир мааниге ээ. Бирок бул сөздүн дене тили аркылуу көрсөтүлгөн мааниси колду ачуу, кол сунуу же бир нерсени башкаларга берүү кыймылы болушу мүмкүн. Жөн гана тексттик көрүнүш бул кыймыл формасын ар дайым жакшы чагылтыра албайт.

MGSC бу боşлуğу капатмак иçин метни харекетле илиşкилендирилмиş темсиллерле дестеклер. яни модел ялнıзца “не сöыленди?” сорусуна деğил, “бу анлам насıл бир харекете дöнüşебилир?” сорусуна да яклаşмая çалışıр.

Бул өзгөчө сейрек кездешкен сөздөр үчүн маанилүү. Маалымат топтомунда өтө аз көрүнгөн сөз классикалык модель үчүн кыйын болушу мүмкүн. Бирок кыймыл менен байланышкан семантикалык өкүлдүк, бул сөзгө ылайыктуу иш-аракет артыкчылыгын бере алат.

S-VIB: ханги анда семантик жест девреые гирмели?

DuoGesture’ин икинци öнемли билеşени S-VIB, яни Semantic Variational Information Bottleneck модüлüдüр.

Бул модуль семантикалык агым качан ишке кирерин чечет. Ар бир кадр үчүн салмак түзөт. Бул салмак Ψ символу менен көрсөтүлөт.

Жөнөкөй түрдө мындай деп ойлой алабыз:

Ψ мааниси 0го жакын болсо: Ритм басымдуулук кылат. Кыймыл көбүрөөк сүйлөө ырғагына шайкеш келет.
Ψ мааниси 1ге жакын болсо: Семантикалык агым басымдуу. Жүрүш кыймыл көбүрөөк сүйлөп жаткандын маанисин билдирет.

Бул эшик механизми кокустук же туруктуу эмес. Модель сүйлөмдүн мазмунун, убактысын жана семантикалык белгилерин эске алуу менен үйрөнөт.

бурадаки ен öнемли нокта şудур: капı хер заман семантик акışı аçарса модел анлам одаклı ама фазла харекетли олабилир. капı хиç аçıлмазса жестлер ялнıзца ритмик калıр ве анлам заыıфлар. S-VIB, бу çöкüşü öнлемек иçин деğиşкен ве контроллü бир сеçим япıсı кулланıр.

Формула эмне дейт? Эки кыймыл агымы кантип биригет?

Макаладагы эң түшүнүктүү негизги формулалардын бири, бийт жана семантикалык кыймыл агымдары кантип аралаштырыла турганын айтып берет:

зр = (1 − Ψ) Zbr + Ψ Zsr

. Бул формуланы жөнөкөйлөтөлү.

Zbr, бит агуусунан келип чыккан кыймылдын көрсөтүүсү.
Zsr, семантикалык агымдан келген кыймылдын өкүлчүлүгү болуп саналат.
Ψ ошол учурда семантикалык кыймылдын канчалык үстөм болоорун аныктаган эшик мааниси болуп саналат.
зр эки агымдын биригкен акыркы кыймылын билдирет.

Эгер Ψ төмөн болсо, кыймыл көбүрөөк бит агымынан келет.
Эгер Ψ жогору болсо, кыймыл көбүрөөк семантикалык агымдан келет.

Бул формуланын окутуучу жери мындай:

Модель «же толугу менен ритм же толугу менен мааниге» деп айтпайт. Ал ар бир кадрда экөөнүн катышын жөнөлтүп турат. Адамдын иш-аракеттери да көп учурда мындай болот; бир кыймыл бир эле учурда ритмге туура келип, белгилүү бир деңгээлде маанини да камтыйт.

IBP: Beat харекетлери неден биёмеканик олмалı?

DuoGesture’ин üçüнцü öнемли билеşени IBP, яни Inertial Beat Prior’дıр.

Бул бөлүм, бий тактыларынын кыймылдарын тагдырлуу кылуу үчүн адам колунун биомеханикалык өзгөчөлүктөрүн колдонот. Адам колу салмаксыз сызык сыяктуу кыймылдабайт. Ийин, кол, билек жана колдун массасы кыймылдын жытыктуулугуна жана ритмине таасир этет.

Бий кыймылдары адатта ритмдүү жана кайталаа өнөрүндө болот. Эгер жасалма интеллект бул кыймылдарды физикалык чектөөлөрдөн толугу менен көз карандылыксыз өндүрсө, кыймылдар тити менен же механикалык көрүнүшү мүмкүн.

IBP, беат акışıна еğитим сıрасıнда бир дüзгüнлüк баскıсı уыгулар. ама буну тüм харекетлере кöрü кöрüне япмаз. öзелликле кол зинцири ве беат карелери üзеринде еткили олур. семантик жестлерин анлам таşıян вургуларıнı фазла бастıрмамак иçин семантик карелерде бу етки азалтıлıр.

IBP формüлü не сöылüёр?

макаледеки IBP аğıрлıк формüлü şу фикри таşıр:

τж,т = τбасе × √(мж / ммас) × (1 − ψт) × (1 + α σ²ϕ,т)

бу формüлü саделеşтирелим.

τж,т белгилүү бир букум жана убакыт үчүн канча жумшартуу колдонуларын аныктайт.
мж, тиешелүү дене бөлүгүнүн масса катышы.
ммас — эң оор шилтеме сегменти.
ψт ошол учурда семантикалык агымдын канчалык активдүү экенин көрсөтөт.
σ²ϕ,т, эшик чечиминдеги белгисиздикти билдирет.

Бул формуланын жөнөкөй билдирүүсү мындан турат:

Beat кыймылдарында колдун салмагына жана инерциясына көбүрөөк ылайыктуу жумшактык колдонулат. Бирок семантикалык кыймыл ишке кирсе, бул жумшартуу азайтылат. Анткени семантикалык кыймылдын маанисин камтыган тактыгы керексиз түрдө басылбашы керек.

Бул изилдөөнүн “биомеханикалык маалымат менен колдоого алынган” тарабы.

Сүрөт 2 эмне көрсөтүп турат?

макаледеки şекил 2, DuoGesture’ин иşлем хаттıнı даха аырıнтıлı гöстериёр.

биринци бöлüмде MGSC, метин, дуыгу ве харекетле илиşкили темсиллери бирлеşтиререк семантик харекет билгисини олуşтуруёр.

и̇кинци бöлüмде S-VIB, бу семантик билгиыи ве сес заманламасıнı кулланарак семантик капıыı хесаплıёр.

Үчүнчү бөлүмдө бий жана семантикалык кыймыл коддору бириктирилет. Тандалган кыймыл коддору кийинчерээк жең кыймылы анимациясына айландырылат.

Бул форма модель жөн гана үн жана текстти алып, кыймылын жаратпастан, кыймылды мааниси, убактысы, сезими, сүйлөөчү жана биомеханикалык тартиптери аркылуу көп катмарлуу түрдө түзөрүн көрсөтөт.

Сүрөт 3 эмне айтып турат?

şекил 3, тко-стреам Hierarchical Blender яни ики акışлı хиыерарşик карışтıрıцı япıсıнı анлатıёр.

Beat акışı, сес öзелликлери, конуşмацı кимлиğи ве баşлангıç позуыла ритмик харекет темсиллери üретир. семантик акış исе MGSC’ден гелен анлам темсиллерини кулланıр. еллер, üст гöвде, алт гöвде ве ыüз гиби бöлгелер аырı аырı еле алıнıр.

Бул маанилүү, анткени адам денеси бир блок сыяктуу кыймылдабайт. Кол кыймылы, дене абалы жана бет мимикасы ар башка, бирок байланышкан динамикага ээ. Модель бул аймактардын ортосунда көңүл буруу механизмдери аркылуу маалымат алмашууну камсыз кылат.

Сүрөттүн негизги кабары:

Табигый иш-аракеттерди жаратуу үчүн жөн гана кол кыймылы эмес, дененин бөлүктөрүнүн ортосундагы гармония да маанилүү.

Эксперименттер кайсы маалымат топтому менен жүргүзүлгөн?

араşтıрмацıлар DuoGesture’и BEAT2 адлı конуşма-жест вери сети üзеринде тест едиёр.

BEAT2 яклаşıк 76 саатлик конуşма, харекет, ыüз ифадеси ве конуşмацı кимлиğи вериси иçериёр. вери сетинде 30 конуşмацı булунуёр. аырıца семантик ве беат жест тüрлери иçин каре дüзеыинде етикетлер ыер алıёр.

бу, DuoGesture иçин öнемли бир авантаждıр. çüнкü моделин ики фарклı жест тüрüнü аыıрарак öğренебилмеси иçин вери сетинде бу аырıмı дестеклеыен етикетлере ихтияç вардıр.

Тажрыйбалар эки чөйрөдө жүргүзүлгөн:

Бир сүйлөгүч орнотуу: Speaker 2дө сыноо.
Көп процессорлу жөндөө: 25 процессор аркылуу сыноо.

Муну менен моделдин конкреттүү бир сүйлөгүчкө да, кеңири сүйлөгүчтөр ар түрдүүлүгүнө да болгон мамилеси изилденген.

Таблица 1 Канчыны Көрсөтөт?

табло 1, DuoGesture’и бирçок гüçлü конуşма-жест üретим моделиыле карşıлаşтıрıёр.

ана öлçüт FGD, яни фрéчет Gesture дистанце оларак верилмиş. FGD дüşüк олдуğунда, üретилен жестлерин герçек инсан харекет даğıлıмıна даха якıн олдуğу кабул едилир.

тек конуşмацı аярıнда DuoGesture ен дüşüк FGD деğерине улаşıёр:

DuoGesture: 4,101
SemTalk: 4,278
PyraMotion: 4,612

çок конуşмацı аярıнда да DuoGesture ен иыи FGD деğерини вериёр:

DuoGesture: 4,081
GestureLSM: 4,268
SemTalk: 5,214
EMAGE: 5,643

бу сонуçлар, DuoGesture’ин харекет герçекçилиğи аçıсıндан гüçлü бир конумда олдуğуну гöстериёр.

Бирок таблицада дагы бир маанилүү нерсе бар: Beat алигнмент же диверситы сыяктуу айрым экинчи даражадагы метрикаларда башка моделдер жогорку көрсөткүчтөргө ээ боло алат. Изилдөөчүлөр ушул себептен бир гана метрикага карабоо керек деп белгилешет. Өтө жогорку беат шайкештиги кээде ашыкча ритмдик кыймыл дегенди билдириши мүмкүн; өтө жогорку ар түрдүүлүк болсо ар дайым табигый жана маанилүү кыймыл дегенди билдирбейт.

Таблица 2 Канча айтып турат?

табло 2, DuoGesture’ин билеşенлерини тек тек çıкарарак ханги парçанıн не каткı вердиğини инцелиёр.

Жыйынтыктарга ылайык:

MGSC çıкарıлдığıнда FGD 4,081’ден 4,803’е кöтüлеşиёр. бу, харекетле темеллендирилмиş семантик коşулландıрманıн ен бüыüк герçекçилик каткıсıнı вердиğини гöстериёр.

IBP çıкарıлдığıнда беат алигнмент дüşüёр. бу, биёмеканик аталет öнцелиğинин ритмик харекетлери даха тутарлı хале гетирдиğини дестеклиёр.

S-VIB ыерине даха басит капı кулланıлдığıнда çеşитлилик азалıёр. бу да деğиşкен ве стокастик капı меканизмасıнıн харекет даğıлıмıнı даха гениş туттуğуну дüşüндüрüёр.

Бул таблица модельдин үч негизги бөлүгү бири-бирин толуктаарын көрсөтөт:

MGSC анламı гüçлендириёр.
S-VIB не заман анлам жести япıлацаğıнı сеçиёр.
IBP ритмик харекети даха юмуşак ве доğал хале гетириёр.

Колдонуучу Иштери Эмне Дейт?

Изилдөөчүлөр 30 англис тилинде эне тили бар катышуучу менен контролдоо жүргүзүлгөн колдонуучу изилдөөнү өткөрүшкөн. Катышуучулар 35 секунддук видеолорду көрүшкөн жана кыймылдарды үч бурчтан баалашкан:

• Табияттуулук
• Кыймылдардын ар түрдүүлүгү
• Сүйлөшүүнүн мазмуну жана убактысы менен шайкештик

карşıлаşтıрıлан системлер арасıнда герçек харекет, DuoGesture, SemTalk ве EMAGE ыер алıёр.

беклендиğи гиби герçек инсан харекетлери ен ыüксек пуанларı алıёр. üретилен харекетлер арасıнда исе DuoGesture генел оларак даха гüçлü алгıсал деğерлендирмелер елде едиёр.

бу сонуç öнемлидир çüнкü ялнıзца саыıсал метриклер хер заман инсан алгıсıнı там янсıтмаз. кулланıцı çалışмасı, DuoGesture’ин üреттиğи харекетлерин излеыицилер тарафıндан даха доğал ве конуşмаыла даха уюмлу алгıланабилецеğини дестеклиёр.

Сүрөт 5 эмне көрсөтүп турат?

Сүрөт 5 ар кандай моделдердин белгилүү сүйлөө бөлүктөрү үчүн түзгөн кыймылдарын визуалдык түрдө салыштырат.

Мисал сөз айкуууларга «то гет», «ин тхис каы», «и цан шаре» жана «море драма» сыяктуу сүйлөм бөлүктөрү кирет.

DuoGesture, öзелликле анлам таşıян ифаделерде даха белиргин кол харекетлери ве даха анлаşıлıр харекет япıларı üретиёр. Beat аğıрлıклı ифаделерде исе конуşма ритмиыле уюмлу ама аşıрı пüрüзсüзлеşмеыен харекетлер сунуёр.

Бул сүрөттүн окуучү үчүн маанилүү билдирүүсү мындай:

Модель тек « кыймыл барбы?» деген суроону эмес, « бул кыймыл сүйлөгөн сөздүн маанисине жана ритмине ылайыкпы?» деген суроону көздөйт.

Экинчи Анализ: Бит жана Семантикалык Жесттер Чындап Өзүңүзчө Айрымбаппы?

макаленин ек бöлüмüнде, BEAT2 вери сетиндеки беат ве семантик харекетлер карşıлаşтıрıлıёр.

Натыйжалар эки иш-аракет түрү кинематикалык жактан башкача экенин көрсөтөт.

Beat кыймылдарында ийин кыймылынын жогорку жыштыгы болжол менен 1,12 Гц. Семантикалык кыймылдарда бул көрсөткүч болжол менен 1,69 Гц. Мындан тышкары, семантикалык кыймылдарда ийин менен билектин синхрондошуусу жогору.

Спектралдык анализде бит кыймылдар кыска жана так ритмдүү энергияга ээ болуп, семантикалык кыймылдар болсо кеңири жана аз тоналдык түзүлүшкө ээ экендиги байкалат.

бу сонуçлар DuoGesture’ин темел фикрини дестеклиёр:

Эгерде бий титирөөсү жана семантикалык ишараттар чындап эле ар башка кыймыл профилдерине ээ болсо, аларды өзүнчө агымдарда моделдөө маанилүү болушу мүмкүн.

Изилдөө эмнени айтат?

Иштин негизги кабары төмөнкүдөй:

Сүйлөө-жест чыгарууда бардык кыймылдарды бир модель агымы менен чыгаруунун ордуна, семантикалык жана бий жести жеке, бирок өз ара аракеттешкен процесстер катары каралуу ийгиликтүү болушу мүмкүн.

DuoGesture, анламı харекетле илиşкилендирен MGSC, каре дüзеыинде акış сеçими япан S-VIB ве ритмик харекети биёмеканик оларак юмуşатан IBP билеşенлерини бирлеşтириёр.

денеылер, моделин BEAT2 üзеринде даха дüşüк FGD деğерлери елде еттиğини, билеşенлерин бирбирини тамамладığıнı ве кулланıцıларıн üретилен харекетлери даха доğал булдуğуну гöстериёр.

Бул Эмне Үчүн Маанилүү?

Виртуалдык аватарлар жана жасалма интеллект каармандары күндөн-күнгө көбүрөөк тейлөөдө колдонулуп жатат: билим берүү, кардар кызматтары, оюндар, метавиртуалдык мейкиндик, санариптик терапиялар, тил үйрөнүү, мимикалык тилди колдогон системалар жана социалдык роботтор.

Бул системаларда туура үндү чыгаруу гана жетиштүү эмес. Дененин тили колдонуучунун ишенимине жана өз ара аракеттеги сапатына таасир этет.

Туура эмес убакта жасалган иш-арат, мааниси жок кол кыймылдары же титиреген дене анимациясы аватарды табигый болуудан алыстатат. Ошондуктан сүйлөшүү-жест чыгаруу жасалма интеллекттин адам менен өз ара байланышында маанилүү изилдөө аймагы болуп саналат.

DuoGesture’ин öнеми, жестлери ялнıзца харекет оларак деğил, илетиşимсел иşлевлери олан фарклı тüрлер оларак еле алмасıдıр. бу яклаşıм, гелецекте даха анламлı, даха ритмик ве даха икна едици дижитал карактерлер гелиşтирмек иçин бир ыöн гöстеребилир.

диккат едилмеси герекен нокталар

Бул жумуш кылдаттык менен окулууга тийиш.

Биринчи кезекте, иш алдын ала басылма болуп саналат. Анын илимий кароодон өткөнүн болжолдоп болбойт.

и̇кинци оларак, модел BEAT2 вери сети üзеринде тест едилмиşтир. фарклı диллер, кüлтüрлер, конуşма биçимлери ве беден дили нормларı иçин сонуçлар деğиşебилир.

üçüнцü оларак, MGSC öнцеден еğитилмиş метин-харекет темсиллерине даянıр. бу темсиллерин капсадığı вери ве оласı öняргıлар моделин харекет üретимини еткилеыебилир.

дöрдüнцü оларак, IBP даха çок кол зинцири ве беат харекетлери иçин тасарланмışтıр. тüм беден харекетлери, несне еткилеşимлери вея темас иçерен харекетлер иçин ыетерли олмаябилир.

беşинци оларак, FGD ве диğер метриклер фаыдалıдıр; анцак жестлерин илетиşимсел анламıнı ве кüлтüрел уыгунлуğуну тамамен öлçмез. бу ыüзден даха иыи анлам темелли деğерлендирме метриклерине ихтияç вардıр.

Акырында, бул модель чыныгы адамдын байланыштарын толук чагылдырбайт. Адамдын кыймылдары контекстке, маданиятка, ниетке, социалдык мамилеге жана жеке стилистикага жараша өзгөрөт.

Жыйынтык

. DuoGesture çалışмасı, конуşмаыла бирликте жест üретими иçин öнемли бир араşтıрма ыöнü сунуёр. модел, инсан жестлерини тек бир харекет акışı оларак гöрмек ыерине, семантик ве беат харекетлери аыıрıёр; сонра бунларı каре каре деğиşен бир капı меканизмасıыла бирлеşтириёр.

сонуçлар, бу яклаşıмıн BEAT2 вери сетинде даха герçекçи харекет даğıлıмı саğладığıнı, кулланıцıлар тарафıндан даха доğал алгıландığıнı ве билеşенлерин бирбирини тамамладığıнı гöстериёр.

Бул иш жасалма интеллект аватарларынын келечеги үчүн күчтүү идеяны эскертип турат:

Табигый дене тили жөн гана кыймылдоо эмес; туура учурда, туура ритмде жана туура мааниде кыймылдоо болуп саналат.

Булак жана ыкма эскертмеси

бу иçерик, фердинанд паар, ланмиао лиу, аслı öзыüрек, серге тхилл ве есам гхалеб тарафıндан хазıрланан “DuoGesture: неуро-инспиред анд биомечаницаллы информед дуал-стреам цо-спееч Gesture генератион” баşлıклı академик çалışмадан ярарланıларак Verianla едиторял форматıнда öзгüн оларак хазıрланмışтıр.

çалışма arXiv üзеринде яыıмланмış препринт нителиğиндедир. и̇çерик билгилендирме ве еğитим амацı таşıр. япаы зекâ аватар тасарıмı, клиник илетиşим, псиколожи, дил тераписи, инсан-робот еткилеşими вея професёнел анимасён üретими конусунда узман данışманлıк ыерине геçмез.