Videobasierte Erfassung von Gestik und Mimik für die Gebärdenpracherkennung

基于视频捕获手势和面部表情以进行手语识别

基本信息

项目摘要

Gebärdensprachen stellen vollwertige lebendige Sprachen für die Kommunikation von und mit Gehörlosen dar. Die Vermittlung linguistischer Inhalte erfolgt dabei durch die Kombination von manuellen und nicht-manuellen Parametern. Leider werden Gebärdensprachen nur von wenigen Hörenden beherrscht. Daher kann die computergestützte Erkennung von Gebärdensprache in Anwendungen wie Übersetzungs- oder Lernsystemen als Hilfsmittel zur Integration von Gehörlosen in unsere vornehmlich aus Hörenden bestehende Gesellschaft eingesetzt werden. Ein System zur Erkennung der deutschen Gebärdensprache wird derzeit am LTI entwickelt. Es arbeitet mit einer Videokamera als Eingabegerät und farbig markierten Handschuhen zur Extraktion der manuellen Parameter. Erkannt werden ganze Gebärdensätze aus einem thematisch beschränkten Vokabular von 152 Gebärden mit einer Akkuratheit von 91,9%. Ziel ist die Erweiterung des existierenden Systems um ein größeres themenunabhängiges Vokabular, dessen Realisierung durch Gebärden-Untereinheiten -ähnlich den Phonemen in der Lautsprache - beabsichtigt ist. Ebenso wird die Interpretation der Mimik des Gebärdenden angestrebt, weil sich darüber wichtige sprachliche Inhalte codieren lassen. Desweiteren soll das System an die Bedingungen einer realistischen Umgebung angepaßt werden, um eine umgebungs-, benutzer- und hilfsmittelunabhängige Funktionalität zu gewährleisten.
Gebärdensprachen stellen vollwertige lebendige Sprachen für die Kommerkation von und mit Gehörlosen dar.通过手动和非手动参数的组合,可以实现吸入式语言学的验证。Leider韦尔登Gebärdensprachen努尔von wenigen Hörenden beherrscht. Daher kann die computergestützte Erkennung von Gebärdensprache in Anwendungen wie Übersetzungs- oder Lernsystemen als Hilfsmittel zur Integration von Gehörlosen in unsere vornehmlich aus Hörenden bestehende Gesellschaft eingesetzt韦尔登. Ein System zur Erkennung der deutschen Gebärdensprache wird derzeit am LTI entwickelt.这是一个视频摄像机的工作原理,它可以很大程度上标记手动参数的提取。韦尔登从一个主题中获得了152个Gebärden的全部Gebärdensätze,其中91.9%是Akkuratheit。Ziel ist die Erweiterung des Euntierenden Systems um ein größeres themenunabhängiges Vokelet,dessen Realisierung durch Gebärden-Untereinheiten -ähnlich den Phonemen in der Lautsprache - beabsichtigt ist.因此,我们需要对Gebärdenden angestrebt的模拟进行解释,因为它需要对吸入法进行编码。Desweiteren soll das System an die Bedingungen einer realistischen Umgebung angepaßt韦尔登,um eine umgebungs-,benutzer-and hilfsmittelunabhängige Funktionalität zu gewährleisten.

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Professor Dr.-Ing. Karl-Friedrich Kraiss其他文献

Professor Dr.-Ing. Karl-Friedrich Kraiss的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Professor Dr.-Ing. Karl-Friedrich Kraiss', 18)}}的其他基金

Sprecherunabhängige Gebärdenspracherkennung mit großem Vokabular auf der Basis von Untereinheiten-Modellen
基于子单元模型的大词汇量与说话人无关的手语识别
  • 批准号:
    13983024
  • 财政年份:
    2005
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Dynamische Einsatzsimulation kooperierender mobiler Roboter
协作移动机器人动态运行仿真
  • 批准号:
    5316018
  • 财政年份:
    2001
  • 资助金额:
    --
  • 项目类别:
    Priority Programmes
Bildgestütztes Training mobiler Service-Roboter in virtuellen Welten
虚拟世界中基于图像的移动服务机器人训练
  • 批准号:
    5311520
  • 财政年份:
    2001
  • 资助金额:
    --
  • 项目类别:
    Research Grants

相似海外基金

Entwicklung eines 3D-Modells zur Erfassung von Eigenspannungen in patientenspezifischen Arterienwänden
开发 3D 模型来记录患者特定动脉壁的残余应力
  • 批准号:
    223802515
  • 财政年份:
    2012
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Die Genauigkeit von selbsteingeschätzten Motivdispositionen: Erfassung von Prozessen, Moderatoren und Folgen für erfolgreiche Entwicklung
自我评估动机倾向的准确性:记录成功发展的过程、调节因素和后果
  • 批准号:
    200426114
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Erfassung von Anabolikamissbrauch mittels indirekter Parameter auf molekularer Ebene
使用分子水平的间接参数检测合成代谢类固醇滥用
  • 批准号:
    192188132
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Erfassung von Schläfrigkeit in funkverkehrgestützter Kommunikation: Sprachsignal-gestützte Mustererkennungsanalyse phonetisch-linguistischer Merkmale zum Aufbau eines automatisierten Schläfrigkeits-Detektionssystems
检测无线电支持的通信中的睡意:语音信号支持的语音语言特征模式识别分析,以构建自动睡意检测系统
  • 批准号:
    202574405
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Simulationsunterstützte Erstellung eines erweiterten Prozessmodells für das Unterpulverschweißen durch Kombination indirekter und direkter Erfassung von Schweißbadgeometrie und -dynamik
通过结合焊池几何形状和动态的间接和直接记录,在仿真支持下创建埋弧焊的扩展工艺模型
  • 批准号:
    197936001
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Faunistische und taxonomische Erfassung der Harpacticoidenfauna von Madeira sowie ein erster Vergleich mit Seebergen des "Madeira Hot Spot Tracks"
马德拉类动物群的动物学和分类学记录以及与“马德拉热点轨道”海山的首次比较
  • 批准号:
    183299939
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Validierung von Subtypen der Depression - Erfassung differentieller Regulationsmuster der Hypothalamus-Hypophysen-Nebennierenrinden (HHNA) - Achse sowie des Immunsystems bei melancholischer im Gegensatz zu atypischer Depression
抑郁症亚型的验证 - 记录忧郁症与非典型抑郁症下丘脑-垂体-肾上腺 (HHNA) 轴和免疫系统的差异调节模式
  • 批准号:
    211711872
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Aufbau des Dateninformationssystems für das GESEP Kern- und Probenlager zur Erfassung und Verwaltung von Bohrkernen und Nachweis der Bestände in einem Internetportal
开发 GESEP 岩心和样品存储设施的数据信息系统,以记录和管理钻岩心并在互联网门户中提供库存证据
  • 批准号:
    188417705
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research data and software (Scientific Library Services and Information Systems)
Die quantitative Erfassung des Einflusses der Begleitelemente und Erstarrungsbedingungen auf die Veredelung von AlSi7Mg Gusslegierungen
定量测定伴生元素和凝固条件对AlSi7Mg铸造合金细化的影响
  • 批准号:
    190053621
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Research Grants
Messsystem zur Erfassung von Fahrzeugradkräften
用于记录车轮力的测量系统
  • 批准号:
    201612940
  • 财政年份:
    2011
  • 资助金额:
    --
  • 项目类别:
    Major Research Instrumentation
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了