Large-scale software integration for spoken language and multimodal dialog systems

Abstract

The development of large-scale dialog systems requires a flexible architecture model and adequate software support to cope with the challenge of system integration. This contribution 1 presents a general framework for building integrated natural-language and multimodal dialog systems. Our approach relies on a distributed component model that enables flexible re-use and extension of existing software modules and is able to deal with a heterogeneous software environment. A practical result of our research is the development of a sophisticated integration platform, called MULTIPLATFORM, which is based on the proposed framework. This MULTIPLATFORM testbed has been used in various large and mid-size research projects to develop integrated system prototypes.

A Multilingual Dialogue System for Accessing the Web

“…Important improvements in the friendliness of the interaction have been achieved by expanding linguistic and conceptual coverage as well as by integrating different modes and languages. Examples of systems supporting multimodality and multilinguality are described in (Herzog et al, 2004) and (Gatius, 2001).…”

“…As mentioned in (Herzog et al, 2004), for such large DSs a distributed organization constitutes the natural choice to develop a flexible and scalable software architecture, able to integrate heterogeneous modules. Different approaches have been followed when developing a distributed DS.…”

Mapeamento semântico entre UNL e componentes de software para execução de requisições imperativas em linguagem natural

“…A possibilidade de acessar operações de um computador por meio da mesma língua utilizada na interação com outras pessoas, mesmo que de maneira restrita, tem motivado diversas pesquisas desde o final dos anos 70 (Ballard & Bierman, 1979;Cheyer & Martin, 2001;Tsai et al, 2003;Herzog et al, 2004;Ishida, 2006).…”

“…Alguns desses trabalhos são muito limitados porque as requisições de entrada devem ser feitas de forma algorítmica (Ballard & Bierman, 1979;Price et al, 2000). Mais recentemente, alguns trabalhos têm utilizado componentes ou agentes de software, relacionados a determinado domínio de aplicação, para conseguir um nível de abstração semântico mais elevado (Cheyer & Martin, Lucena et al, 2003;Tsai et al, 2003;Herzog et al, 2004;Ishida, 2006).…”

“…Nesses sistemas, requisições em um nível semântico mais elevado não são permitidas. Outros sistemas, assim como o trabalho descrito nesta tese, utilizam (2006), Herzog et al (2004), Bontcheva et al (2004), Singh et al (1995) e Guzzoni et al (1997). Entretanto, nesta seção serão descritos apenas os mais relevantes com relação a este trabalho que são o OAA (Open Agent Architecture) Lucena et al, 2003).…”