Studies in Social Sciences have revealed that when people evaluate someone else, their evaluations often reflect their biases. As a result, rater bias may introduce highly subjective factors that make their evaluations inaccurate. This may affect automated essay scoring models in many ways, as these models are typically designed to model (potentially biased) essay raters. While there is sizeable literature on rater effects in general settings, it remains unknown how rater bias affects automated essay scoring. To this end, we present a new annotated corpus containing essays and their respective scores. Different from existing corpora, our corpus also contains comments provided by the raters in order to ground their scores. We present features to quantify rater bias based on their comments, and we found that rater bias plays an important role in automated essay scoring. We investigated the extent to which rater bias affects models based on hand-crafted features. Finally, we propose to rectify the training set by removing essays associated with potentially biased scores while learning the scoring model.
This paper presents a different approach to projection rules between a syntactic structure and a conceptual semantic structure. The approach is different in the sense that, to propose those rules, also known as Thematic Hierarchy Principle, I deal only with four semantic properties trigger, affected, state, and control and their combinations. Besides, the projection rules are not constructed by thematic roles as is usual in the current literature. Differing from other proposals, the localization of an argument in a specific syntactic position is due to the property that composes the thematic role (and not to the thematic role per se). Thematic roles here are defined as a set of semantic properties, assigned to a certain argument, derived from the entailments established for the whole proposition where this argument is located. KEY-WORDS: arguments; adjuncts; semantic properties; projection rules. RESUMO:Este artigo apresenta uma diferente abordagem para as regras de projeção da estrutura semântica conceitual sobre a estrutura sintática. A abordagem é diferente no que diz respeito à utilização de somente quatro propriedades semânticas desencadeador, afetado, estativo, controle e suas combinações para a elaboração dessas regras de projeção, também conhecidas como Princípio da Hierarquia Temática. Além disso, as regras não são elaboradas com papéis temáticos, como o usual na literatura. Diferentemente de outras propostas, a localização de um argumento em determinada posição sintática se deve à propriedade que compõe o papel temático (e não pelo papel temático per se). Papéis temáticos são definidos como um grupo de propriedades atribuídas a um determinado argumento a partir dos acarretamentos estabelecidos por toda a proposição em que esse argumento encontra-se. PALAVRAS-CHAVE: argumentos; adjuntos; propriedades semânticas; regras de projeção.* Este artigo é uma reformulação parcial das propostas de Cançado (2003a e b), introduzindo a revisão de alguns conceitos teóricos fundamentais. ** Agradeço o apoio financeiro do CNPq. (mailto:mcancado@ufmg.br).
E ssa mesa redonda apresenta uma característica um pouco diferente de outras, não tendo como objetivo o debate sobre um tema. A diretoria do CELSUL convidou-nos a fazer dessa mesa uma homenagem ao saudoso mestre Carlos Franchi. Foi com muita honra que aceitamos esse convite, tentando fazer desse encontro um momento de boas memórias e boas reflexões lingüísticas, que, como os que conheciam o professor sabem, era a marca principal de Franchi.Ao discutirmos o formato que teria essa homenagem, chegamos à conclusão que não caberia simplesmente falarmos sobre as idéias de Franchi, mesmo porque, correríamos o risco de não estarmos sendo fiéis a suas propostas tão brilhantemente elaboradas. Decidimos que a melhor homenagem que poderíamos prestar a Franchi seria mostrarmos como a convivência com ele e suas idéias foram tão producentes e de que maneira influenciaram nossos trabalhos. Pelo formato de uma mesa redonda, fomos obrigados a delimitar um número de três pessoas para prestar essa homenagem. Mas, certamente, muitos * O artigo aqui apresentado é uma versão resumida do artigo "Um estatuto teórico para os papéis temáticos", a ser publicado em Tópicos em semântica, obra organizada por Ana Lúcia Muller, Esmeralda Negrão e Maria José Foltran. Agradeço a Mark Baker e a Jane Grimshaw pelas discussões sobre o assunto. O desenvolvimento desta pesquisa conta com o apoio financeiro do CNPq (e também da Capes, durante o período do meu pós-doutoramento), por meio da bolsa
This paper presents a descriptive analysis of the psychological verbs in Brazilian Portuguese. A new classification for these verbs is proposed: in the current literature we find two classes of psychverbs; I propose four different classes based on a fine-grained approach of thematic relations. AIso, I make a thorough revision of many syntactic and semantic properties of psych-verbs. Accorcling to this analysis, I present some clues towards a semantic approach to the problems related to those verbs. As there are interesting questions related to psych-verbs conceming the organization of argument structure, I hope the data presented are useful to other researchers from different lines, working with Brazilian Portuguese.
scite is a Brooklyn-based organization that helps researchers better discover and understand research articles through Smart Citations–citations that display the context of the citation and describe whether the article provides supporting or contrasting evidence. scite is used by students and researchers from around the world and is funded in part by the National Science Foundation and the National Institute on Drug Abuse of the National Institutes of Health.
hi@scite.ai
10624 S. Eastern Ave., Ste. A-614
Henderson, NV 89052, USA
Copyright © 2024 scite LLC. All rights reserved.
Made with 💙 for researchers
Part of the Research Solutions Family.