Analyzing Software Updates: Should You Build a Dynamic Updating Infrastructure?

Abstract

Abstract. The ability to adapt software systems to fix bugs, add/change features without restarting is becoming important for many domains including but not limited to finance, social networking, control systems, etc. Fortunately, many ideas have begun to emerge under the umbrella term "dyanamic updating" to solve this problem. Dynamic updating is critical to address certain software evolution needs. Dynamic updating literature evaluates such systems in terms of coverage (i.e. what type of code changes are supported) and performance. However, we do not have a technique to analyze whether certain updating solution, based on its costs and benefits, is suitable for an application.In this paper, we present a quantitative analysis model to fill this gap. Our model is parameterized and it can be instantiated with application-specific valuation functions. Given the software evolution history of the application under consideration, our model allows rigorous comparisons of the value of different software updating schemes (e.g. online vs. offline). We illustrate our model using two case studies inspired from the the evolution history of Xerces XML parser library and Apache httpd web server. Other case studies and evaluation examples are presented in our technical report [Gharaibeh, Rajan and Chang 09]. The proposed analysis scheme can serve system architects in evaluating their current updating scheme. For example, to audit the system's value during previous development cycles and whether a different updating scheme will generate higher value.

Dynamic software updating: a systematic mapping study

“…Moreover, number of authors have demonstrated other 15 evaluation metrics including availability metrics [6, 37 ], memory usage [41, 136 ], number of violations [77, 81 ], memory footprint [22, 77 ], energy cost [54, 106 ], update cost [63 ], clock cycles for DSU model [93 ], duration of time‐division multiplexing slot in multiprocessor [133 ], measuring the impact changes on resource demands [41 ], patch size [14 ], number of errors [90 ], success‐rate [35 ], simulation of two threads to measure the number of accepted and/or rejected update requests in different workloads [134 ], run the old version in a standard JVM (Java Virtual Machine) to record some performance metric as a baseline [87 ], and before/during/after the update measures [65 ].…”

Um Estudo Sobre Atualização Dinâmica De Componentes De Software

“…Para mensurar o potencial benefício do uso do mecanismo utilizamos o modelo de avaliação quantitativo proposto em [5], que leva em consideração a sobrecarga de processamento do mecanismo, os benefícios das atualizações e o tempo que o serviço fica indisponível no caso da atualização estática.…”

“…Detalhando a arquitetura do sistema de componentes SCS e os primeiros esforços de atualização dinâmica implementados para ele; o capítulo 3 descreve o mecanismo de atualização dinâmica implementado para permitir a aplicação das atualizações propostas; o capítulo 4 se aprofunda nos detalhes do estudo do OpenBus, os principais tipos de atualizações e as versões utilizadas para a atualização; o capítulo 5 apresenta os experimentos feitos com o mecanismo para demonstrar sua expressividade, medir a sobrecarga de processamento e utiliza um modelo de avaliação quantitativo [5] para validar o uso da atualização dinâmica no sistema estudado; o capítulo 6 apresenta os trabalhos relacionados de atualização dinâmica e faz uma avaliação comparativa do mecanismo implementado com as abordagens apresentadas nos trabalhos relacionados, utilizando o arcabouço de avaliação gerado a partir do OpenBus; por fim, o capítulo 7 apresenta o resumo da avaliação, as considerações finais, consolida as contribuições e sugere alguns trabalhos futuros que darão continuidade ao estudo.…”

“…Avaliamos primeiro a expressividade das interfaces oferecidas pelo mecanismo aplicando as atualizações do OpenBus. Avaliamos depois o desempenho da implementação com testes de sobrecarga e o uso do modelo de avaliação quantitativo [5] e validamos o uso da atualização dinâmica no sistema estudado.…”

“…Existem poucas avaliações que consideram os benefícios das atualizações dinâmicas. O modelo de avaliação quantitativo proposto por Gharaibeh et al [5] foi criado para suprir uma demanda de avaliação complementaràs avaliações tipicamente feitas em sistemas de atualização dinâmica. Esse modelo traz uma opção de avaliar se o benefício de atualizar dinamicamente justifica o custo da perda de desempenho que o mecanismo possa trazer.…”