Moments analysis in Markov reward models

François Castella 1, 2 Guillaume Dujardin 1, 2 Bruno Sericola 3
1 IPSO - Invariant Preserving SOlvers
IRMAR - Institut de Recherche Mathématique de Rennes, Inria Rennes – Bretagne Atlantique
3 DIONYSOS - Dependability Interoperability and perfOrmance aNalYsiS Of networkS
Inria Rennes – Bretagne Atlantique , IRISA-D2 - RÉSEAUX, TÉLÉCOMMUNICATION ET SERVICES
Abstract : We analyze the moments of the accumulated reward over the interval (0, t) in a continuous-time Markov chain. We develop a numerical procedure to efficiently compute the normalized moments using the uniformization technique. Our algorithm involves auxiliary quantities whose convergence is analyzed, and for which we provide a probabilistic interpretation.
Type de document :
Rapport
[Research Report] PI 1869, 2007
Liste complète des métadonnées

Littérature citée [14 références]  Voir  Masquer  Télécharger

https://hal.inria.fr/inria-00182443
Contributeur : Anne Jaigu <>
Soumis le : mardi 13 novembre 2007 - 15:09:00
Dernière modification le : mardi 19 juin 2018 - 11:12:07
Document(s) archivé(s) le : mardi 21 septembre 2010 - 14:44:39

Fichiers

PI-1869.pdf
Fichiers produits par l'(les) auteur(s)

Identifiants

  • HAL Id : inria-00182443, version 2

Citation

François Castella, Guillaume Dujardin, Bruno Sericola. Moments analysis in Markov reward models. [Research Report] PI 1869, 2007. 〈inria-00182443v2〉

Partager

Métriques

Consultations de la notice

439

Téléchargements de fichiers

134