OPIOM Off-Processor IO with Myrinet

Geoffray, Patrick

doi:10.1016/s0129-6264(01)00055-5

Cited by 4 publications

(4 citation statements)

References 2 publications

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…A work close to ours is OPIOM (Geoffray, 2001;Bonhomme and Geoffray, 2000). It was designed for the implementation of a distributed video on demand server on a Myrinet cluster.…”

Section: Figure 6 Remote Read Data Path With Readsupporting

confidence: 59%

Parallel out-of-core sorting and fast accesses to disks

Cérin¹,

Cozette²,

Utard³

et al. 2005

IJHPCN

View full text Add to dashboard Cite

The paper addresses two problems. We investigate the problem of parallel external sorting in the context of a form of heterogeneous clusters then we investigate the impact of efficient disk remote accesses on the performance of external sorting. We explore three techniques to show how they can be deployed for clusters with proportional processor performances. We also validate the READ 2 library, an efficient implementation of remote SCSI disk accesses. We derive a new parallel sorting algorithm that is adapted to the READ 2 interface. The expected gain of using READ 2 is compared to the measured gain for one external sorting implementation.

show abstract

“…A work close to ours is OPIOM (Geoffray, 2001;Bonhomme and Geoffray, 2000). It was designed for the implementation of a distributed video on demand server on a Myrinet cluster.…”

Section: Figure 6 Remote Read Data Path With Readsupporting

confidence: 59%

Parallel out-of-core sorting and fast accesses to disks

Cérin¹,

Cozette²,

Utard³

et al. 2005

IJHPCN

View full text Add to dashboard Cite

show abstract

“…Numerous studies both in native [8,16] and virtualized environments [5,6,18,20,22,23,24,25,26,40] explore the implications of alternative data-paths that increase the system's I/O throughput, helping applications overcome significant bottlenecks in data retrieval from storage or network devices. However, near-native I/O performance for Virtual Machines (VMs) in a generic cloud environment, built from offthe-shelf components, is still far from being achieved.…”

Section: Introductionmentioning

confidence: 99%

“…Unfortunately, in the cloud context, I/O-intensive applications suffer from poor performance [22,33,40], due to various intermediate layers that abstract away the physical characteristics of the underlying hardware and multiplex the application's access to I/O resources. This limitation is one of the most important reasons that HPC applications are not widely deployed in virtualized environments [35].Numerous studies both in native [8,16] and virtualized environments [5,6,18,20,22,23,24,25,26,40] explore the implications of alternative data-paths that increase the system's I/O throughput, helping applications overcome significant bottlenecks in data retrieval from storage or network devices. However, near-native I/O performance for Virtual Machines (VMs) in a generic cloud environment, built from offthe-shelf components, is still far from being achieved.…”

mentioning

confidence: 99%

Xen2MX: High-performance communication in virtualized environments

Nanos

Koziris

2014

Journal of Systems and Software

View full text Add to dashboard Cite

“…Πολλές εργασίες σε φυσικά [11,24] και εικονικά [7,8,27,29,31,32,33,34,35,51] περιβάλλοντα ερευνούν τη δυνατότητα παράκαμψης των μονοπατιών δεδομένων που δημιουργούν αυτή την καθυστέρηση με σκοπό την αύξηση της επίδοσης της Ε/E, βοηθώντας τις εφαρμογές να παρακάμψουν τη συμφόρηση στην ανάκτηση/τοποθέτηση δεδομένων από/ προς συσκευές αποθήκευσης ή δικτύωσης. Παρόλα αυτά, σε εικονικό περιβάλλον, η επίδοση των συστημάτων E/E με συμβατικό υλικό, παρουσιάζεται σημαντικά μειωμένη σε σχέση με την αντίστοιχη σε φυσικό περιβάλλον.…”

Section: εισαγωγήunclassified

Αποδοτικός Διαμοιρασμός Πόρων Εισόδου / Εξόδου Σε Περιβάλλοντα Εικονικών Μηχανών

Νάνος¹

View full text Add to dashboard Cite

Οι υποδομές cloud computing προσφέρουν μεγάλη υπολογιστική ισχύ και φιλοξενούν ένα ευρύ φάσμα εφαρμογών που κυμαίνονται από υπηρεσιοστρεφείς εφαρμογές μέχρι επιστημονικές προσομοιώσεις υψηλών απαιτήσεων. Οι εφαρμογές υψηλών απαιτήσεων (HPC applications) συνήθως εκτελούνται κατανεμημένα, σε μεγάλο αριθμό κόμβων, με αποτέλεσμα η επικοινωνία μεταξύ των κόμβων να παίζει σημαντικό ρόλο στη συνολική επίδοση. Η εκτέλεσή τους σε εικονικά περιβάλλοντα προϋποθέτει την απαλοιφή των ενδιάμεσων επιπέδων του virtualization που προσδίδουν σημαντική επιβάρυνση τόσο στη ρυθμαπόδοση της επικοινωνίας όσο και στο χαμηλό χρόνο απόκρισης κατά την ανταλλαγή μηνυμάτων μεταξύ των κόμβων. Ταυτόχρονα, πρέπει να διατηρούνται τα πλεονεκτήματα του εικονικού περιβάλλοντος, όπως η ευελιξία στην εκτέλεση, το απομονωμένο περιβάλλον καθώς και η ευκολία στη διαχείριση των υποδομών. Οι σύγχρονες μέθοδοι για Είσοδο / Έξοδο σε εικονικά περιβάλλοντα είτε παρουσιάζουν μειωμένη επίδοση στην επικοινωνία, είτε απαιτούν εξειδικευμένο υλικό που πολυπλοκοποιεί τις υποδομές και μειώνει σημαντικά την ευελιξία στη διαχείρισή τους.Στην παρούσα εργασία παρουσιάζεται μια εκτενής μελέτη των μεθόδων Ε/Ε σε εικονικά περιβάλλοντα με έμφαση στη δικτυακή επικοινωνία. Αρχικά περιγράφουμε τις βασικές αρχές των σύγχρονων δικτύων διασύνδεσης υψηλής επίδοσης. Στη συνέχεια αναλύουμε τα επίπεδα του λειτουργικού συστήματος που λαμβάνουν μέρος στην ανταλλαγή μηνυμάτων και περιγράφουμε με λεπτομέρεια τις επιλογές για Ε/Ε σε πλατφόρμες virtualization. Με βάση τη σχετική βιβλιογραφία, που προτείνει κυρίως λύσεις λογισμικού, σχεδιάζουμε και υλοποιούμε το Xen2MX: ένα δίκτυο διασύνδεσης σχεδιασμένο να παρέχει επικοινωνία υψηλής επίδοσης σε εικονικά περιβάλλοντα. Το Xen2MX είναι πλήρως συμβατό με το Myrinet/MX, χωρίς να απαιτεί την ύπαρξη εξειδικευμένων προσαρμογέων δικτύου. Συνδυάζει τα χαρακτηριστικά διαμοιρασμού μνήμης της πλατφόρμας virtualization Xen, με τεχνικές επικοινωνίας μηδενικών αντιγράφων (zero-copy) για να παρέχει στις εικονικές μηχανές απευθείας πρόσβαση στο δίκτυο με το χαμηλότερο δυνατό χρόνο απόκρισης

show abstract

OPIOM Off-Processor IO with Myrinet

Cited by 4 publications

References 2 publications

Parallel out-of-core sorting and fast accesses to disks

Parallel out-of-core sorting and fast accesses to disks

Xen2MX: High-performance communication in virtualized environments

Αποδοτικός Διαμοιρασμός Πόρων Εισόδου / Εξόδου Σε Περιβάλλοντα Εικονικών Μηχανών

Contact Info

Product

Resources

About