[Παράλληλα και Διανεμημένα Συστήματα] Εργασία 2 - 2019/20

[Thmmy.gr portal]

  Thmmy.gr portal
   Forum
   Downloads
   Ενεργ. Λογαριασμού
   Επικοινωνία
  
  Χρήσιμα links
   Σελίδα τμήματος
   Βιβλιοθήκη Τμήματος
   Elearning
   Φοιτητικά fora
   Πρόγραμμα Λέσχης
   Πρακτική Άσκηση
   Ηλεκτρονική Εξυπηρέτηση Φοιτητών
   Διανομή Συγγραμμάτων
   Ψηφιακό Καταθετήριο Διπλωματικών
   Πληροφορίες Καθηγητών
   Instagram @thmmy.gr
   mTHMMY
  
  Φοιτητικές Ομάδες
   ACM
   Aristurtle
   ART
   ASAT
   BEAM
   BEST Thessaloniki
   EESTEC LC Thessaloniki
   EΜΒ Auth
   IAESTE Thessaloniki
   IEEE φοιτητικό παράρτημα ΑΠΘ
   SpaceDot
   VROOM
   Panther
  

THMMY.gr Web

Helios_MultiScribbles2SMF Default ThemeSMFone_Blue

[Ανεβάζετε τα θέματα των εξετάσεων στον τομέα Downloads]

Είσαι πρωτοετής;... Καλώς ήρθες! Μπορείς να βρεις πληροφορίες εδώ. Βοήθεια για τους καινούργιους μέσω χάρτη.

Κατεβάστε εδώ το Android Application για εύκολη πρόσβαση στο forum.

Ανεβάζετε τα θέματα των εξετάσεων στον τομέα Downloads με προσοχή στα ονόματα των αρχείων!

[Admins]

Για αλλαγή του public name σας, επικοινωνήστε με έναν από τους Admins.

[karelisp]

Ο τρόπος που ενώνονται στο τέλος τα knnresult στον mpi tester, δουλεύει μόνο για την row Major υλοποίηση , ή κανω λάθος.

Έστειλα mail στον κ. Φλώρο και μου είπε ότι έχω δίκιο, θα το διορθώσει κι αυτό.

[dim2712]

Έχει βγάλει σε κανέναν ο tester failing at address nil
segmentation fault 11;
Είναι θέμα του tester καθώς δεν ξεκινάει καν το mpi programm παρα σκάει κατευθείαν. Δεν προλαβαίνει να φτάσει στις συναρτήσεις μου.
Είναι σίγουρο ότι τα send του στέλνουν οκ τα δεδομένα; Γιατί ανάλογα με τo implementation συμβαίνουν διάφορα από πισω αν δεν είναι συγκεκριμένα Ssend

[Patui]

 Συνανταει κανενας το αντιστοιχο ερρορ στον τεστερ του mpi ;
*** Process received signal ***
Signal: Aborted (6)
Signal code:  (-6)

[karelisp]

Συνανταει κανενας το αντιστοιχο ερρορ στον τεστερ του mpi ;
*** Process received signal ***
Signal: Aborted (6)
Signal code:  (-6)

Επιβεβαιώνω ότι παίρνω το ίδιο σφάλμα, για μικρά n και d, ενώ για μεγαλύτερα το πρόγραμμα φαίνεται να τρέχει για πάντα. Για κάποιο λόγο δεν γίνεται το MPI_Recv() νομίζω.

[Μπουγάτσας]

Μπορεί κάποιος που είναι σίγουρος να απαντήσει στο αν τα processes στέλνουν/λαμβάνουν μεταξύ τους το corpus(X) ή το query(Y) ;

[alekosts]

Εν τέλει πως κάνεις complile με mpicc και την cblas ; Κάνω εγκατάσταση την openblas(module load openblas)  χρησιμοποιώ το -lopenblas αλλα παίρνω το error που αναφέρθηκε προηγουμένως. (fatal error: cblas.h: No such file or directory)

[mano_lee]

Εν τέλει πως κάνεις complile με mpicc και την cblas ; Κάνω εγκατάσταση την openblas(module load openblas)  χρησιμοποιώ το -lopenblas αλλα παίρνω το error που αναφέρθηκε προηγουμένως. (fatal error: cblas.h: No such file or directory)

Sorry ξέχασα να γράψω τη λύση.

1) Κάνουμε module load gcc openmpi openblas όπως είπες
2) Κάνουμε το gcc έτσι: gcc -L$OPENBLAS_ROOT/lib -lopenblas code.c (ή mpicc αντίστοιχα)

Προσοχή όμως στο Makefile, όπου το -L$OPENBLAS_ROOT/lib πρέπει να γίνει -L$(OPENBLAS_ROOT)/lib αλλιώς νομίζω το βλέπει σαν μεταβλητή

P.S. Από το support του Αριστοτέλη μου είπαν να κάνω gcc -Ι$OPENBLAS_ROOT/include code.c, αλλά εμένα δούλεψε όπως το περιέγραψα παραπάνω

[mano_lee]

Μπορεί κάποιος που είναι σίγουρος να απαντήσει στο αν τα processes στέλνουν/λαμβάνουν μεταξύ τους το corpus(X) ή το query(Y) ;

Επειδή έχω την ίδια απορία, αναδιατυπώνω μήπως κάποιος μπορεί να απαντήσει σε αυτό:

Το κάθε process, θα επιστρέψει τους kNN όλου του corpusAll από το corpus που του στέλνουμε, η τους kNN του corpus που του στέλνουμε από όλο το corpusAll?

[pesto80]

Επειδή έχω την ίδια απορία, αναδιατυπώνω μήπως κάποιος μπορεί να απαντήσει σε αυτό:

Το κάθε process, θα επιστρέψει τους kNN όλου του corpusAll από το corpus που του στέλνουμε, η τους kNN του corpus που του στέλνουμε από όλο το corpusAll?

φιλε μου, εγω καταλαβαινω οτι θα επιστρεφει τους knn του corpus που του στειλαμε (σταθερο) πανω στο corpusAll (το οποιο θα περασει σε κομματια πανω στο υπαρχον process)

[thanosthehuge]

Στον υπολογιστή μας θα έπρεπε να βλέπουμε κάποια βελτίωση όταν κρύβουμε τις επικοινωνίες (async), ή αυτό γίνεται φανερό μόνο όταν το δοκιμάσουμε στη συστοιχία???

[Patui]

Ο τελικος πινακας του corpusAll , θα πρεπει να εχει p φορες το result της distrAll ? Με τα indexes τι ακριβως γινεται ; Παιρνουμε σαν αναφορα του local corpus αναλογα με το taskid ;

[alekosts]

Στο bash script για την υποβολή στον server, σας τρέχει με το #SBATCH --partition=batch ή πρέπει να το σβήσουμε;

[Μπουγάτσας]

Ο τελικος πινακας του corpusAll , θα πρεπει να εχει p φορες το result της distrAll ? Με τα indexes τι ακριβως γινεται ; Παιρνουμε σαν αναφορα του local corpus αναλογα με το taskid ;

Ο corpusAll νομίζω απλά έχει όλα τα σημεία που μοιράστηκαν στα processes. Το αποτέλεσμα του κάθε distrAll επιστρέφεται και συνδέεται στο process 0 στο knnresall αν θυμάμαι καλά που είναι και το τελικό αποτέλεσμα.
Για τα indexes πρέπει κάθε φορά να ξες ποιο μπλοκ επεξεργάζεται από πιο προσες έτσι ώστε να γίνει ο σωστός μετασχηματισμός.

[dim2712]

δεν χρησιμοποιούμε το batch εχουμε dedicated partition τσέκαρε elearning
Επίσης για mpi χρησιμοποιείτε srun που λέει η κανονικά mpirun;

[mano_lee]

δεν χρησιμοποιούμε το batch εχουμε dedicated partition τσέκαρε elearning
Επίσης για mpi χρησιμοποιείτε srun που λέει η κανονικά mpirun;

Νομίζω srun καλύτερα γιατί παίρνει τα ορίσματα που δίνεις στην αρχή του batchfile (για nodes και cores).