|
Title: Πως παίζει μουσική ένα Geek??? Post by: dim on December 18, 2008, 06:55:32 am The reactable is a collaborative electronic music instrument with a tabletop tangible multi-touch interface. Several simultaneous performers share complete control over the instrument by moving and rotating physical objects on a luminous round table surface. By moving and relating these objects, representing components of a classic modular synthesizer, users can create complex and dynamic sonic topologies, with generators, filters and modulators, in a kind of tangible modular synthesizer or graspable flow-controlled programming language.
reacTIVision is an open source, cross-platform computer vision framework for the fast and robust tracking of fiducial markers attached onto physical objects, as well as for multi-touch finger tracking. It was mainly designed as a toolkit for the rapid development of table-based tangible user interfaces (TUI) and multi-touch interactive surfaces. Περίεργο? Το χρησιμοποιεί και η Bjork :P (http://mtg.upf.es/reactable/pics/xavi06.jpg) https://www.youtube.com/watch?v=vm_FzLya8y4 https://www.youtube.com/watch?v=MHeX6yg95xU http://mtg.upf.es/reactable/?media (http://mtg.upf.es/reactable/pics/reactivision03.png) Title: Re: Πως παίζει μουσική ένα Geek??? Post by: Optima on December 19, 2008, 02:35:46 am τι ειναι τα fiducial markers?μήπως μπορείς να εξηγήσεις με λίγο πιο απλά λόγια πώς λειτουργεί(το σχήμα) :???:
ενδιαφέρον φαίνεται Title: Re: Πως παίζει μουσική ένα Geek??? Post by: dim on December 19, 2008, 03:15:36 am Τα fiducial markers είναι κάποια σημαδάκια-patterns, το κάθε ένα απ'τα οποία διαφέρει από τα άλλα, οπότε μπορείς να πεις ότι έχει μοναδικό ID..
Είναι βασικό συστατικό των augmented reality συστημάτων, και χρησιμοποιήθηκαν γιατί το κομμάτι της αναγνώρισης με computer vision είναι πιο εύκολο με αυτά τα σημαδάκια (είναι binary, είτε μαύρο είτε άσπρο, 0 και 1) (υπάρχει η τάση να εγκαταλειφθούν τώρα όπου αυτό είναι δυνατό..) Υπάρχουν διάφορα είδη, κάθε ένα απ' τα οποία έχει τα υπέρ και τα κατά του.. (http://studierstube.icg.tu-graz.ac.at/handheld_ar/images/stbtracker_benchmark.png) (http://studierstube.icg.tu-graz.ac.at/handheld_ar/images/stbtracker_datamatrix_01.jpg) Κάποια είναι λιγότερο intrusive ("μολύνουν" οπτικά το περιβάλλον σε μικρότερο βαθμό), όπως το παρακάτω, στο οποίο χρησιμοποιούμε πληροφορία μόνο απ'το περίγραμμα, ενώ το κέντρο είναι είτε τρύπιο είτε μπορείς πχ να βάλεις φωτογραφία κ τέτοια (http://studierstube.icg.tu-graz.ac.at/handheld_ar/images/stbtracker_framemarker_01.jpg) Αφού γίνει η αναγνώριση του ID, κάνεις ό,τι θες, σε μία εφαρμογή παίζεις ήχο, σε άλλη κάνεις render γραφικά όπως στην τελευταία εικόνα κτλ --- Εδώ τώρα, για να παίζεις μουσική πρέπει το σύστημα του υπολογιστή να κάνει την ανάγνωση-αναγνώριση πάρα πολύ γρήγορα, ώστε να βλέπει ποια σημάδια είναι πάνω στο τραπέζι, αλλά και τη σχετική τους θέση.. Οπτική αναγνώριση γίνεται και στο δάχτυλο.. Ακουμπώντας το δάχτυλο στο τραπέζι, αυτό από κάτω φαίνεται σαν μία κουκκίδα, οπότε έχεις να αναγνωρίσεις μία μαύρη κουκκίδα δίπλα από ένα σημαδάκι, και τον τρόπο με τον οποίο κινείται γύρω από αυτό, ώστε να έχεις την κατάλληλη αυξομείωση της έντασης ή του εφφέ κτλ ----- Πιο γενικά τώρα.. Το τραπέζι είναι περίπου όπως το θέατρο σκιών.. Πάνω στο πανί βάζεις τα σημαδάκια, και αλληλεπιδράς και με το δάχτυλο.. Από κάτω υπάρχει μία λάμπα για φωτισμό, ένα projector για να σχηματίζει τις γραμμούλες-εφφέ που βλέπεις στο τραπέζι, και μία κάμερα που κάνει την αναγνώριση των markers και των δαχτύλων.. Η εικόνα που συλλαμβάνει η κάμερα πηγαίνει στο κομμάτι που λέγεται reacTIVision, και που είναι υπεύθυνο για την οπτική αναγνώριση, και είναι open source.. Το σύστημα με τα συγκεκριμένα σημαδάκια ξεκίνησε απ' το media lab του MIT, αργότερα νομίζω εξελίχθηκε στην Ισπανία.. Το αποτέλεσμα πάει σε ένα άλλο softwarκό κομμάτι, το TUI application, που στέλνει το κατάλληλο σήμα στον προτζέκτορα για το visual feedback, και κάνει κ τη βρώμικη δουλειά σχετικά με τον ήχο.. :) Title: Απ: Πως παίζει μουσική ένα Geek??? Post by: Tonia on February 08, 2009, 11:16:52 am psss ρε dim εγραψες παλι
|