THMMY.gr

 Το τόπικ αυτό προορίζεται αποκλειστικά για ερωτήσεις και ανακοινώσεις που αφορούν τις εργασίες του μαθήματος το ετος 2012 - 2013.

Οτιδηποτε ασχετο θα διαγραφεται.

Ας κάνω την αρχή, μήπως και μπορέσει κανείς να βοηθήσει.
Για να επιλέξουμε τα χαρακτηριστικά ενός αλγορίθμου πρέπει να τρέξουμε στο experimenter (π.χ. τον ΚΝΝ με Κ 3 και 5) και μετά να δουμε ποιό είναι καλύτερο??
Και φυσικά αυτό πρέπει να το κρατήσουμε ως output για να το παραδώσουμε?

loipon.....ean yparxei kapoia karypidou xristina pou parakolouthei to topic as mou steilei pm...proton kai deuteron ean exei kapoios to mail tis as mou steilei kai autos

παιδια οταν <<Επιλέξτε τουλάχιστον τρεις τεχνικές ταξινόμησης (Δένδρα, Πιθανοτικούς, Νευρωνικά, SVMs, NNs), και δυο αλγορίθμους από κάθε τεχνική>> εννοει  τον k-nn αλγοριθμο???


εδιτ: καταλαθος απαντησα μεσα στο ποστ σου  :P

Εννοει 6 αλγοριθμους. Αυτα μεσα στις παρενθεσεις ειναι οι κατηγοριες αλγοριθμων και θελει 2 αλγοριθμους απο 3 κατηγοριες. Ο Κ-ΝΝ ειναι ενας απο τους ΝΝ. Θα δεις στο weka εχει τις κατηγοριες και τους αλγοριθμους. Βεβαια καποιοι απο τους αλγοριθμους που καναμε εχουν αλλα ονοματα στο weka googlαρε να βρεις τι ειναι τι.

Aσχολειται κανεις?

Πως τρεχετε τα πειραματα 1-1 στο Explorer ή ολα μαζι στο Experimenter?

Εγω προσπαθω να τρεξω στον Explorer ολα τα datasets μαζι για κανα 2 αλγοριθμους αλλα για καποιο λογο φαινεται οτι τρεχει μονο 2/8 datasets. Τι διαολο?

Καλό θα ήταν να τρέξουμε ένα ένα τα πειράματα για να αποθηκεύσουμε και τα outputs... Σε πρώτο στάδιο θα ήταν καλό να τρέξουμε διαφορετικούς αλγορίθμους με διαφορετικές παραμέτρους, για να δούμε ποιοι θα ήταν καλό να χρησιμοποιηθούν..
Προσωπική άποψη πάντα...
και μία συμβουλή, μην βάλετε στον experimenter το dataset 5ruby, επειδή έχει διαφορετική σειρά των attributes, οπότε με τη μία θα βγάλει σφάλμα..
@Grecs μάλλον γι αυτό δεν σου τα τρέχει όλα normal και σε πετάει

Οχι ρε το 5ruby το εκανα edit μεσω Explorer και το ξαναποθηκευσα βαζοντας το bugs στο τελος, οποτε δεν χτυπαει ερορ.

Ο Experimenter δειχνει να τρεχει κανονικα για ολα τα datasets αλλα για καποιο λογο στα αποτελεσματα εμφανιζει μονο τις συγκρισεις 2 datasets.

Re paidia pao na kano tin askisoula me ta iris sepalbliet klp kai ston experimenter kano run kai trexei, kai meta pao sto analyze kai mou leei oti to arxeio irisResults.csv den anagnorizetai san arxeio csv..... dafuq? To exei kanei kaneis? 

Stin arxi exo kanei to result destination CSV file gia na prolabo merikous pou tha to paratirisoun.

αν θέλεις να κάνεις analyze το πείραμα που έχεις μόλις τρέξει τότε στο analyze πάτα απλά experiment.
αν θέλεις να σώσεις το πείραμα σου σε αρχείο και να το κάνεις μετά analyze φορτώνοντας το, τότε σώσε το ως .arff και είσαι κομπλέ

Αν και δεν είμαι σίγουρος αν είμαι στο κατάλληλο topic περνάω στο ψητό και λέω αυτό που θέλω να πω,
 Ψάχνω το έτερον ήμισυ της ομάδας μου (20), οπότε αν το δει ας προσπαθήσει να έρθει σε επαφή.
    Αν πάλι δεν το δει, είναι ο Αθανάσιος Τ. οπότε αν τον γνωρίζει κάποιος ας τον ενημερώσει.

Το προβλημα μου το λυσε συναδερφος. Ανοιγετε  ολα τα dataset me notepad και 1η σειρα εχει σε ολα πχ.
@relation ' tickets-weka.filters.unsupervise μπλα μπλα'

Αναμεσα στο tickets και την αποστροφο μπορειτε να βαλετε το ονομα του αρχειου ή οποιοδηποτε tag ωστε να διαφοροποιηθουν τα dataset και να τα αναγνωριζονται ως διαφορετικα. Save και ετοιμοι.

Να ρωτήσω κάτι?
Πάω από την επιλογή clusterer να επιλέξω τον simpleKmean

και μου τον έχει με αχνή γραφή και μετά δεν μπορώ να επιλέξω το start.
γιατί γίνετε αυτό?

Και γιατί θέλεις να κάνεις clustering;

Καταρχας τα τρεχεις στο Classify. Και στο παραθυρο που διαλεγεις αλγοριθμο πατα remove filter. Κατα πασα πιθανοτητα ομως δεν θα σου τρεξει και θα βγαλει ερρορ.

ΥΓ απο το ερορ θα καταλαβεις ισως τι παει στραβα

ρε παιδια εκτος απο IBk και IB1 μπορειται να μου πειτε καποιον αλλο αλγοριθμο nearest neighbor.
Επισης ξερει κανεις σε ποια κατηγορια εμπιπτουν οι oneR και zeroR??

giati den ksero to programma kai thelo na to dokimaso

Παιδιά, είναι ιδέα μου ή δεν έχει 2 αλγόριθμους από κάθε κατηγορία?? Πχ για νευρωνικά ή SVM βλέπω μόνο έναν στο καθένα :D :D...

Ποιοι είναι Neural Networks    ??
Ποιοι είναι SVM                    ??

https://www.google.gr/search?q=Neural+networks+in+weka&aq=f&oq=Neural+networks+in+weka&aqs=chrome.0.57j0l2j62l3.9871&sugexp=chrome,mod=18&sourceid=chrome&ie=UTF-8

Υπάρχει άνθρωπος που ασχολείται ή ασχολήθηκε με την εργασία με το WEKA....

 Προσκεκλημένη ομιλία στα πλαίσια του μαθήματος - Δευτέρα 21/1....

2 Ιαν 2013 1:23 μμ
Συμεωνίδης

Στα  πλαίσια  του  μαθήματος,  θα  δοθεί  προσκεκλημένη    ομιλία    από  τον  Δρ.    Ιωάννη    Κομπατσιάρη,  Ερευνητή  του  Ινστιτούτου  Πληροφορικής  και  Τηλεματικής,  όπου  και  θα  συζητηθούν  εφαρμοσμένα  θέματα  Αναγνώρισης  Προτύπων  και  σχετικές  καινοτομίες.

Η  ομιλία  θα  δοθεί  τη  Δευτέρα  21/1,    4-6μμ,    στην    Αίθουσα    7.
Η    παρουσία    όλων    κρίνεται    σημαντική    (εώς    υποχρεωτική    :-)    )!

   

Εργασία 2η - Παράταση υποβολής....

2 Ιαν 2013 1:16 μμ
Συμεωνίδης

Καλησπέρα  και  καλή  χρονιά  σε  όλους.
Μετά  από  αίτημα  πολλών  συναδέλφων  σας,  η  παράδοση  της  2ης  εργασίας  παρατείνεται  μέχρι  και  τη  Δευτέρα,  14/1.

Παρακαλώ  να  ενημερώσετε  τους  συναδέλφους  σας. 

Εμείς έχουμε ξεκινήσει δειλά-δειλά να επεξεργαζόμαστε το dataset.Έχω την εξής απορία: Όταν λέει "Ιδιαίτερη σημασία έχει να μπορείτε να αναγνωρίσετε τη συμπεριφορά κατανάλωσης σε χρονικές ζώνες της ημέρας και σε εποχές", σημαίνει ότι πρέπει π.χ. να χωρίσουμε το dataset στα 4 (ένα χειμερινό,ένα καλοκαιρινό κλπ) και να ομαδοποιήσουμε το κάθε υπο-dataset ξεχωριστά?Δηλαδή θέλει άλλα αποτελέσματα για την κατανάλωση του καλοκαιριού,άλλα για τον χειμώνα,άλλα για το φθινόπωρο και άλλα για την άνοιξη?

Φαντάζομαι πω ναι!!

Να ομαδοποιήσετε τα καταστήματα με βάση τα χαρακτηριστικά τους.


Ti tha pei afto? Diladi me basi ti tha ta omadopoiisoume?  An katalaba kala mporoume na kanoume omadopoiisi me basi apeirous tropous.

Posi katanalosi exei to kathe magazi kata meso oro olo to xrono otan leitourgei?.( to pio logiko)

Posi katanalosi exei ana 8oro i ana epoxi?

An leitourgei olo to 24oro?

An leitourgei tis kiriakes? to kalokairi? bla bla bla.....

Pos to katalabainete?

την έχει προχωρήσει κανείς την εργασία?
Αν ναι, ας μοιραστεί τη σοφία του με εμάς.

Ο Συμεωνίδης είπε ότι τις ζώνες ώρας της ημέρας και της εποχές θα τις χωρίσουμε εμείς από την αρχή.
Αφού δούμε λίγο τα διαγράμματα των μαγαζιών.

Από εκεί και μετά όμως τους αλγορίθμους σε τι μεταβλητές τους εφαρμόσατε?
2-D ή 3-D? και ποιες?

δεν πρέπει να έχουμε γενικά στον ένα άξονα τα μαγαζιά για να ξέρουμε ποιο ομαδοποιείται με ποιο?

Πολυ φοβαμαι οτι δεν εχει κανεις ιδεα

Μήπως έβγαλε κανείς άκρη πως θα γίνει περίπου το θεματάκι???
Τελικά χρειάζεται να χωρίσουμε το dataset σε περισσότερα, να βγάλουμε avg, max, sum, να ομαδοποιήσουμε τις εγγραφές ανάλογα με την εποχή ή τις ώρες??? τι από όλα αυτά???? Άντε γιατί θα τρελαθούμε :D :D :D

Ναι, μάλλον αυτό θέλει. Ό,τι εποχές και ό,τι ωράρια γουστάρεις παίρνεις.

δηλαδή θα πρέπει να επιλέξουμε π.χ. μία εποχή  και μετά να προσθέσουμε και τις τιμές για αυτές τις μέρες?
σε φάση να έχουμε στο τέλος μόνο 49 εγγραφές όσες και τα καταστήματα???
αυτό δεν έχω καταλάβει ακόμη..

I etsi i mporeis na theoriseis oti exeis polla antikeimena  kai na kaneis omadopoiisi se afta kai meta na deis se ti omada omadopoiountai ta perisotera antikeimena tou kathe magaziou.

exei asxolithei kapoios me tin deuteri me to weka???

Enas mou eipe oti doulepse weka , leptomereies den ksero alla ego pou to eida oi pio poli algorithmoi den douleban i ebgazan oti na nai clusters. Episis aftoi pou douleban den exo idea pou katatasontai.

μπορεί κάποιος να μου εξηγήσει γιατί υπάρχουν αρνητικές τιμές κατανάλωσης?
πρέπει να τις αφαιρέσω?

Το λεει νομιζω, δουλευουν σαν γεννητριες.

Parexoun energeia sto diktio, diladi ena magazi mporei na exei mia paragogi energeias pou doulebei oli mera kai otan afto einai kleisto na dinei energeia sto diktio.

Tora to an tha to afereseis i tha to afiseis einai ipokeimeniko, mporeis na theoriseis oti einai simantiki pliroforia i na peis oti me endiaferei mono i katanalosi, pistebo pos an to ipostirikseis tha to dextei sosto kai to ena kai to allo.

sto proto bima prepei na kanoume katharismo ton apotelesmaton....komple.... sto deutero kanoume mia proti omadopoiipi kai sto trito apo ta apotelesmata tou bimatos 2 dioxnoume tis eksokeimenes times??

Yes it is.

Οποιονδήποτε αλγόριθμο θέλουμε εμείς χρησιμοποιούμε στο βήμα 2.....

Proteinete knn alla mporeis kai me allo (entaksi re marie diafase ligo kai tin ekfonisi :P  rtfm )

να ρωτησω κ εγω κατι.. πηρα τ αρχειο π μας ειχε δωσει και κρατησα απο αυτο καποιες ωρες λειτουργιας των καταστηματων(8-20) και απο αυτο το σετ το χωρισα σε εποχες (καλοκαιρι-χειμωνα...) και βρηκα max,avg,sum για τ καλοκαιρι απο τις 8-12,13-17,16-20(δλδ χωρισα το 8-20 σε 3 ομαδες πρωι,μεσημερι,βραδυ).καταρχας ειναι σωστο για τ α,β μερος της ασκησης και επισης οταν μας λεει να διωξουμε τις εξωκειμενες τιμες σε ποιο σετ δεδομενων θ τ υλοποιησω?

Στο εκάστοτε σετ που μελετάς.

δλδ εννοεις πως ετσι οπως τ εφτιαξα θα εχω ενα σετ δεδομενων γ τους μηνες τ καλοκαιριου απο τις 8-12 μαζι μ τ max,avg,sum που εχω βρει γι αυτο και το αντιστοιχο για τις υπολοιπες ωρες και εποχες?

Ναι!

σε ευχαριστω. εκει π λεει κάντε αποτίμηση της ποιότητας της ομαδοποίησής σας με βάση τις εσωτερικές μετρικές αξιολόγησης (SSE, Cohesion, Separation, Silhouette) τι ειναι αυτο??εννοω τα εχω κανει cluster με καποιυς αλγοριθμους αλλα αυτες τις πληροφοριες πως τις περνω?

Πέρα από kmeans και ιεραρχικό ποιους άλλους αλγορίθμους χρησιμοποιήσατε και που τους βρήκατε? :D

στη matlab, αλλάζεις τις παραμέτρους του linkage.

για καν' το λίγο λιανά και σε μας τους άσχετους... ;D

Ναι, αυτό είναι για ιεραρχικούς. Απ'τις άλλες κατηγορίες;

το ερωτημα με την αξιολογηση πως τ κανατε?

Πες μας πως έκανες το προηγούμενο ερώτημα να σου πούμε πως θα κάνουμε το επόμενο!

Για Silhouette πάντως βοηθάει το pdf που κάναμε και στο εργαστήριο.

με ανταλλαγες παει?

Όχι ρε, ας κάνει ο καθένας την ερώτηση του και ενώ έχει κάνει τα προηγούμενα να μη βοηθάει σε άλλες ερωτήσεις. Seems legit.

αν μπορεί κάποιος ας εξηγήσει πώς θα φύγουν οι εξωκείμενες τιμές... υποτίθεται πως θα έχουμε 10 στήλες κοντά... γίνεται να υπολογίσουμε αποστάσεις σημείων έτσι?

Με [idx, d] = knnsearch() και μετά σβήνεις τις τιμές του πίνακα σου ανάλογα με το ποιες αποστάσεις (από d θα πάρεις την πληροφορία) θέλεις να κρατήσεις.

Αλλιώς, με το χέρι post processing :P

δες λίγο και στις οδηγίες του matlab που μας έδωσαν,
η συνάρτηση cluster χρησιμοποιεί σαν είσοδο την έξοδο της συνάρτησης linkage.
Αν πας στη βοήθεια του matlab θα δεις ότι η linkage παίρνει διάφορα ορίσματα, 'single', 'average' κτλ.
τα οποία ουσιαστικά αλλάζουν τον είδος του ιεραρχικού αλγόριθμου.


ε, βασικά 5 θέλει, έχεις k-means, 3 ιεραρχικούς και μετά ή φτιάχνεις ένα dbscan ή παίζεις με τα SOMs.
dbscan πρέπει να υπάρχει και έτοιμος στο net.

εγω ετρεξα μονο τους αλγοριθμους π μπορουσα μεσω του weka.γι αυτο δεν απαντησα γτ δεν ηξερα...απο τη λιστα με τα cluster του weka ετρεξα καποιους απο αυτους..

Θα πρέπει να φτιάξεις συναρτήσεις για τις μετρικές, όπως είναι ο silhouette έτοιμος.

Βέβαια, η silhouette του matlab σου βγάζει το συντελεστή για σημεία, εσύ για ομαδοποιήσεις θα πρέπει να του τραβήξεις και ένα mean, όπως λέει και ο συμεώ στις διαφάνειες.

ξερεις αν γινεται στο weka αυτο ?? γτ εχω τρεξει ολη την εργασια με weka και απο matlab δεν ξερω τπτ....

Δεν έχω ιδέα. Δεν νομίζω ότι γίνεται πάντως. Αυτό που μπορείς να κάνεις είναι να σώσεις κάπως τα αποτελέσματά σου (o kmeans στο Weka βγάζει κάτι centroids κλπ των cluster) και να τα βάλεις στο excel και να δουλέψεις εκεί.

καταλαβα!σε ευχαριστω παντως

καταλαβα εκεινος ηταν που δεν βοηθουσε :P

Καλημέρα....να σας πω.... επειδή στο WEKA Silhouette, cohesion κτλ δεν μπορώ να υπολογίσω...βρήκα μια άλλη μετρική το likelihood.... λέτε να το δεχτεί?

k εγω π τ τρεχω με weka μονο αυτη βρηκα σαν μετρικη,αλλα κ παλι οχι σε ολους τους αλγοριθμους οπως πχ στον kmeans...

Βασικά άμα χρησιμοποιήσεις τον Make Density Based Cluster μέθοδο την βγάζει σε όλες....Έστειλα στον Συμεωνίδη να μου πει και μου είπε ότι μπορώ να βρω SSA, cohesion/separation και τώρα το ψάχνω...

α ναι???ωραια ψαχνω κ εγω αν ειναι! αν το βρεις  (η αν τ βρω) κανε ενα ποστ!

Φίλε κοίτα στα πμ....  ;)

Αδίστακτος ε?

 :???:

τι?

Neal εκτός από το να γράφεις περίεργα πράγματα.... μπορείς να βοηθήσεις λίγο για τις μετρικές???

Είναι το τελευταίο κομμάτι γαμώτο και έχω ζαλιστεί....

Στο matlab κάνω τις μετρικές, οπότε για weka δεν ξέρω.

στο weka από ότι είδα δεν έχει......μόνο σε κάποιους το sse αλλά όχι σε όλους....λοιπόν...μπορείς να πεις πως βρίσκεις στο matlab? Γιατί με συναρτήσεις θα διαβάσει το ματλαμπ τα αποτελέσματα μου και θα μπορώ να το βρω μετά από κει