<div dir="ltr">I also consider that option, but when I try the very same thing with a different, region (not related to the task). I get accuracies of 50%. So that makes me think that it is affected by the task, but I don't know what to think of it.<div><br></div><div>Regards</div></div><br><div class="gmail_quote"><div dir="ltr">On Mon, Nov 26, 2018 at 1:34 PM Kaustubh Patil <<a href="mailto:kaustubh.patil@gmail.com">kaustubh.patil@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>I suspect that there might be something wrong in the code/how the data is handled. <br></div><div><br></div><div>If you 30% accuracy then that would mean that you will get 70% if you use a simple rule to predict the "other class" after your classifier. This is a sign that something is not right in data handling/evaluation.</div><div><br></div><div>Best<br></div></div><br><div class="gmail_quote"><div dir="ltr">On Mon, Nov 26, 2018 at 1:27 PM Raúl Hernández <<a href="mailto:raul@lafuentelab.org" target="_blank">raul@lafuentelab.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">No, it is balanced. It has the same number of observations for each class.</div><br><div class="gmail_quote"><div dir="ltr">On Mon, Nov 26, 2018 at 12:52 PM Kaustubh Patil <<a href="mailto:kaustubh.patil@gmail.com" target="_blank">kaustubh.patil@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>Just for clarification.</div><div><br></div><div>Is that data imbalanced, i.e. many more observations from one class?</div><div><br></div><div>Best,</div><div>Kaustubh<br></div></div><br><div class="gmail_quote"><div dir="ltr">On Mon, Nov 26, 2018 at 12:50 PM Raúl Hernández <<a href="mailto:raul@lafuentelab.org" target="_blank">raul@lafuentelab.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Dear PyMVPA community,<div><br></div><div>I'm doing classification in ROI's, I'm performing a simple 2 way classification using LSVM, and a leave-one-run-out cross-validation on 4 acquisitions. On some ROI's, I get a good accuracy for the number of participants (60%), but in others I get consistently bad accuracy (30%). To test whether the performance is above chance, I use a one sample t test (I know that it is not the best test for this type of data, I just use it as quick overview). When I test the bad accuracies, those are also significant.</div><div><br></div><div>What does it mean a consistently bad accuracy?</div><div><br></div><div>Regards,</div><div><br></div><div>Raul</div></div>
_______________________________________________<br>
Pkg-ExpPsy-PyMVPA mailing list<br>
<a href="mailto:Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net" target="_blank">Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net</a><br>
<a href="https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa" rel="noreferrer" target="_blank">https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa</a></blockquote></div>
_______________________________________________<br>
Pkg-ExpPsy-PyMVPA mailing list<br>
<a href="mailto:Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net" target="_blank">Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net</a><br>
<a href="https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa" rel="noreferrer" target="_blank">https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa</a></blockquote></div>
_______________________________________________<br>
Pkg-ExpPsy-PyMVPA mailing list<br>
<a href="mailto:Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net" target="_blank">Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net</a><br>
<a href="https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa" rel="noreferrer" target="_blank">https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa</a></blockquote></div>
_______________________________________________<br>
Pkg-ExpPsy-PyMVPA mailing list<br>
<a href="mailto:Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net" target="_blank">Pkg-ExpPsy-PyMVPA@alioth-lists.debian.net</a><br>
<a href="https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa" rel="noreferrer" target="_blank">https://alioth-lists.debian.net/cgi-bin/mailman/listinfo/pkg-exppsy-pymvpa</a></blockquote></div>