Forum Replies Created
-
Posts
-
Proslijedio sam upit. Nadam se da će ga pogledati za vikend do tada možda probajte na VPN s nekog drugog računala i javite više informacija pa proslijedim upit dalje.
Podigao sam leaderboard. Čestitam super rezultati. Skoncentrirajte se i dobro na zadatak 3 i 4 iz prezentacije i bit će to super.
metrics.py koristi naš python iz korisnika za evaluaciju. Nemate problema kod računanja metrika s naše strane. Za vlastitio testiranje slobodno u /home/teamXX/submission-example/metrics.py promijenite pa testirajte glavno da je logika koda ista.
Hvala na postu. Krenuti ćemo redom postavili smo svima veći broj submissiona da ne resetiramo bazu. Kako smo rekli do nedjelje imaju svi timovi svaki dan za jedan submit napraviti. U prvom krugu 8 je maximalan broj u bazi submissiona, jedan tim je 4 submissiona napravio pa sada do Nedjelje 16. 3. 2025. svi mogu svaki dan jedan submit napraviti.
Leaderboard sada radi: https://ai4healthcro.eu/?ht_kb=ljestvica-rezultata-ai4health-cro-inovacijskog-natjecanja-2025
1) Imamo par opcija da napravimo test submit ili da se nakon errora vrijeme ne računa. Tu nam treba vremena da testiramo.
3) Pitao sam koju tipkovnicu traži RDP pa ako uključite tu prije spajanja vjerojatno će sve biti ok. Javlja li se taj problem timovima od 1-7 samo ili se javlja i timovima od 8-14?
Da li ste probali mijenjati te standardne tipkovnice pa se ulogirati možda prima samo neku bazičnu. Mislim da su timovi od 1-7 na ubuntu pa probati neki hrvatski default. I zahvalni smo ako možete dati više informacija o problemu.4) moram proslijediti srcu: ako svi koriste condu (base) i (ai4health) onda su ova dva pythona: timovi 8 – 14 https://www.imghippo.com/i/OHGx7252MI.png ili za timove 1 – 7 https://www.imghippo.com/i/MCbC1003AVk.png
Super! To je ispravan submission. Napravio sam automatizaciju kriranja leaderboarda koja ne radi dobro. Stiglo je nekoliko rješenja pa ću sutra osvježiti leaderbord. Hvala na strpljenju.
Svima sam obrisao __pychace__ direktorij iz submission/ direktorija. I nebiste ga trebali imati dok predajete submission. Pokušati ćemo dodati tih nekoliko linija koda da ne provjeravamo “manifested” direktorije.
Molim vas provjerite u teamXX/submission-example/PREDAJA-RJESENJA.pdf. Tamo bi trebao biti opis kolona kojeg se pridržavamo mi kao tehnički tim. I da zasigurno test classification.csv neće imati BIRADS, Breast BIRADS i categori kolone jer su to labele ili derivacije labela.
Nećemo mijenjati vremensku razliku između mogućih submissiona eventualno ćemo dodati da u slučaju neispravnog submissiona je kraće vrijeme čekanja do sljedećeg submita.
To jesu problemi kod lokalizacije. Upravo zato smo napravili da se model evaluira pomoću segmentacijskih mapa i IoU mjere. Više informacija o IoU mjeri se nalazi u dokumentu UPUTA.pdf i PREDAJA RJESENJA.pdf.
Kako odabrati najadekvatniju i najpošteniju mjeru? Uzevši u obzir koje imamo podatke odlučili smo se za segmentacijske mape, a da vi predajete strukturu diretorija više o tome može se vidjeti u submission-example/submission.py i linije označene #Mandatory. File system se isčitava u submission-example/metrics.py te se kreira df koji se koristi za MCC mjeru na zadatku 2 lokalizacije.Uglavnom svi koji predaju izlaze modela lokalizacije trebali bi napraviti navedenu file system strukturu i po jednu segmentacijsku mapu za svaki komprbiditet (Masa, Kalcifikati, Fokalna asimetrija, i dr.).
localization.csv za svaku leziju koja se nalazi u medicinskom slučaju (case_id) jednu liniju unutar tablice.
Npr. case_id – 1 ima 4 slike. Na lijevoj strani nije vidljivo ništa za lijevu stranu ima dvije linije za svaki pogled (view), po jednu za CC snimku i za MLO snimku s kategorijom ‘No_Finding’. Dok na desnoj strani su vidljivi masa i kalcifikati na oba pogleda. To znači da imamo minimalno dodatna 4 retka u tablici. Potencijalno sadrži i više redaka, ako su na ‘1_R_CC.jpeg’ označena 2 bounding boxa s kalcifikatima, takav se nalaz zapisuje s 2 retka po jedan za svaki bounding box. Tada će localization.csv tablica imati dodatne 2 linije ili više linija za case_id – 1 ukupno 6 i više linija.
Za svaki case_id.unique() treba napraviti izlaznu strukturu evaluacije. Mislim da je tako napravljeno u submission-example.
Ovo se još nije dogodilo prenio sam vam ručno 1_output.log u direktorij naziva
. Vidite grešku u .log fajlu. Do kraja dana ćemo otkloniti pogrešku na evaluate servisu da u svakom slučaju vrati napravljenje metrike i scoring. Napomena: Pazite da su vam putevi do svih skripti relativni da se u trenutku pokretanja submission.py svi otvaraju iz submission/ direktorija.
__pychace__ direktorij nam stvara probleme oko ovlasti. evaluate servis ga neće više stvarati, a u svim natjecateljskim submission/ direktorijima je izbrisan.
Ovo znaci da vam je jedan path zahardkodiran na vas /home/team12/Documents/model1/
Pokusajte koristiti puteve relativno da sve zove iz submission/ direktorija mislim da ce vam onda proraditi.
Uočili smo tu pogrešku, resetiran je broj pokušaja voditelj tima bi trebao pročitati email i proslijediti ga drugim članovima tima. Provjerite spam za svaki slučaj.
Od jučer sve skripte koje se nalaze u submission direktoriju dobiju odgovarajuća prava čitanja i pisanja nakon što se pokrene komanda evaluate.
Ne bi se greška više trebala ponavljati. Vidi email.
U pravu ste, imamo automatski evaluator koji je ukinuo ta prava. Promijenio sam prava. I proslijedio sam upit da provjerimo kako nastaje taj bug.
Vidite niže u funkciji vračaju se softmax outputs, neke od funkcija su zahtjevale probabilističke outpute, ali možda bi funkcije za scoranje radile i ako im pošaljete samo logite. Morao bih to testirati pa radije pošaljite probabilistički output. Kako je označeno u return-u funkcije s # Mandatory komentarom. Vjerojatno biste dobili značajnije povratne informacije o klasifikatoru da pošaljete logite.
Pitajte me opet za par dana jesam li stigao testirati i radi li metrics.py na logite?
Nažalost ne, a o kojem se sudo paketu radi? Predlazem da to posaljete organizatorima na email ako. Želite da paket ostane anoniman ako ne napisite ovdje. Organizatori ce javiti meni paket o kojem se radi pa mozemo razmotriti.
Testirali smo na dva nacina o kojim se linijama tocno radi u submission.py?
Logiti moraju biti dio outputa s nazivima kako su dani u funkciji predict.
Evo još jedno pitanje od tehničkog tima jeste li probali:
“Možemo li dobiti potvrdu da su probali sa računalom na kojem je instaliran Windows 10 ili 11 ? Ne vidim nigdje da su to izričito napisali. Credentialsi su isti od samog početka i nismo ih mijenjali.
”
Može i screenshot.Dobio sam ovakav odgovor od tehničkog dijela tima:
Nažalost mi ne možemo dati nikakvu podršku za Linux.Sustav je testiran i radi na Windowsu sigurno, ja sam jučer isprobao konekciju sa njihovim credentialsima i konekcija je uredno prošla bez greške.
Prijedlog je da probaju sa Windows računalom ako već nisu i neka točno jave koja je greška.
Ukoliko se učestalo javlja ista greška koju su javili prvi put ja sam našao potencijalna dva rješenja :
https://community.fortinet.com/t5/Support-Forum/config-DNS-failed/m-p/364789
https://bugs.launchpad.net/ubuntu/+source/network-manager/+bug/2089930S obzirom da nitko drugi nije javio poteškoće smatram da je ovo problem do okoline s koje tim 14 pristupa.
Nažalost mi tu nemamo previše izbora i jedini VPN preko kojega se mogu spojiti je FortiGate odnosno FortiClient.
S obzirom na sve navedeno pretpostavka je da niti jedan drugi klijent ne bi radio jer njihova okolina nije dobro konfigurirana.
