Drugi krug natjecanja

Viewing 21 reply threads
  • Author
    Posts
    • #4583

      Dragi natjecatelji,
      nažalost drugi krug produljujemo za jedan dan do 25. 3. 2025. Finalni submission potrebno je napraviti 25. 3. 2025. do 23:59. Predaja rješenja treba uključivati sljedeće dokumente:
      techical.pdf i technical.ipynb,
      medical.pdf i medical.ipynb i
      business-links.txt (korisničko sučelje i video pitch),
      u submission direktoriju.
      Lijep pozdrav,
      Organizacijski tim.

    • #4585

      Isto tako možete isprobati naredbu: evaluate test

      Ukupno traje oko 2 minute i dati će vam otprilike uvid je li vaše submission rješenje validno.

    • #4604
      Marin Oršić
      Participant

      Poštovanje,

      naredba evaluate test javlja kako je posao uspješno poslan.
      Međutim, evalstat kaže kako nema poslova, niti nalazimo neke druge tragove o uspješnosti naše implementacije.

      O čemu se radi?

    • #4608
      Marin Oršić
      Participant

      Poštovanje,

      jučer u 17.04 smo poslali puni podensak.
      Još uvijek evalstat javlja status “Submitted”.

      Što je zapelo sa strane evaluacije?

    • #4610
      Mihovil Stručić
      Participant

      Poštovani Miha,
      treba li naredba evaluate test odmah pokrenuti evaluate proces ili vratiti povratno informaciju o tome je li cjelokupno rješenje ispravno i spremno za evaluaciju.
      Mi smo htjeli dobiti povratne informacije o našem rješenju pomoću naredbe međutim ona je odmah poslala rješenje koje smo željeli još doraditi na evaluaciju čime smo efektivno izgubili jedan submission.
      Ukoliko naredba evaluate test ima za namjeru odmah poslati rješenje na evaluaciju smatramo kako takvo ponašanje nije jasno iskomunicirano.

    • #4612

      Kako evo provjeriti cemo. Je li vam se stvorio direktorij test u evaluation reaults direktoriju?

      Probao sam na oba stroja i radilo je. Da evaluate test koristi isti job stack da bi se izvrsio. Ako je netko vrtio svoje rjesenje evaluate test ceka prvi slobodni tren na stroju da ga izvrti.

    • #4614
      Marin Oršić
      Participant

      Poštovanje,

      nama direktorij nije stvoren, a posao od petka je još uvijek “Submitted”.

      Ovaj splet okolnosti je teški natjecateljski hendikep za našu ekipu.

    • #4618

      Poštovani,

      imamo isti problem kao i kolega Mihovil – evaluate test je pokrenuo normalan evaluate pa smo izgubili još jedan submission na to.

    • #4625
      Marin Oršić
      Participant

      Poštovanje,

      nama je završio poslani posao. Želimo poslati novi, no ne želimo riskirati. Opet smo poslali evaluate test, no ništa se ne događa. U čemu je problem?

    • #4626
      Tamara Đerđ
      Participant

      SCIOM tim isto potvrđuje da je evaluate test potrošio submission. Tako da izbjegavamo koristiti evaluate. pokretanje evaluate [argument] odnosno s bilo kojim argumentom troši submission. Htjeli smo vidjeti imali evaluate nekakav help pa nam je evaluate --help također potrošio submission.

      LP

    • #4633

      Ne bi se to smjelo događati sad ćemo provjeriti.

    • #4634

      Sada nam je zapeo proces evaluate test. Samo se zblesirao i vrti ga u nedogled implementirati ćemo hard break nakon 5 minuta procesiranje ili nešto slično. Gledamo do tada što se dogodilo SICOM procesu.

    • #4635

      Što nam date više informacija to smo brži.
      Hvala na razumijevanju.

    • #4646
      Marija Dragošević
      Participant

      Kad pokrenemo evaluate, je li test skup sadrzi podatke iz javnog i hrv skupa podataka ili imamo isto kao i u 1. Krugu?

    • #4647

      Test su samo podaci iz hrv skupa podataka one javne smo potpuno zanemarili zbog mogućnosti knowledge leak-a, ako se koristi predtrenirani model moguće je da je već vidio te podatke, isl. probleme.

      evaluacijski podaci za leaderboard su hrv kao i za finalni test.

    • #4649
      Marija Dragošević
      Participant

      Znaci ona slika iz uputa javni+hrv podaci za test vise ne vrijedi?

    • #4652

      Slika je dobra gledajte samo sliku: 2.faza
      Piše za validation da su podatci LO- i LO-

    • #4656
      Marin Oršić
      Participant

      Zbog greške u evaluaciji ste nam javili kako danas imamo pravo na dva podneska. Međutim, sustav nam nije dozvolio novo slanje. Znači li to da sutra možemo očekivati dva podneska?

    • #4668
      Marija Dragošević
      Participant

      Kad pokrenemo evaluate test, izračunava se cls macro mcc score, je li se putem evaluate testa računa na podacima train (javni) ili train-hr(hrvatski privatni dataset), zato što je poprilično misleading kad provjerim svoje modele.. score je preloš na modelu treniranom na train-hr, a score je dobar kad stavim model treniran na train (javni)..

      Možete li molim Vas to demistificirat jer idući evaluate mogu napravit tek u 23:55 sutra jer mi zbog errora nije prošao..

    • #4673

      evaluate test radi na podskupu trening podataka iz javnih podataka 1. kruga. Glavno je da se metrike ispišu, a nemaju nikakve veze s kvalitetom i preciznošću modela.

      Zadnji submission radite s naredbom: evaluate

    • #4676
      Marija Dragošević
      Participant

      Kad ćemo dobiti slike za evaluaciju za medical biljeznicu?

      Molim Vas produzitw jos jedan dan za predaju biljeznica 🙏

    • #4677

      Za medical bilježnicu možete koristiti proizvoljno slike iz treninga. Pa odaberite par primjera koje smatrate najrelevantnijima.

Viewing 21 reply threads
  • The forum ‘Forum za AI4Health.Cro 2025 izazov’ is closed to new topics and replies.