Podskup za evaluaciju rješenja

AI Croatia Health › Forums › Forum za AI4Health.Cro 2024 izazov › Podskup za evaluaciju rješenja

Viewing 1 reply thread
  • Author
    Posts
    • 3. March 2024. at 14:55 #3409
      admin
      Participant

      U uputama je navedeno “Evaluacija rješenja radi se na slučajnom odabranom podskupu testnih primjera”.
      Da li je podskup testnih primjera:
      1) jednom generiran i taj isti se koristi u svakoj evaluaciji rješenja (isti se koristi za prvu, drugu, treću, … i desetu evaluaciju)?
      2) generiran svaki put iznova za svaku evaluaciju rješenje (novi podskup se generira za svaki od maksimalno mogućih 10 evaluacija)?

    • 3. March 2024. at 19:06 #3411
      TehničkaPodrška
      Keymaster

      Fiksirali smo podskup nad kojim se izvršava evaluacija za leaderboard na jedan određeni podskup vrijednosti od čitavog testnog skupa. Svi timovi dijele isti validacijski skup kako bi rangiranje na leaderboardu bilo vjerodostojno.
      Broj 1) je točan odgovor.

  • Author
    Posts
Viewing 1 reply thread
  • The forum ‘Forum za AI4Health.Cro 2024 izazov’ is closed to new topics and replies.