Githubovo číslo pre akademické noviny - smerom k reprodukovateľnému výskumu AI

Foto: Louis Reed, Unsplash

Zajtrajší výskum je vždy postavený na dnešnom výskume. Napriek tomu zostáva otázka reprodukovateľnosti tŕňom mnohých vedcov. Koľkokrát ste sa chceli hlbšie ponoriť do konkrétnej domény, ale dokumenty, ktoré k nej viedli, nie sú preukázateľne reprodukovateľné?

„Viac ako 70% vedcov sa pokúsilo a nedokázalo reprodukovať experimenty iného vedca a viac ako polovica nedokázalo reprodukovať svoje vlastné experimenty.“ - Prieskum prírodnosti (nie živiť sa), ktorý uskutočnilo 1 576 výskumníkov o reprodukovateľnosti vo výskume

Nurture.ai je platforma pre spoluprácu, ktorá umožňuje viac využívať výskum AI a reprodukovateľnosť dokumentov AI je jedným z hlavných problémov, ktoré riešime.

Konkrétne články, ktoré sú zámerne / neúmyselne chýbajúce alebo neurčité v niektorých detailoch, ktoré sú kľúčové pre reprodukovateľnosť. Diskutovali sme s mnohými výskumnými pracovníkmi o tom, aké ťažké je získať od autora e-mailom vysvetlenie týchto problémov a sami to zažili.

Github-štýl otázky pre výskumné práce

Chceme to zmeniť prostredníctvom problémov v štýle githubov pre noviny, ktoré sme nedávno uviedli na trh. Výhody tejto novej funkcie sú:

  • Kanál pre čitateľov papiera a autorov na diskusiu o dôležitých otázkach týkajúcich sa príspevkov
Rôzne typy príznakov problémov
  • Je možné otvoriť problémy, ktoré upozorňujú na problémy s papierom, kladú otázky alebo navrhujú zlepšenia. Autori budú informovaní o všetkých problémoch otvorených vo svojich príspevkoch
Diskusie Spoločenstva o kódexe hlbokého vzdelávania na fórach AI6
  • Komunita, ktorá sa stane prirodzenou vrstvou kontroly kvality pred tým, ako sa autori upozornia na tieto problémy, a to prostredníctvom použitia hodnotení „like“ a zapojením určitého problému.

Niektoré príklady problémov zahŕňajú:

  • nejednoznačné / nie jasne vysvetlené koncepty v článku
  • problémy s replikáciou výsledkov príspevku
  • chyby (v matematických rovniciach, definícia technických pojmov atď.)
  • neplatné predpoklady
  • príbuzné diela, ktoré nie sú citované

Otváranie vlastných problémov

Otvorenie problému na papieri je jednoduché. Jednoducho prejdite na požadovanú stránku papiera na stránke Nurture.ai, kliknite na problémy a potom kliknite na tlačidlo Vytvoriť nový problém. Vyplníte názov, popis a vyberiete typ problému, ktorý chcete otvoriť.

Otvorenie problému na výskumnej platforme Nurture.ai

Potom tím Nurture.ai oznámi tieto problémy autorom príspevku. Zatiaľ čo každý môže otvoriť problém na papieri, iba overení autori článkov sú schopní uzavrieť konkrétny problém na papieri.

Máte nejakú spätnú väzbu alebo návrhy?

Boli by sme radi, keby ste si vypočuli vaše myšlienky o súčasnej platforme a o tom, čo budujeme, ako aj o akýchkoľvek problémoch, s ktorými sa stretávate pri učení sa AI alebo pri výskume AI - náš tím sa zaväzuje, že z vás urobí najlepšiu možnú platformu pre výskum AI.

Komentujte nižšie, kliknite na ikonu „Spätná väzba pre Nurture.AI“ v pravom dolnom rohu platformy alebo pošlite e-mail na adresu jameslee@nurture.ai. Tešíme sa, až sa na vás dozvieme, a ak sa vám to bude páčiť, nezabudnite tlieskať!

Považujete to za užitočné? V sobotu a #APaperADay môžete vyskúšať naše ďalšie iniciatívy.

Nurture.ai je platforma na spoluprácu, ktorá umožňuje anotovať, diskutovať a odosielať implementácie kódu do výskumných prác o umelej inteligencii.

Sledujte Nurture.ai na Facebooku a Twitteri.