Naukowcy walczą o powtórzenie badań nad sztuczną inteligencją

Kategoria: Sztuczna inteligencja Opublikowany 16 lutego

Brakujący kod i dane utrudniają porównywanie prac związanych z uczeniem maszynowym — a to może zaszkodzić postępom.

Problem: Nauka raporty że z próbki 400 artykułów na czołowych konferencjach poświęconych sztucznej inteligencji w ostatnich latach tylko 6 procent prezenterów udostępniło kod. Tylko jedna trzecia udostępnionych danych i nieco ponad połowa udostępnionych podsumowań ich algorytmów, znanych jako pseudokod.

Dlaczego jest to ważne: Bez dostępu do tych informacji trudno jest odtworzyć wyniki badania. To sprawia, że ​​porównywanie nowo opracowanych narzędzi z istniejącymi jest prawie niemożliwe, więc naukowcom trudno jest wiedzieć, w jakim kierunku popchnąć przyszłe badania.

Jak to rozwiązać: Czasami brak udostępniania może być zrozumiały — powiedzmy, jeśli własność intelektualna należy do prywatnej firmy. Ale wydaje się, że istnieje szersza kultura ukrywania szczegółów. Niektóre spotkania i dzienniki zachęcają teraz do dzielenia się; może więcej powinno nastąpić.