Blyerts
MenyTeach & TalkSköt hemsidan med AILagarna kring AI och dataDet nya arbetslivetAI och samhälletAlla temanRedaktörernaKurserMetoderKontexterOrdbokenPlattformenCoWork StudioMedlemskap BasNytt och omskrivetMedlemskap Bas · gratis till nyår

Alignment-problemet

Utmaningen att få en AI att göra det vi menar, inte bara det vi sa. Hadfield liknar det vid det omöjliga i att skriva ett fullständigt kontrakt: inga …

OrdbokenBegreppEtablerad kunskap

Alignment-problemet

Utmaningen att få en AI att göra det vi menar, inte bara det vi bokstavligen sagt.

Alignment-problemet handlar om avståndet mellan en instruktion och den avsikt som ligger bakom den. Gillian Hadfield liknar det vid omöjligheten att skriva ett fullständigt kontrakt: ingen instruktion kan täcka alla framtida situationer. Människor löser luckan med normer, tillit och omdöme, det vill säga en delad förståelse av vad som gäller även när det inte står skrivet.

Slutsatsen är att en AI behöver normativ kompetens, alltså förmågan att uppfatta vilka normer som är i kraft i en given situation, för att kunna agera rimligt i lägen som ingen förutsåg. Det flyttar problemet från teknisk specificering till social inlärning. Perspektivet skiljer sig från renodlat tekniska alignment-ansatser som söker lösningen i målfunktioner och träning.

Källor

Gillian Hadfield, arbeten om normativ infrastruktur och AI; kontraktsteoretisk grund enligt Coase, Hart och Holmström.

Etablerad kunskap · Ordboken kontrolleras varje natt, ett urval ord i taget

Secret Link