[📪정보] 문화적 축적을 통한 인간 문화 모델링

문화적 축적은 인간 역사를 관통하는 능력의 열린 종말 없는 다양하고 지속적인 진보를 이끕니다.

이는 개인의 탐험과 세대를 거친 정보 전달을 결합하여 확장되는 지식과 기술의 체계를 구축합니다.

인간에게 널리 성공을 거두었음에도 불구하고, 인공지능 학습 에이전트가 문화를 축적하는 능력은 여전히 탐구되지 않았습니다.

특히, 강화 학습 접근 방식은 보통 단일 생애에 걸친 개선을 목표로 합니다.

기존의 세대 알고리즘은 개인이 혁신과 모방을 균형있게 교환할 수 있는 문화적 축적의 열린 종말 없는, 발생적인 특성을 포착하지 못합니다.

강화 학습 에이전트가 사회 학습을 수행할 수 있는 능력에 기반하여, 우리는 독립 학습과 이를 균형 있게 조합한 훈련 설정이 문화적 축적을 일으킨다는 것을 발견했습니다.

이러한 축적 에이전트는 동일한 누적 경험을 가진 단일 생애 동안 훈련된 에이전트보다 뛰어난 성과를 보입니다.

우리는 두 가지 세대 개념 하에서 두 가지 모델을 구성하여 이 축적을 탐구합니다:

에피소드 세대에서는 축적이 맥락 학습을 통해 이루어지며, 훈련 시간 세대에서는 축적이 가중치 학습을 통해 이루어집니다.

맥락 학습과 가중치 학습을 통한 문화적 축적은 각각 지식과 기술 축적에 해당한다고 해석할 수 있습니다.

우리가 아는 한, 이 연구는 강화 학습에서 발생적 문화적 축적을 달성한 일반 모델을 처음으로 제시하여 보다 열린 종말 없는 학습 시스템으로 나아가는 새로운 길을 열고, 인간 문화를 모델링할 새로운 기회를 제공합니다.

간단하게 표현하자면,

문장들이 모여생긴 각각의 맥락을 또 한데묶어서 하나의 맥락으로 삼고 그렇게 묶인 맥락을 또 하나의 맥락으로 묶어서 끊임없이 축적시키고 압축시켜서 인간의 문화를 하나의 단일한 패턴으로 모델링 하겠다는게 이 논문의 핵심 전략인듯

댓글 2