지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술대회자료
- 저자정보
- 발행연도
- 2007.11
- 수록면
- 284 - 293 (10page)
이용수
초록· 키워드
오류제보하기
본 논문에서는 실시간 동적 환경에 효과적인 L-CAA 에이전트 구조를 제안한다. L-CAA 에이전트 구조는 변화하는 환경에 대한 정응성을 높이기 위해, 선행 연구를 통해 개발된 행위 기반 에이전트 구조인 CAA에 강화 학습 기능을 추가하여 확장한 것이다. 안정적인 성능을 위해 L-CAA 구조에서는 행위 선택과 실행을 학습에 전적으로 의존하지 않고 학습을 보조적으로 이용한다. L-CAA에세 행위 선택 메커니즘은 크게 두 단계로 나뉜다. 첫 번째 단계에서는 사용자가 미리 정의한 각 행위의 수행 가능 조건과 효용성을 검사함으로써 행위 라이브러리로부터 실행할 행위들을 추출한다.
하지만 첫 번째 단계에서 다수의 행위가 추출되면, 두 번째 단계에서는 강화 학습의 도움을 받아 이들 중에서 실행할 하나의 행위를 선택한다. 즉, 강화학습을 통해 갱신된 각 행위들의 Q 함수 값을 서로 비교함으로써, 가장 큰 기대 보상 값을 가진 행위를 선택하여 실행한다. 또한 L-CAA에서는 실행 중인 행위의 유지 가능 조건을 지속적으로 검사하여 환경의 동적 변호로 인해 일부 조건이 만족되지 않는 경우가 발생하면 현재 행위의 실행을 즉시 종료할 수 있다. 그 뿐아니라, L-CAA는 행위 실행 중에도 효용성이 더 높은 다른 행위가 발생하면 현재의 행위를 일시 정지하였다가 복귀하는 기능도 제공한다. 본 논문에서는 L-CAA 구조의 효과를 분석하기 위해, 대표적인 동적 가상환경인 Unreal Tournament 게임에서 자율적으로 동작하는 L-CAA 기반의 UTBot 들을 구현하고, 이들을 이용하여 성능 실험을 전개해본다.
하지만 첫 번째 단계에서 다수의 행위가 추출되면, 두 번째 단계에서는 강화 학습의 도움을 받아 이들 중에서 실행할 하나의 행위를 선택한다. 즉, 강화학습을 통해 갱신된 각 행위들의 Q 함수 값을 서로 비교함으로써, 가장 큰 기대 보상 값을 가진 행위를 선택하여 실행한다. 또한 L-CAA에서는 실행 중인 행위의 유지 가능 조건을 지속적으로 검사하여 환경의 동적 변호로 인해 일부 조건이 만족되지 않는 경우가 발생하면 현재 행위의 실행을 즉시 종료할 수 있다. 그 뿐아니라, L-CAA는 행위 실행 중에도 효용성이 더 높은 다른 행위가 발생하면 현재의 행위를 일시 정지하였다가 복귀하는 기능도 제공한다. 본 논문에서는 L-CAA 구조의 효과를 분석하기 위해, 대표적인 동적 가상환경인 Unreal Tournament 게임에서 자율적으로 동작하는 L-CAA 기반의 UTBot 들을 구현하고, 이들을 이용하여 성능 실험을 전개해본다.
목차
요약
1. 서론
2. 에이전트 구조들
3. 에이전트 구조의 설계
4. 응용 에이전트
5. 실험
6. 결론
참고문헌
참고문헌 (0)
참고문헌 신청함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
L-CAA：행위 기반 강화학습 에이전트 구조
지능정보연구
2008 .09
-
[발표논문] 실시간 다중 에이전트 환경을 위한 반응형 에이전트 구조
한국지능정보시스템학회 학술대회논문집
2004 .06
-
심적 내용과 행위 이론
한국정보과학회 학술발표논문집
1992 .01
-
CAA V5를 활용한 항공기 형상 구현 소프트웨어 개발 방안
한국항공우주학회 학술발표회 초록집
2001 .04
-
CAA++를 이용한 HAWT 모델에 대한 유동 및 유동소음 해석
한국소음진동공학회 학술대회논문집
2010 .04
-
CAA를 이용한 CATIA V5 파일보안시스템 개발에 관한 연구
한국정밀공학회 학술발표대회 논문집
2006 .05
-
CAA를 이용한 CATIA V5 파일보안시스템 개발에 관한 연구
Journal of the Korean Society for Precision Engineering
2007 .05
-
동적 환경을 위한 정황-민감형 에이전트 구조
한국정보과학회 학술발표논문집
2004 .10
-
유동소음 해석 프로그램 : CAA++
한국유체기계학회 논문집
2006 .12
-
Aerodynamic Sound Simulation using CAA
한국전산유체공학회 학술대회논문집
2006 .05
-
CFD와 CAA를 연계한 공력소음해석용 수치기법 개발
한국항공우주학회 학술발표회 초록집
2004 .11
-
행위 범주에 기초한 실시간 에이전트 구조
한국지능정보시스템학회 학술대회논문집
2003 .05
-
CATIA CAA V5를 이용한 격자 생성 시스템에 관한 연구
한국항공우주학회 학술발표회 초록집
2002 .04
-
CAA V5를 이용한 Tire Sidewall 문자설계
한국정밀공학회 학술발표대회 논문집
2007 .11
-
CAA V5 를 이용한 Tire Mold Profile 설계
한국정밀공학회 학술발표대회 논문집
2008 .11
-
항공기 형상 설계에서의 GUI 환경 구축 및 형상 데이터 추출을 위한 CAA V5의 활용
한국항공우주학회 학술발표회 초록집
2001 .11
-
전산공력음향학(CAA) 소개 및 응용사례
한국전산유체공학회 학술대회논문집
2000 .05
-
External Flow and Cabin Interior Noise Analysis of Hyundai Simple Model by Coupling CAA++ and ACTRAN
한국소음진동공학회 학술대회논문집
2013 .10
-
AN OVERSET GRID APPROACH FOR CAA SIMULATIONS OF COMPLEX CONFIGURATIONS
한국소음진동공학회 국제학술발표논문집
2008 .07
이 논문의 저자 정보
이 논문과 함께 이용한 논문
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-ECN-0101-2009-003-019079676