지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 발행연도
- 2020.11
- 수록면
- 1,500 - 1,506 (7page)
이용수
초록· 키워드
오류제보하기
본 논문에서는 오버레이 단말 간 직접 (Device-to-Device : D2D) 통신 네트워크를 위한 강화학습 기반 스케쥴링 문제를 연구한다. 강화학습 모델 중 하나인 Q-learning을 이용한 D2D 통신 기술들이 연구되었지만, Q-learning은 상태와 행동의 개수가 증가함에 따라서 높은 복잡도를 유발한다. 이러한 문제를 해결하기 위하여 Deep Q Network(DQN) 기반 D2D 통신 기술들이 연구되었다. 본 논문에서는 무선 통신 시스템 특성을 고려한 DQN 모델을 디자인하고, 피드백 및 시그널링 오버헤드를 줄일 수 있는 DQN 기반 분산적 스케쥴링 방식을 제안한다. 제안 방식은 중앙집중식으로 변수들을 학습시키고, 최종 학습된 파라미터를 모든 단말들에게 전달한다. 모든 단말들은 최종 학습된 파라미터를 이용하여 각자의 행동을 개별적으로 결정한다. 제안 방식의 성능을 컴퓨터 시뮬레이션을 통하여 분석하고, 최적방식, 기회주의적 선택 방식, 전체 전송 방식과 비교한다.
목차
요약
ABSTRACT
Ⅰ. 서론
Ⅱ. 시스템 모델
Ⅲ. D2D 네트워크를 위한 DQN 기반 스케쥴링 기법
Ⅳ. 시뮬레이션 결과
Ⅴ. 결론
REFERENCES
참고문헌 (11)
참고문헌 신청
M. Sheng, H. Sun, X. Wang, Y. Zhang, T. Q. S. Quek, J. Liu, and J. Li, “Ondemand scheduling: achieving QoS dierentiation for D2D communications,” IEEE Communications Magazine, vol. 53, no. 7, pp. 162-170, Jul. 2015.
J. Lyu, Y. H. Chew, and W.-C. Wong, “A Stackelberg Game Model for Overlay D2D Transmission With Heterogeneous Rate Requirements,” IEEE Transactions on Vehicular Technology, vol. 65, no. 10, pp. 8461-8475, Oct. 2016.
J. Xu and C. Guo, “Scheduling Stochastic Real-Time D2D Communications,” IEEE Transactions on Vehicular Technology, vol. 68, no. 6, pp. 6022-6036, Jun. 2019.
Siba Narayan Swain, Rahul Thakur, and C. Siva Ram Murthy, “Design and stochastic geometric analysis of an efficient Q-Learning based physical resource block allocation scheme to maximize the spectral efficiency of Device-to-Device overlaid cellular networks,” Computer Networks, vol. 119, pp. 71-85, Mar. 2017.
Z. Fan, X. Gu, S. Nie, and M. Chen, “D2D power control based on supervised and unsupervised learning,” 2017 3rd IEEE International Conference on Computer and Communications (ICCC), Chengdu, pp. 558-563, 2017.
J. Lyu, Y. H. Chew, and W.-C. Wong, “A Stackelberg Game Model for Overlay D2D Transmission With Heterogeneous Rate Requirements,” IEEE Transactions on Vehicular Technology, vol. 65, no. 10, pp. 8461-8475, Oct. 2016.
J. Xu and C. Guo, “Scheduling Stochastic Real-Time D2D Communications,” IEEE Transactions on Vehicular Technology, vol. 68, no. 6, pp. 6022-6036, Jun. 2019.
Siba Narayan Swain, Rahul Thakur, and C. Siva Ram Murthy, “Design and stochastic geometric analysis of an efficient Q-Learning based physical resource block allocation scheme to maximize the spectral efficiency of Device-to-Device overlaid cellular networks,” Computer Networks, vol. 119, pp. 71-85, Mar. 2017.
Z. Fan, X. Gu, S. Nie, and M. Chen, “D2D power control based on supervised and unsupervised learning,” 2017 3rd IEEE International Conference on Computer and Communications (ICCC), Chengdu, pp. 558-563, 2017.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
DQN 방식의 강화학습을 이용한 모바일 로봇의 자율이동
한국생산제조학회 학술발표대회 논문집
2021 .07
-
강화학습 게임에서 높은 보상 수렴속도 개선을 위한 가상환경 기반의 DQN 모델
Proceedings of KIIT Conference
2020 .10
-
강화학습 환경에 따른 A2C, DQN 알고리즘의 학습 효율성 비교, 분석
Proceedings of KIIT Conference
2023 .06
-
작물 생산량 예측을 위한 심층강화학습 성능 분석
한국전자통신학회 논문지
2023 .02
-
DQN을 적용한 심층강화학습 기반 로봇팔 밀기 및 파지
한국기계가공학회 춘추계학술대회 논문집
2023 .04
-
발생 확률 분포에 따른 DQN 학습 성능 비교
한국통신학회 학술대회논문집
2020 .02
-
5G 네트워크에서의 에너지 효율을 고려한 DQN 기반 자원 할당 기법
한국정보과학회 학술발표논문집
2018 .06
-
테트리스 환경을 이용한 A2C, DQN 두 강화 학습 알고리즘의 결과 비교 분석
Proceedings of KIIT Conference
2023 .06
-
N-DQN: 계층화된 병렬 강화학습 모델의 구현 및 연구
한국통신학회논문지
2019 .10
-
Optimization of cooling channels for electric vehicle batteries using DQN
한국생산제조학회 학술발표대회 논문집
2020 .10
-
셀룰러 네트워크에서 언더레이 기반의 단말간 직접통신을 위한 스케쥴링 방법
한국정보통신학회논문지
2015 .12
-
DQN(Deep Q-Network)을 활용한 수요 대응형 주차 스케쥴링 기법 개발
대한교통학회 학술대회지
2024 .09
-
안정적인 학습을 위한 멀티-스텝 DQN
한국통신학회 학술대회논문집
2020 .08
-
DQN 강화학습 기반 EV 무선전력 최적 코어 구조 설계
전력전자학회 학술대회 논문집
2022 .11
-
시뮬레이션 환경에서의 DQN을 이용한 강화 학습 기반의 무인항공기 경로 계획
반도체디스플레이기술학회지
2017 .01
-
Success Memory 및 Regeneration-set Training을 도입한 DQN 기반 아날로그 회로 설계 최적화 알고리즘
전자공학회논문지
2025 .03
-
DQN 기반 비디오 스트리밍 기법의 뉴럴 네트워크 모델별 성능 비교
한국정보과학회 학술발표논문집
2018 .12
-
강화학습 기반의 다중 단말 간 직접 통신을 위한 자원할당 기법
한국통신학회 학술대회논문집
2019 .01
-
스마트 팩토리 구축을 위한 동적인 환경에서의 DQN 강화 학습 기반 로봇 최적 이동 경로 탐색
한국통신학회 학술대회논문집
2019 .06
-
Q-learning을 이용한 이동 로봇의 실시간 경로 계획
전기전자학회논문지
2020 .12
이 논문의 저자 정보
이 논문과 함께 이용한 논문
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-ECN-0101-2021-004-000056766