지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 발행연도
- 2022.7
- 수록면
- 944 - 952 (9page)
- DOI
- 10.7840/kics.2022.47.7.944
이용수
이 논문의 연구 히스토리 (2)
- 이 논문의 후속연구가 궁금하신가요?
- 연관 학술논문 또는 학술발표를 통해 보다 발전된 연구결과를 확인하실 수 있습니다.
- 이 논문의 연구 히스토리 확인하기
초록· 키워드
오류제보하기
트래픽 특성과 요구사항의 다양한 변화에 네트워크 자율적으로 유연하게 적응하고 대처하는 방안으로, 강화학습을 적용한 네트워크 스케줄러가 최근 주목받고 있다. 본 연구에서는 딥러닝을 적용한 강화학습 모델인 double deep q-network(DDQN)을 사용해 우선순위 기반의 타임슬롯 스케줄링을 구현한다. DDQN 에이전트의 행동에 대한 가치를 평가하기 위해 reward는 timeslot에서 전송된 패킷의 추정 delay와 deadline의 차이, 그리고 패킷의 우선순위에 기반해 지급하는 function으로 정의하였다. 시뮬레이션 결과, 학습된 스케줄러가 strict priority (SP) 혹은 weighted round robin(WRR)과 같은 기존 알고리즘으로 스케줄링했을 때 우려되는 문제점을 극복한 것을 확인할 수 있었다. 또한, 기존 스케줄러보다 높은 누적 보상의 합인 score를 기록하며, deadline 내에 더 많은 packet이 도착함을 확인하였다. 본 연구를 통해서 대규모 유선 네트워크에서 자율 네트워크 스케줄링 기능 실현의 가능성을 타진하였다. 특히 제안하는 DDQN 기반 강화학습 에이전트를 사용하면 자율성과 성능을 모두 개선할 수 있을 것으로 기대한다.
목차
요약
ABSTRACT
Ⅰ. 서론
Ⅱ. 관련 연구
Ⅲ. 시스템 모델링
Ⅳ. 시뮬레이션 결과
Ⅴ. 결론
References
참고문헌 (11)
참고문헌 신청
M. Behringer, et al., “Autonomic Networking: Definitions and Design Goals,” RFC7575, pp. 1-16, 2015.
C. Zhang, et al., “Deep learning in mobile and wireless networking: A survey,” in IEEE Commun. Surv. & Tuts., vol. 21, no. 3, pp. 2224-2287, thirdquarter 2019.
Sandeep P. Chinchali, et al., “Cellular network traffic scheduling with deep reinforcement learning,” Thirty-second AAAI Conf. Artificial Intell., 2018.
X. Xiong, et al., “Resource allocation based on deep reinforcement learning in iot edge computing,” in IEEE J. Sel. Areas in Commun., vol. 38, no. 6, pp. 1133-1146, Jun. 2020.
H. Wei, et al., “Intellilight: A reinforcement learning approach for intelligent traffic light control,” in Proc. 24th ACM SIGKDD Int. Conf. Knowledge Discovery & Data Mining, pp. 2496-2505, 2018.
C. Zhang, et al., “Deep learning in mobile and wireless networking: A survey,” in IEEE Commun. Surv. & Tuts., vol. 21, no. 3, pp. 2224-2287, thirdquarter 2019.
Sandeep P. Chinchali, et al., “Cellular network traffic scheduling with deep reinforcement learning,” Thirty-second AAAI Conf. Artificial Intell., 2018.
X. Xiong, et al., “Resource allocation based on deep reinforcement learning in iot edge computing,” in IEEE J. Sel. Areas in Commun., vol. 38, no. 6, pp. 1133-1146, Jun. 2020.
H. Wei, et al., “Intellilight: A reinforcement learning approach for intelligent traffic light control,” in Proc. 24th ACM SIGKDD Int. Conf. Knowledge Discovery & Data Mining, pp. 2496-2505, 2018.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
DDQN을 활용한 강화학습 기반의 다기능 레이더 임무 스케줄링 방법
한국산학기술학회 논문지
2023 .07
-
확정적 네트워크에서의 동적 처리순위를 활용한 강화학습 기반 스케줄러
한국통신학회논문지
2023 .04
-
Enhancing Autonomous Air Combat Maneuver Decision-Making Using Noisy- Dueling DDQN
한국항공우주학회 학술발표회 초록집
2024 .11
-
VM 배치를 위한 DDQN 기반 태스크 스케줄링 알고리즘
한국통신학회 학술대회논문집
2023 .06
-
강화학습을 통한 시간에 엄격한 패킷 스케쥴링
한국컴퓨터정보학회 학술발표논문집
2018 .07
-
Deep Reinforcement Learning based Multipath Packet Scheduling
Journal of KIISE
2019 .07
-
DQN 및 DDQN을 이용한 트레이딩 봇 구현 및 성능 비교
전기학회논문지
2021 .01
-
다중경로 환경에서 심층 강화학습 기반 패킷 스케줄링 기법 연구
한국정보과학회 학술발표논문집
2018 .12
-
네트워크 최대 단대단 지연 시간의 최소화를 위한 강화학습 기반 스케줄러
한국통신학회논문지
2022 .09
-
강화학습 알고리즘 이용한 혈관시술 가이드 와이어 자동 제어 구현
제어로봇시스템학회 국내학술대회 논문집
2019 .05
-
IoT 환경에서의 적응적 패킷 스케줄링 알고리즘
한국컴퓨터정보학회 학술발표논문집
2018 .07
-
Cart-pole 모델에서 DDQN과 Policy gradient 강화학습 방법 비교
한국통신학회 학술대회논문집
2019 .11
-
큐러닝(Q-learning)을 이용한 다중 대기열 패킷 스케쥴링
한국컴퓨터정보학회 학술발표논문집
2018 .07
-
강화 학습 기반 무선 충전 모바일 에지 컴퓨팅 네트워크의 지연시간 최적화
한국통신학회 학술대회논문집
2021 .06
-
무선 애드혹 네트워크에서 우선순위를 고려한 분산 노드 스케줄링
제어로봇시스템학회 논문지
2020 .02
-
Q-learning 을 이용한 무선 네트워크에서 패킷 스케줄링 기법
한국통신학회 학술대회논문집
2017 .11
-
UCB를 이용한 강화학습 패킷 스케줄링
한국컴퓨터정보학회 학술발표논문집
2019 .01
-
Performance Analysis of Instruction Priority Functions using a List Scheduling Simulator
Journal of KIISE
2023 .12
-
2단계 빅데이터 프레임워크 스케줄러 구조가 지연 스케줄러의 성능에 미치는 영향
한국정보과학회 학술발표논문집
2018 .12
-
동일 실행시간과 마감시간을 가지고 도착하는 작업들의 스케줄링
한국정보통신학회논문지
2023 .10
이 논문의 저자 정보
이 논문과 함께 이용한 논문
통합 플로우 기반 스케줄링과 Interleaved Regulator를 이용한 네트워크 지연시간 보장 프레임워크
정진우
한국통신학회논문지
2020
.03
강화학습을 활용한 작업 분할이 가능하고 설비 제약이 존재하는 동종 병렬 시스템의 총 납기 지연 최소화
이성태
,
유우식
대한산업공학회지
2023
.12
조선소 병렬 기계 공정에서의 납기 지연 및 셋업 변경 최소화를 위한 강화학습 기반의 생산라인 투입순서 결정
남소현
,
조영인
,
우종훈
대한조선학회 논문집
2023
.06
Gated 스케듈러 기반의 시간 민감형 컷 스루 스위치 시스템의 구현 및 성능 분석
서주상
,
윤종호
한국통신학회 학술대회논문집
2022
.06
정확도 향상을 위한 CNN-LSTM 기반 풍력발전 예측 시스템
박래진
,
강성우
,
이재형
외 1명
신·재생에너지
2022
.06
최근 본 자료
댓글(0)
0