지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 발행연도
- 2023.4
- 수록면
- 413 - 422 (10page)
- DOI
- 10.7840/kics.2023.48.4.413
이용수
초록· 키워드
오류제보하기
스마트 인더스트리, 메타버스, 디지털 트윈, 군사용 어플리케이션 등에서 확정적 데이터 전달을 요구하고 있다. 본 논문은 일반적으로 통용되는 플로우들의 클래스 혹은 우선순위와는 별도로, 네트워크 상황과 중요도에 따라 플로우 별로 동적으로 처리순위(precedence)를 할당하고, 이에 따라 스케줄링 알고리즘을 결정하는 강화학습 기반의 스케줄링 프레임워크를 제안한다. 이를 실증하기 위해서 두 개의 처리순위 큐가 존재하는 환경을 상정하여, 강화학습 에이전트가 지정된 기준에 따라 플로우들의 처리순위를 지정하며 스케줄링 알고리즘을 선택하는 두 가지의 행동(action)을 취한다. 네트워크 특성에 따라 다양한 기준으로 처리순위를 결정할 수 있다. 본 연구에서는 플로우가 요구하는 마감기한(deadline)을 처리순위 결정의 중요한 기준으로 사용하였다. 딥러닝 기반의 강화학습 모델인 DDQN(Double Deep Q-Network)을 활용하여, 고정된 길이의 결정 주기마다 네트워크의 상태(state)를 관측하고 행동을 선택함으로써 처리순위를 결정한다. 본 연구의 환경에 맞게 개발한 네트워크 시뮬레이터를 통해 DDQN에이전트가 여러 휴리스틱 알고리즘과 비교하여 높은 성능을 보이는 것을 확인하였다.
목차
요약
ABSTRACT
Ⅰ. 서론
Ⅱ. 관련 연구
Ⅲ. 시스템 모델링
Ⅳ. 실험 결과
Ⅴ. 결론
References
참고문헌 (13)
참고문헌 신청
Y. Choi, et al., “Ultra-high-precision network technology trend for ultra-immersive/highprecision service,” Electron. and Telecommun. Trends, vol. 36, no. 4, pp. 34-47, Aug. 2021. (https://doi.org/10.22648/ETRI.2021.J.360404)
Y. Xue, et al., “A framework for military precedence-based assured services in GIG IP networks,” IEEE Military Commun. Conf., Orlando, FL, USA, Oct. 2007. (https://doi.org/10.1109/MILCOM.2007.4454862)
N. Finn, et al., “Deterministic networking architecture,” RFC 8655, Oct. 2019. (https://www.hjp.at/doc/rfc/rfc8655.html)
C. Zhang, P. Patras, and H. Haddadi, “Deep learning in mobile and wireless networking: A survey,” in IEEE Commun. Surv. & Tuts., vol. 21, no. 3, pp. 2224-2287, third quarter 2019. (https://doi.org/10.1109/COMST.2019.2904897)
S. Chinchali, et al., “Cellular network traffic scheduling with deep reinforcement learning,” Thirty-Second AAAI Conf. Artificial Intell., vol. 32, no. 1, 2018. (https://doi.org/10.1609/aaai.v32i1.11339)
Y. Xue, et al., “A framework for military precedence-based assured services in GIG IP networks,” IEEE Military Commun. Conf., Orlando, FL, USA, Oct. 2007. (https://doi.org/10.1109/MILCOM.2007.4454862)
N. Finn, et al., “Deterministic networking architecture,” RFC 8655, Oct. 2019. (https://www.hjp.at/doc/rfc/rfc8655.html)
C. Zhang, P. Patras, and H. Haddadi, “Deep learning in mobile and wireless networking: A survey,” in IEEE Commun. Surv. & Tuts., vol. 21, no. 3, pp. 2224-2287, third quarter 2019. (https://doi.org/10.1109/COMST.2019.2904897)
S. Chinchali, et al., “Cellular network traffic scheduling with deep reinforcement learning,” Thirty-Second AAAI Conf. Artificial Intell., vol. 32, no. 1, 2018. (https://doi.org/10.1609/aaai.v32i1.11339)
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
DDQN을 활용한 강화학습 기반 타임슬롯 스케줄링
한국통신학회논문지
2022 .07
-
DDQN을 활용한 강화학습 기반의 다기능 레이더 임무 스케줄링 방법
한국산학기술학회 논문지
2023 .07
-
VM 배치를 위한 DDQN 기반 태스크 스케줄링 알고리즘
한국통신학회 학술대회논문집
2023 .06
-
심층강화학습 기반의 다기능 레이더 빔 스케줄링 기법
한국항공우주학회 학술발표회 초록집
2023 .04
-
강화학습 기반 생산계획 및 스케줄링 최적화 기술 적용 사례
한국생산제조학회 학술발표대회 논문집
2024 .12
-
강화학습 기반 빌딩 연계형 V2G 스케줄링 알고리즘
한국통신학회 학술대회논문집
2023 .06
-
강화학습기법의 동적일정계획에의 적용가능성에 대한 소고
공학기술논문지
2017 .12
-
평블록 조립 공정에 대한 강화학습 기반 스케줄링 알고리즘 개발
한국CDE학회 논문집
2021 .06
-
Enhancing Autonomous Air Combat Maneuver Decision-Making Using Noisy- Dueling DDQN
한국항공우주학회 학술발표회 초록집
2024 .11
-
자원 제약이 있는 프로젝트 스케줄링 문제를 위한 그래프 신경망 기반의 강화학습 알고리즘
대한산업공학회 춘계공동학술대회 논문집
2022 .06
-
흐름 생산 공정문제를 위한 dueling double Q-러닝 기반 강화학습 기법 연구
전기학회논문지
2021 .10
-
A comparison of heuristic and reinforcement learning approach to dual stocker scheduling considering priority
대한산업공학회 춘계공동학술대회 논문집
2022 .06
-
양자네트워크에서 심층강화학습을 활용한 다중 요청 스케줄링 최적화
한국통신학회 학술대회논문집
2025 .02
-
심층 강화학습을 활용한 산업디자인
제어로봇시스템학회 논문지
2018 .12
-
시간 창 제약을 고려한 심층 강화학습 기반 다수 무인기의 임무할당 및 스케줄링
한국항공우주학회 학술발표회 초록집
2024 .11
-
강화학습 알고리즘 이용한 혈관시술 가이드 와이어 자동 제어 구현
제어로봇시스템학회 국내학술대회 논문집
2019 .05
-
선점형 동적우선순위 스케줄링 시스템에서의 부하인지기반 비주기 태스크 스케줄링 알고리즘
한국정보과학회 학술발표논문집
2019 .06
-
다중 스위치 환경에서 오픈 플로우와 강화학습을 활용한 플로우 엔트리 방출 정책 생성
한국정보과학회 학술발표논문집
2022 .12
-
양자네트워크에서 심층강화학습을 활용한 End-to-End Request 스케줄링 최적화 연구
한국통신학회 학술대회논문집
2024 .11
-
A Deep Reinforcement Learning based Scheduling Approach for Dynamic Hybrid Flow Shops with Reworks under Queue Time Limits
대한산업공학회 춘계공동학술대회 논문집
2023 .05
이 논문의 저자 정보
이 논문과 함께 이용한 논문
농업관련산업의 세계화 전략과 그 영향 : 농약 및 종자산업을 중심으로
윤병선
산업경제연구
2004
.10
Reinforcement learning-based thermal control for uniform heating of solid-state disk structures
C. H. Lee
,
S. G. Chun
,
S. K. Kim
한국생산제조학회 학술발표대회 논문집
2023
.12
강화학습을 활용한 작업 분할이 가능하고 설비 제약이 존재하는 동종 병렬 시스템의 총 납기 지연 최소화
이성태
,
유우식
대한산업공학회지
2023
.12
DDQN을 활용한 강화학습 기반의 다기능 레이더 임무 스케줄링 방법
주광민
한국산학기술학회 논문지
2023
.07
항만 물류 환경에서 다중 에이전트 강화학습 기반 최적 배차 모델링 방법
이효준
,
장우석
,
이성진
외 1명
한국정보기술학회논문지
2023
.06
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-ECN-0101-2023-567-001345188