이득1 XGBoost(eXtreme Gradient Boosting) 정의- 부스팅(Boosting)을 할 때 경사하강법(Gradient Descent)을 이용해 순차적 탐색하여 틀린 것에 가중치를 부여하는 것을 병렬처리 기반으로 수행하는 인공지능 알고리즘 키워드- 틀린 것에 가중치, 병렬처리, 과적합 규제, 유사도 점수, 이득 메커니즘 기술요소파라미터유사도 점수(Similarity Score) - 초기 예측치에 따라 트리를 분기하고 각 분기된 Leaf의 유사도 계산 - 람다: 과적합을 방지하는 정규화 매개번수이득(Gain) - 트리 가지의 유사도 점수를 모두 더한 값 - 이득이 트리의 가지를 유지 - (각 Leaf의 유사도 점수 합) - Root의 유사도 점수 하이퍼 파라미터 일반파라미터 - 부스팅을 수행할 때 트리를 사용할지, 선형 모델을 사용할지 선택 [R에서 사용하.. 2024. 9. 20. 이전 1 다음