EmjayAhn
DataScienceBook
EmjayAhn
전체 방문자
오늘
어제
  • 분류 전체보기 (3)
    • Book (1)
      • 자기계발 (1)
    • Diary (0)
    • Data Science (0)
    • Computer Science (2)
      • Algorithm (0)
      • 개발환경 (1)
      • Linux (1)

블로그 메뉴

  • 홈
  • 태그
  • 방명록

공지사항

인기 글

태그

  • 데이터사이언스 #리눅스 #Linux #환경설정 #DevOps #머신러닝 #LightGBM
  • github #깃헙 #token #토큰 #맥북 #개발환경 #로그인

최근 댓글

최근 글

티스토리

hELLO · Designed By 정상우.
EmjayAhn

DataScienceBook

[Linux] LightGBM-GPU 버전 환경설정
Computer Science/Linux

[Linux] LightGBM-GPU 버전 환경설정

2022. 11. 30. 11:28

LightGBM GPU 버전 Install의 경우,

OpenCL 기반의 LightGBM-GPU와 CUDA 기반의 LightGBM-CUDA 버전이 있다.

OpenCL Version Documentation

Installation Guide - LightGBM 3.3.2 documentation

CUDA Version Documentation

Installation Guide - LightGBM 3.3.2 documentation

현재 환경은 NvidiaA100 GPU의 CUDA 환경이 미리 셋팅 되어 있어, 기존 LightGBM-GPU 버전이 아닌, CUDA 버전을 설치하려고 한다.

1. 환경변수 설정

CUDA 환경을 설정하면, CUDA의 환경변수를 각 계정별로 셋팅 해주어야 한다.

$ vi ~/.bashrc

# .bashrc에 다음의 환경변수를 추가해준다.
# CUDA SETTING
export PATH=$PATH:/usr/local/cuda-11.6/bin
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/usr/local/cuda-11.6/lib64
export CUDADIR=/usr/local/cuda-11.6

# 저장후 반드시 실행
$ source .bashrc

2. Download LightGBM

git clone --recursive <https://github.com/microsoft/LightGBM

3. Build

cd LightGBM
mkdir build
cd build
cmake -DUSE_CUDA=1 ..
make -j4

4. Install

cd ../python-package
python3 setup.py install

5. Troubleshooting

  • 지금 환경의 경우, root에 python이 설치 되어있고, 환경변수를 설정해 각 계정 별로 python 과 pip (python package manager) 가 독립되어 있는 환경이다.
  • 위의 python3 [setup.py](<http://setup.py>) install 을 하는 경우, 다음과 같은 에러가 난다.
  • 이는 root에 있는 site-packages에 현재 lightgbm 을 설치하는데 있어, permission denied : 권한 설정 에러이다.
    • 회사의 python은 절대 루트에서 작업하지 않는 원칙으로 환경을 설정했고, 이 에러는 당연하다.
    • 따라서 해당 계정 패키지 매니저에 위 과정에서 compile 된 lightgbm을 설치해 주면 된다.
  • 위 [setup.py](<http://setup.py>) 실행을 통해 컴파일된 파일을 이용하여, 계정 패키지 매니저에 설치해준다.
  • python3 -m pip install --install-option=--precompile --user .

6. 정상 설치 확인

    EmjayAhn
    EmjayAhn

    티스토리툴바