콘텐츠로 이동

헤드리스 모드

"헤드리스 모드"는 그래픽 사용자 인터페이스(GUI)에 의존하지 않고, Backend.AI GO를 주로 백그라운드 서비스나 서버로 실행하는 방식을 말합니다. 이는 유휴 장비를 전용 추론 서버로 설정하거나 원격에서 애플리케이션을 관리할 때 특히 유용합니다.

개념

Backend.AI GO는 데스크톱 애플리케이션이지만, 핵심 구조는 분리되어 있습니다:

  • 백엔드 (Rust): 모델 추론, API 서버, Continuum Router를 처리합니다.
  • 프론트엔드 (React/Tauri): 시각적인 채팅 인터페이스를 담당합니다.

사용자는 GUI를 선택 사항으로 취급하고, Management APICLI 도구를 통해 백엔드와 상호작용할 수 있습니다.

운영 방법

시스템 트레이 (System Tray)

가장 기본적인 "헤드리스 스타일" 운영은 메인 창을 닫는 것입니다. * 기본적으로 창을 닫으면 Backend.AI GO는 시스템 트레이(macOS의 경우 메뉴 막대)로 최소화됩니다. * 이 상태에서도 API 서버와 모델 추론 프로세스는 백그라운드에서 계속 실행됩니다.

CLI 제어

함께 제공되는 backend-ai-go CLI를 사용하면 창을 열지 않고도 애플리케이션을 관리할 수 있습니다.

# 로드된 모델 목록 확인
backend-ai-go model list

# 모델 로드
backend-ai-go model load --name "llama-3-8b-instruct"

# 시스템 상태 확인
backend-ai-go system info

자세한 내용은 CLI 참조(CLI Reference) 문서를 확인하세요.

원격 접속 (서버 모드)

로컬 컴퓨터를 다른 사용자를 위한 헤드리스 노드로 전환하려면:

  1. 설정(Settings) > 고급(Advanced)으로 이동합니다.
  2. 원격 접속 허용(Remote Access)을 활성화합니다.
  3. API 포트를 설정합니다 (기본값: 8080).
  4. (선택 사항) 해당 포트에 대한 방화벽 규칙을 설정합니다.

이제 다른 Backend.AI GO 인스턴스(또는 curl/Python 스크립트)가 사용자의 컴퓨터 IP 주소로 연결하여 마치 서버처럼 사용할 수 있습니다.

참고: GUI 프레임워크 초기화 없이 실행되는 완전한 커맨드라인 전용 시작 모드는 향후 리눅스 서버 빌드에 포함될 예정입니다.