용어 설명
온프레미스 AI란? 사내 AI 구축 전에 볼 것
고객 · 거래 데이터를 회사 밖으로 보내기 어려운 회사가 사내 AI를 들일 때 가장 먼저 따지는 것이 설치 위치입니다.
글 안재영 · Rivly 대표
정의
온프레미스 AI는 AI 시스템을 공급사 클라우드가 아니라 회사가 직접 관리하는 서버에 설치해 쓰는 방식입니다. 회사 소유 클라우드 계정에 설치하는 방식과 묶어 '구축형(설치형) AI'라고 부르기도 합니다.
회사들이 온프레미스 AI를 찾는 이유
- 고객 정보 · 거래 데이터를 외부로 반출하지 않아야 하는 사내 규정이나 계약
- 데이터가 어디에 저장되고 누가 접근하는지 직접 통제하고 싶을 때
- 공급사를 바꾸거나 계약이 끝나도 데이터와 설정을 그대로 남기고 싶을 때
설치 방식 비교
| 구분 | 공급사 클라우드 | 고객사 클라우드 계정 | 사내 서버 |
|---|---|---|---|
| 데이터 위치 | 공급사 환경 | 고객사 계정 안 | 고객사 서버실 |
| 시작 속도 | 가장 빠름 | 중간 | 준비 기간이 가장 김 |
| 통제 범위 | 공급사 정책을 따름 | 고객사가 계정 · 네트워크를 관리 | 고객사가 전부 관리 |
| 운영 부담 | 적음 | 중간 | 큼(장비 · 보안 · 업데이트) |
사내 AI 구축 전에 확인할 것
- AI 모델은 어디에서 돌아가나요? 데이터 저장은 회사 안에 두되 질문과 근거 일부가 외부 모델 API로 전송되는 구성인지, 모델까지 회사 안에서 돌리는지 구분합니다.
- 업무 데이터를 어떻게 연결하나요? 기존 시스템을 바꾸지 않고 연결할 수 있는지 봅니다(데이터 사일로).
- 누가 무엇을 볼 수 있나요? AI도 묻는 사람의 권한 안에서만 데이터를 읽어야 합니다.
- 계약이 끝나면 무엇이 남나요? 업무 지도와 데이터를 그대로 가져올 수 있는지 확인합니다.
Rivly는 고객사 클라우드 계정이나 사내 서버(온프레미스)에 설치합니다. 업무 지도와 데이터는 고객사에 보관되고, 계약이 끝나도 그대로 가져갈 수 있습니다.
함께 읽기
- 온톨로지 가이드온톨로지란? 회사 데이터와 AI를 잇는 업무 지도온톨로지의 뜻, 기업 온톨로지가 담는 것, 온톨로지 기반 AI가 답하는 방식, RAG · 지식그래프와의 차이, 구축 순서와 비용을 좌우하는 것, 온톨로지 기업을 고를 때 확인할 것을 한 번에 정리했습니다.
- 용어 설명휴먼 인 더 루프란? AI 거버넌스의 출발점휴먼 인 더 루프(Human-in-the-loop)의 뜻, AI 에이전트 업무에서 사람 승인을 어디에 두는지, 결정 기록이 왜 필요한지, AI 거버넌스와의 관계를 정리했습니다.
- 용어 설명기업용 AI 에이전트란? 챗봇과 다른 점과 도입 조건AI 에이전트의 뜻과 챗봇과의 차이, 기업이 AI 에이전트를 업무에 들이려면 갖춰야 할 데이터 · 권한 · 승인 조건, MCP 같은 표준 연결을 정리했습니다.