Posted: 26-03-15
과거의 AI가 코드로 이루어진 유령 같았다면, 2026년의 AI는 거대한 전력을 삼키고 초고열을 뿜어내는 **’실존하는 기계’**가 되었습니다. 엔비디아의 젠슨 황이 제시한 ‘AI 5단 케이크(Five-Layer AI Cake)’ 이론은 우리가 알던 소프트웨어 중심의 사고를 송두리째 뒤흔듭니다.
오늘 포스팅에서는 AI가 어떻게 단순한 알고리즘에서 자본 집약적 장치 산업으로 변모했는지, 그리고 이 복잡한 구조 속에서 리더가 장악해야 할 ‘진짜 맥락’이 무엇인지 분석합니다.
1. Stack Analysis: 지능은 어떻게 제조되는가?
엔비디아(NVIDIA)의 젠슨 황 CEO가 제시한 ‘AI 5단 케이크(Five-Layer AI Cake)’ 이론에 대한 핵심 내용을 해석해 드립니다.
이 개념은 AI를 단순한 소프트웨어나 앱이 아니라, 전기나 인터넷과 같은 **’필수 인프라’**로 바라보는 산업적 관점을 담고 있습니다.
1. AI 5단 케이크의 구조 (밑단부터 위로)

- 에너지 (Energy):
- 설명: 가장 기초가 되는 층입니다. 지능(Intelligence)을 생성하기 위해서는 실시간 전력 공급이 필수적입니다.
- 핵심: 에너지는 AI 인프라의 ‘제1원칙’이며, 시스템이 생산할 수 있는 지능의 총량을 결정하는 근본적인 제약 조건입니다.
- 칩 (Chips):
- 설명: 에너지를 연산 능력으로 전환하는 단계입니다.
- 핵심: 얼마나 효율적으로 에너지를 지능으로 바꾸느냐가 관건이며, 이 레이어의 발전이 AI 확장 속도와 비용을 결정합니다.
- 인프라 (Infrastructure):
- 설명: 데이터 센터, 냉각 시스템, 네트워킹 등을 포함하는 **’AI 팩토리(AI Factory)’**입니다.
- 핵심: 단순히 정보를 저장하는 곳이 아니라, 원자재(데이터와 에너지)를 투입해 지능을 ‘제조’하는 공장으로 정의됩니다.
- 모델 (Models):
- 설명: 언어, 생물학, 물리, 로보틱스 등 다양한 영역을 이해하는 AI 모델입니다.
- 핵심: 언어 모델을 넘어 물리 법칙을 이해하는 모델까지 확장되며, 인프라 위에서 구동됩니다.
- 애플리케이션 (Applications):
- 설명: 최상단 층으로, 자율주행차, 휴머노이드 로봇 등 실제 서비스가 구현되는 단계입니다.
- 핵심: 실제 경제적 가치가 창출되는 지점이며, 아래의 모든 레이어를 기반으로 작동합니다.
2. 주요 시사점
- AI는 인프라다: 젠슨 황은 AI가 ‘똑똑한 앱’ 수준이 아니라 국가적 차원의 인프라가 될 것이라고 강조합니다. 모든 국가와 기업이 자신만의 AI 공장을 가져야 한다는 논리입니다.
- 제조업으로서의 AI: 기존 소프트웨어가 정보를 저장하고 불러오는 방식이었다면, AI는 실시간으로 지능을 ‘생산’하는 제조업적 특성을 가집니다.
- 거대한 투자 규모: 이 5단 케이크를 완성하기 위해 전 세계적으로 수조 달러 규모의 인프라 구축이 필요하며, 이는 인류 역사상 가장 큰 규모의 인프라 확장이 될 것으로 전망합니다.
AI 시스템은 이제 하나의 거대한 ‘지능 공장’입니다. 이 공장은 다섯 가지 레이어가 수직적으로 결합되어 작동합니다. 이 5단계 프레임워크가 AI의 본질이 변화했음을 아주 잘 보여준다고 평가합니다.
핵심 통찰: AI 발전의 가장 큰 걸림돌(제약)은 알고리즘 같은 소프트웨어적인 문제가 아니라, 에너지, 인프라, 그리고 경제성(비용) 같은 물리적이고 현실적인 요소가 될 것이라는 점을 지적합니다.
해석: AI는 이제 더 이상 누가 더 똑똑한 알고리즘을 만드느냐는 ‘모델 경쟁(Model race)’이 아닙니다. 에너지부터 애플리케이션까지 전체 과정을 아우르는 **’풀스택 산업 전쟁(Full-stack industrial race)’**으로 변모했습니다.
Layer 1-3: The Physical Foundations (Energy, Chips, Infrastructure)
이 영역은 더 이상 소프트웨어 엔지니어의 영역이 아닙니다. **에너지 전력망(Energy)**과 연산 자산(Chips), 그리고 이를 담는 **데이터 센터(Infrastructure)**는 AI의 ‘생산 한계치’를 결정합니다.
- Insight: 이제 “우리 모델이 얼마나 똑똑한가?”보다 “우리에게 할당된 전력량이 얼마인가?”가 더 중요한 비즈니스 질문이 되었습니다.
Layer 4-5: The Intelligence & Value (Models, Applications)
하드웨어 위에서 구동되는 **모델(Models)**과 이를 서비스로 구현한 애플리케이션(Applications) 단계입니다. 여기가 우리가 흔히 말하는 ‘AI 기술’의 영역이지만, 하위 3개 층의 지원 없이는 한 발자국도 나아갈 수 없는 종속적 구조를 가집니다.
1. OSI 7 Layer vs AI 5-Layer Cake 비교
두 모델을 병렬로 놓고 보면, AI 시대에 물리적 기초(에너지, 칩)의 중요성이 얼마나 커졌는지 확연히 드러납니다.
| 구분 | OSI 7 Layer (통신 중심) | AI 5-Layer Cake (생산 중심) | 비즈니스적 관점의 변화 |
| 최하단 | Physical (L1): 케이블, 허브 등 물리적 연결 | Energy: 전력망, 에너지 효율 | 데이터 전송보다 **’전력 확보’**가 생존의 토대가 됨. |
| 하드웨어 | (L1에 포함되거나 별도 취급) | Chips: GPU, NPU, HBM | 단순 장비가 아니라 ‘연산 자산’ 자체가 핵심 경쟁력. |
| 네트워크 | Data Link ~ Transport (L2-L4): 경로 최적화 및 전송 | Infrastructure: AI 팩토리, 수냉식 센터 | 점대점 통신을 넘어 ‘대규모 연산 클러스터’ 구축. |
| 데이터 처리 | Session ~ Presentation (L5-L6): 데이터 형식, 암호화 | Models: LLM, 멀티모달 모델 | 데이터 가공을 넘어 ‘추론과 판단(Intelligence)’ 생성. |
| 최상단 | Application (L7): 사용자 인터페이스(HTTP 등) | Applications: 자율주행, 에이전트 | 단순 툴(Tool)에서 스스로 사고하는 **’에이전트’**로 진화. |
연관해서 분석해야 하는 이유 (The Link)
따로 떼어놓고 볼 수 없는 결정적인 이유는 ‘확장성(Scalability)’ 때문입니다.
- L1(Physical)의 확장: 기존 IT에서는 랜선만 더 꽂으면 됐지만, AI 사업에서는 **에너지(Cake 1단계)**가 없으면 L1 자체가 마비됩니다. 즉, OSI 모델의 가장 밑바닥에 ‘에너지’라는 거대한 지반이 새로 깔린 셈입니다.
- 성능의 병목: OSI 모델에서 속도 저하는 주로 네트워크 구간(L3, L4)에서 발생했습니다. 하지만 AI에서는 칩(Cake 2단계) 간의 데이터 전송 속도(NVLink 등)가 전체 시스템의 성능을 결정합니다. 즉, 칩 내부와 칩 사이의 통신이 새로운 OSI 레이어의 핵심 과제가 됩니다.
1. 자본은 ‘입장권’, 보안은 ‘생존권’
전통적인 생산 요소가 AI 산업에서는 다음과 같이 치환됩니다.
| 전통적 요소 | AI 시대의 치환 | 핵심 비즈니스 로직 |
| 토지 (Land) | 데이터 (Data) | 원재료이자 영토입니다. 고품질의 고유 데이터(Proprietary Data)를 점유한 자가 우위를 점합니다. |
| 노동 (Labor) | 컴퓨트 (Compute/Energy) | 인간의 노동력을 AI 모델의 추론(Inference)이 대신합니다. 이를 위해선 칩과 전력이 필수적입니다. |
| 자본 (Capital) | 인프라 자본 (CapEx) | 데이터센터를 짓고 에너지를 확보할 수 있는 거대 자본입니다. 이제 AI는 ‘자본 집약적 장치 산업’입니다. |
- 왜 ‘자본력’과 ‘보안 거버넌스’인가?
- 진입 장벽으로서의 자본
- 노트북 한 대로 시작하는 ‘차고 창업’은 이제 애플리케이션 레이어(5단 케이크의 최상단)에서만 가능합니다. 하위 레이어(에너지~인프라)는 국가나 거대 테크 기업의 영역이 되었습니다.
- 5단 케이크의 하위 3단(에너지, 칩, 인프라)은 엄청난 자본이 투입되는 장치 산업입니다. 돈이 없으면 ‘지능’이라는 원료 자체를 생산할 수 없으니 자본이 우선이라는 생각은 지극히 현실적입니다.
- 리스크 관리로서의 보안 거버넌스
- 하지만 수조 원을 들여 구축한 인프라가 단 한 번의 보안 사고(데이터 오염, 전력망 해킹 등)로 멈춘다면 그 자본은 순식간에 매몰비용이 됩니다. 즉, 자본이 커질수록 그 자본을 지키는 보안(통제력)의 가치도 기하급수적으로 커지는 구조입니다.
- 단순히 돈만 많다고 성공하는 것이 아니라, 그 자본을 통제(Control)할 수 있는 능력이 중요해졌습니다. 과거엔 보안 사고가 나면 ‘데이터 유출’로 끝났지만, 지금은 **’지능의 오염’**이나 **’시스템 탈취’**가 발생합니다.
- 진입 장벽으로서의 자본
2. IT-OT 수렴
| 구분 | IT (Information Technology) | OT (Operational Technology) |
| 관리 대상 | 데이터, 이메일, 웹사이트, 고객 정보 | 센서, 모터, 밸브, 전력망, 로봇 팔 |
| 주된 목적 | 정보의 처리 및 저장 | 물리적 공정의 감시 및 제어 |
| 핵심 가치 | 보안(Confidentiality): 정보가 새지 않는 것 | 가용성(Availability): 기계가 멈추지 않는 것 |
| 장소 | 사무실, 데이터 센터, 클라우드 | 공장 바닥(Shop Floor), 발전소, 정유소 |
- 기존 IT 보안: 소프트웨어 버그나 데이터 유출만 막으면 됐습니다.
- AI 인프라 보안: 이제는 데이터 센터의 냉각 시스템(OT), 전력 공급망(Energy), 칩 공급망(Supply Chain) 같은 물리적 접점이 보안의 대상이 됩니다.
3. 왜 AI 사업에서 이 개념이 중요한가?
- 에너지 & 인프라 레이어: 이것은 전형적인 OT의 영역입니다. 전력망을 관리하고, 냉각 장치를 돌리고, 서버의 온도를 조절하는 물리적 공정이죠.
- 모델 & 앱 레이어: 이것은 전형적인 IT의 영역입니다. 소프트웨어를 짜고 알고리즘을 최적화합니다.
Critical Perspective: 문제는 이 두 세계가 합쳐지면서 보안의 위협이 ‘물리적’으로 변했다는 겁니다. 예전엔 해킹당하면 ‘비밀번호’를 바꿔야 했지만, 이제 IT-OT가 수렴된 AI 데이터 센터가 해킹당하면 ‘불이 나거나 전력망이 터질 수’ 있습니다.
3.1. IT(정보기술)와 OT(운영기술)의 융합 리스크
- 리스크: AI 모델이 물리적 인프라(전력, 냉각, 설비)와 연결됨에 따라, 사이버 공격이 물리적 파괴(데이터 센터 화재, 전력망 붕괴)로 이어질 수 있습니다.
- 대응: 기존의 방화벽 수준을 넘어 하드웨어 수준의 격리(Confidential Computing)와 실시간 물리 공정 모니터링이 통합된 **’풀스택 보안 아키텍처’**가 요구됩니다.
보안 거버넌스의 확장
기존 IT 보안 vs AI 사업 보안 (주요 차이점)
기존 IT 기업의 보안이 **’데이터가 든 금고(DB)를 지키는 것’**이었다면, AI 보안은 **’지능을 제조하는 공장(AI Factory)의 공정 전체를 보호하는 것’**에 가깝습니다.
① 결정론적 보안 vs 확률론적 보안
- 기존 IT: ‘A이면 B이다’라는 규칙(Rule) 기반입니다. 정해진 방화벽 규칙이나 서명을 벗어나면 차단합니다.
- AI: 결과값이 확률적으로 변합니다. 따라서 고정된 규칙 대신 **비정상 행위 탐지(Anomaly Detection)**와 출력값의 가드레일(Guardrails) 설정이 핵심입니다.
② 경계 보안 vs 아이덴티티(Zero Trust) 보안
- 기존 IT: 외부망과 내부망을 가르는 ‘성벽(Perimeter)’이 중요했습니다.
- AI: 모델이 외부 API, 에이전트와 실시간으로 통신하므로 성벽이 무의미합니다. 모든 요청을 의심하고 검증하는 제로 트러스트와 데이터 주권(Sovereignty) 관리가 필수적입니다.
③ 데이터 보호 vs 모델 무결성 보호
- 기존 IT: 데이터 유출 방지(DLP)에 집중합니다.
- AI: 유출뿐만 아니라 **데이터 오염(Poisoning)**을 막아야 합니다. 학습 데이터에 교묘한 노이즈를 섞어 AI의 판단을 흐리게 하는 공격은 기존 보안 솔루션으로 잡아내기 어렵습니다.
④ 취약점 관리 vs 적대적 공격 방어
- 기존 IT: 소프트웨어 버그(Patch)를 수정합니다.
- AI: 버그가 없어도 프롬프트 인젝션(Prompt Injection) 등을 통해 모델을 가스라이팅하여 기밀을 유출하게 만들 수 있습니다. 이는 시스템 결함이 아닌 ‘지능의 허점’을 노리는 공격입니다.
보안은 ‘비용’이 아닌 ‘사업권(License)’
- 2026년의 보안 거버넌스는 규제 대응(Sovereign AI)의 핵심입니다. 강력한 보안 체계를 갖추지 못한 기업은 거대 자본의 투자를 받을 수 없으며, 시장 진입 자체가 차단됩니다.
- 3. 자본이 보안을 ‘구독’하는 시대
- 재미있는 비즈니스적 흐름은, 이 복잡한 보안 관리를 직접 할 수 없는 기업들이 결국 자본력을 가진 거대 플랫폼(MS, Google, NVIDIA 등)의 ‘보안 거버넌스’를 비싼 값에 빌려 쓰게 된다는 것입니다.
- 중소 규모의 AI 사업자는 직접 보안 인프라를 구축하기보다, “안전이 보장된 거대 자본의 인프라” 위에서 사업을 할 수밖에 없습니다. 결국 자본력이 보안 수준을 결정하게 되고, 보안은 그 자체로 거대한 유료 서비스가 됩니다.
- 기존 IT 보안과 인프라 문법(OSI)에 익숙한 조직일수록 **”왜 자꾸 에너지와 칩 이야기를 하는가?”**를 이해하지 못할 수 있습니다.
“과거의 비즈니스가 잘 닦인 고속도로(OSI 모델) 위에서 차를 굴리는 것이었다면, AI 비즈니스는 정유소(에너지)와 엔진 공장(칩)을 직접 소유한 채로 도시 전체(인프라)를 설계하는 것과 같다.”
결론적으로: 두 모델은 **’입체적’**으로 결합됩니다. OSI 레이어는 AI 케이크의 ‘인프라(3단계)’ 내부에서 작동하는 미시적 규칙이 되고, AI 케이크는 그 전체를 지탱하는 거시적 비즈니스 프레임워크가 됩니다.
결론적으로,
AI 비즈니스의 승패는 “얼마나 똑똑한가”가 아니라 **”거대한 자본을 투입해 구축한 인프라를 얼마나 안정적으로 통제(Governance)하고, 이를 자신만의 맥락(Context)으로 브랜딩하는가”**에 달려 있습니다.
AI TRiSM 도입: 신뢰(Trust), 리스크(Risk), 보안 관리(Security Management)를 통합한 거버넌스 체계를 구축하여 투자의 안정성을 확보할 것.
댓글 남기기