본문 바로가기
728x90

시스템반도체18

728x90
온디바이스 AI가 메모리 구조에 미치는 영향 목차메모리가 성능의 병목이 된 이유AI 연산 특성이 메모리 접근을 바꾸다CPU 중심 메모리 구조의 한계NPU 확산과 메모리 구조의 재배치온칩 메모리 비중이 커진 배경대역폭보다 지연이 중요해진 이유전력·발열 관점에서 본 메모리 구조 변화소프트웨어가 메모리 구조에 요구하는 조건온디바이스 AI 시대 메모리 구조의 방향 서론전자기기에서 메모리는 오랫동안 성능을 보조하는 요소로 인식돼 왔다. CPU가 얼마나 빠른지, GPU가 얼마나 강력한지가 주된 관심사였고, 메모리는 그 연산을 뒷받침하는 자원에 가까웠다. 메모리 용량과 대역폭이 늘어나면 성능이 좋아진다는 단순한 공식이 오랫동안 유지됐다. 하지만 온디바이스 AI가 전자기기 내부로 들어오면서 이 공식은 더 이상 성립하지 않게 됐다. AI 연산은 단순히 많은 데이.. 2026. 1. 21.
전자기기 성능 경쟁의 중심이 된 온디바이스 AI 목차성능 경쟁의 기준이 이동한 배경벤치마크보다 체감 성능이 중요해진 이유연산 위치 변화가 만든 경쟁 구도NPU 중심 구조가 성능을 가르는 방식전력·발열 관리가 곧 성능 유지력이 된 이유메모리와 데이터 흐름이 만드는 숨은 격차운영체제와 소프트웨어가 성능을 완성하는 구조온디바이스 AI가 없는 성능 경쟁의 한계 서론전자기기 성능 경쟁은 오랫동안 숫자의 싸움이었다. CPU 클럭, 코어 수, GPU 성능, 메모리 대역폭처럼 측정 가능한 지표가 성능의 전부처럼 받아들여졌다. 제조사들은 벤치마크 점수를 앞세워 우위를 주장했고, 사용자는 숫자가 높은 제품을 더 좋은 기기로 인식했다. 하지만 AI가 전자기기 내부로 깊숙이 들어오면서 이 공식은 더 이상 유효하지 않게 됐다. 동일한 하드웨어 스펙을 가진 기기라도, AI .. 2026. 1. 18.
발열 관점에서 본 온디바이스 AI 구조 목차발열이 성능 한계가 된 이유온디바이스 AI가 발열을 키운 구조적 배경CPU·GPU 중심 구조에서의 발열 문제NPU 도입이 발열 구조를 바꾼 방식메모리 접근과 열 발생의 관계전력 제어와 발열 분산 전략운영체제와 발열 관리의 결합체감 성능을 좌우하는 발열 제어발열 관점에서 본 온디바이스 AI의 한계와 방향 서론전자기기에서 발열은 오랫동안 부차적인 문제처럼 다뤄졌다. 성능을 끌어올린 뒤, 문제가 생기면 냉각을 보강하거나 클럭을 낮추는 방식으로 대응해 왔다. CPU와 GPU 중심의 구조에서는 짧은 시간의 발열만 제어하면 되었고, 장시간 동일한 연산이 이어지는 경우는 많지 않았다. 하지만 온디바이스 AI가 전자기기 내부로 들어오면서 발열은 더 이상 사후 대응의 문제가 아니게 됐다. AI 연산은 항상 켜져 있.. 2026. 1. 11.
온디바이스 AI가 전력 설계를 바꾸는 방식 목차전력 설계의 출발점이 달라진 이유AI 연산이 만든 상시 동작 전력 조건전력 피크보다 지속 효율이 중요해진 배경NPU 중심 전력 도메인 분리 전략메모리 접근과 전력 소모의 재설계운영체제와 전력 제어의 결합 방식발열 관리가 전력 설계에 미친 영향온디바이스 AI 시대 전력 설계의 기준선 서론전자기기 전력 설계는 오랫동안 최대 성능을 얼마나 안정적으로 끌어낼 수 있는가를 중심으로 발전해 왔다. 고성능이 필요한 순간에 충분한 전력을 공급하고, 사용이 끝나면 소비를 줄이는 방식이 일반적이었다. 이 구조에서는 짧은 시간의 피크 전력과 평균 소비 전력이 핵심 지표였다. 하지만 온디바이스 AI가 전자기기 내부로 들어오면서 전력 설계의 기준은 근본적으로 바뀌었다. AI 연산은 순간적으로 끝나는 작업이 아니라, 항상 .. 2026. 1. 9.
전자기기에서 NPU가 필수가 된 이유 목차전자기기 성능 기준이 달라진 배경CPU와 GPU만으로는 부족해진 순간AI 연산의 성격이 바꾼 연산 구조NPU가 담당하는 역할은 무엇인가전력 효율과 발열 문제의 해법온디바이스 AI 확산과 NPU의 관계SoC 설계에서 NPU의 위치 변화사용자 경험이 NPU를 필수로 만든 이유NPU 없는 전자기기의 한계선 서론전자기기 성능을 설명하는 방식은 오랫동안 단순했다. CPU 속도와 코어 수, GPU 성능, 메모리 용량이 곧 성능이라는 인식이 지배적이었다. 전자기기는 사용자의 명령을 받아 계산하고 결과를 보여주는 도구에 가까웠고, 판단과 학습은 외부 서버가 맡는 구조가 일반적이었다. 하지만 AI 기능이 전자기기 안으로 들어오면서 이 전제는 빠르게 무너졌다. 음성 인식, 이미지 처리, 행동 예측처럼 지속적으로 판단.. 2026. 1. 7.
온디바이스 AI 도입으로 달라진 SoC 설계 목차SoC 설계의 출발점이 바뀌다온디바이스 AI가 요구한 새로운 역할 분담NPU 중심 설계로 이동한 이유메모리와 인터커넥트 구조의 재편전력 관리와 발열 설계의 재정의소프트웨어를 전제로 한 하드웨어 설계온디바이스 AI 시대 SoC의 성능 기준 변화 서론SoC 설계는 오랫동안 집적과 효율의 역사였다. CPU와 GPU, ISP, 통신 모뎀을 하나의 칩에 담아 전력과 공간을 절약하는 것이 핵심 목표였고, 연산의 무게중심은 여전히 CPU에 놓여 있었다. 인식과 판단처럼 무거운 작업은 외부 서버에서 처리하는 것이 일반적이었기 때문에, SoC 내부 설계는 상대적으로 정형화된 구조를 유지할 수 있었다. 하지만 온디바이스 AI가 본격적으로 도입되면서 이 전제는 무너지기 시작했다. AI 연산은 단순한 기능 추가가 아니라.. 2026. 1. 5.