Skip to Content
에이전트 시대의 AI 시스템 설계
book

에이전트 시대의 AI 시스템 설계

by 발리아파 락슈마난, 하네스 하프케, 류광
April 2026
Intermediate
592 pages
13h 28m
Korean
Hanbit Media, Inc.
Content preview from 에이전트 시대의 AI 시스템 설계
491
8
장
제약 조건 해결
<bach_1> <bach_2> <bach_3> … <bach_n>
질문: 바흐의 건반 작품에 나타난 작곡 기법을 대위법, 화성 혁신, 구조적 구성에 초점을
맞춰 분석하라. 이러한 기법들이 바로크 시대의 음악적 미학을 반영하면서 동시에 고전
음악의 미래 발전을 어떻게 지향하고 있는가?
소프트 프롬프트 압축에서는 바흐 전기의 문단
70
개를 그대로 제출하는 대신, 문단들을 인코
딩한 벡터들을 제출한다. 앞의 예시에서는
<
bach
_
1
>
…
<
bach
_
n
>
로 표기했지만, 실제로는
수치 벡터들이다.
임베딩 대신
KV
값들을 사용할 수도 있다.
500xCompressor
의 연구에 따르면(
https
://
arxiv
.
org
/
pdf
/
2408
.
03094
)
KV
값을 사용할 때 프롬프트 압축률이 획기적으로 개선되
었다.
소프트 압축은 모델에 종속적이다. 예를 들어 라마
4
모델로 훈련한 인코더로 압축한 프롬프트
를
GPT
-
4
에 제출할 수는 없다.
8.3.3
예제
깃허브 저장소의
vllm
_
batching
_
comparison
.
py
는 연속 배칭의 효과를 명확하게 보여 주
는 파이썬 스크립트이다. 다음은 우리의 실행 결과인데, 연속 배칭을 사용하지 않을 때보다 처
리량이
20
배 이상 향상되었다.
Number of samples: 100
Individual processing ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Read now

Unlock full access

More than 5,000 organizations count on O’Reilly

AirBnbBlueOriginElectronic ArtsHomeDepotNasdaqRakutenTata Consultancy Services

QuotationMarkO’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.
Julian F.
Head of Cybersecurity
QuotationMarkI wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.
Addison B.
Field Engineer
QuotationMarkI’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.
Amir M.
Data Platform Tech Lead
QuotationMarkI'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
Mark W.
Embedded Software Engineer

You might also like

메타데이터 관리의 기본 원칙

메타데이터 관리의 기본 원칙

Ole Olesen-Bagneux
그림으로 배우는 생성형 AI

그림으로 배우는 생성형 AI

프리양카 베르가디아, 발리아파 락슈마난
잘되는 머신러닝 팀엔 이유가 있다

잘되는 머신러닝 팀엔 이유가 있다

데이비드 탄, 에이다 양, 데이비드 콜스

Publisher Resources

ISBN: 9791175790490