Skip to Content
AI를 위한 필수 수학
book

AI를 위한 필수 수학

by 할라 넬슨, 안민재
August 2024
Beginner to intermediate
640 pages
14h 53m
Korean
Hanbit Media, Inc.
Content preview from AI를 위한 필수 수학
296
AI
를 위한 필수 수학
167
https://oreil.ly/S3vEz
168
https://oreil.ly/Submn
169
https://oreil.ly/S3vEz
과는 완전히 다른 구조이다. 트랜스포머는
2017
년 논문 「
Attention
is
All
You
Need
」
167
에
서 소개됐다.
트랜스포머 이후 권위를 잃은 순환 및 합성곱 신경망 구조가 더 이상 쓰이지 않을 것 같지만 그
렇진 않다. 특정 자연어 처리 애플리케이션과 금융 애플리케이션에서 여전히 사용되고 있으며
심지어 잘 작동한다. 시계열 데이터에서 사용되는 순환 및 합성곱 신경망 모델에 대해서는 나
중에 자세히 설명할 것이다.
자연어 처리에서 순환 및 합성곱 신경망의 사용 빈도가 줄어든 이유는 다음과 같다.
●
입력이 자연어 토큰으로 이루어진 짧은 시퀀스인 경우 트랜스포머 모델에 포함된 어텐션 층이 순환 신경망
구조보다 빠르다. 길이가 긴 시퀀스의 경우에도 어텐션 층을 수정하여 입력 내 특정 이웃에만 초점을 맞출
수 있다.
●
순환 신경망 층에서 필요한 연속적인 연산의 수는 입력 시퀀스의 길이에 따라 달라진다. 반면 어텐션 층의
경우 일정하게 유지된다.
●
합성곱 신경망에서는 커널의 너비 (폭)가 입력과 출력 쌍 사이의 장기적 의존성
long
-
term
dependency
에 직접적
인 영향을 ...
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.

Read now

Unlock full access

More than 5,000 organizations count on O’Reilly

AirBnbBlueOriginElectronic ArtsHomeDepotNasdaqRakutenTata Consultancy Services

QuotationMarkO’Reilly covers everything we've got, with content to help us build a world-class technology community, upgrade the capabilities and competencies of our teams, and improve overall team performance as well as their engagement.
Julian F.
Head of Cybersecurity
QuotationMarkI wanted to learn C and C++, but it didn't click for me until I picked up an O'Reilly book. When I went on the O’Reilly platform, I was astonished to find all the books there, plus live events and sandboxes so you could play around with the technology.
Addison B.
Field Engineer
QuotationMarkI’ve been on the O’Reilly platform for more than eight years. I use a couple of learning platforms, but I'm on O'Reilly more than anybody else. When you're there, you start learning. I'm never disappointed.
Amir M.
Data Platform Tech Lead
QuotationMarkI'm always learning. So when I got on to O'Reilly, I was like a kid in a candy store. There are playlists. There are answers. There's on-demand training. It's worth its weight in gold, in terms of what it allows me to do.
Mark W.
Embedded Software Engineer

You might also like

개발자를 위한 필수 수학

개발자를 위한 필수 수학

토머스 닐드
클라우드 네이티브 애플리케이션 디자인 패턴

클라우드 네이티브 애플리케이션 디자인 패턴

카순 인드라시리, 스리스칸다라자 수호티얀

Publisher Resources

ISBN: 9791169212588