Skip to Main Content
Проектирование систем машинного обучения
book

Проектирование систем машинного обучения

by Chip Huyen
March 2023
Beginner to intermediate content levelBeginner to intermediate
364 pages
14h 37m
Russian
Foliant
Content preview from Проектирование систем машинного обучения
Разработка модели и ее автономная оценка | 181
Другая проблема заключается в том, что распараллеливание вашей модели на не-
сколько машин может привести к тому, что размер пакета станет очень большим.
Если одна машина обрабатывает пакет размером 1000 признаков, то 1000 машин
уже обрабатывают пакет размером 1 млн признаков (в 2020 году OpenAI GPT-3
175B работает с пакетом размером 3,2 млн признаков). Но это и упрощает вычис-
ленияесли обучение эпохи на машине занимает 1 миллион шагов, то обучение
ее на 1000 машин может занять всего 1000 шагов.
Эпоха здесь означает обучение нейронной сети со всеми обучающими
Become an O’Reilly member and get unlimited access to this title plus top books and audiobooks from O’Reilly and nearly 200 top publishers, thousands of courses curated by job role, 150+ live events each month,
and much more.
Start your free trial

You might also like

Проектирование программ на С++

Проектирование программ на С++

Klaus Iglberger

Publisher Resources

ISBN: 9786012717273