Вход Наше всё Теги codebook 无线电组件 Поиск Опросы Закон Четверг
25 апреля

О смысле всего сущего 0xFF Средства и методы разработки Мобильная и беспроводная связь Блошиный рынок Объявления

Микроконтроллеры PLD, FPGA, DSP AVR PIC ARM, RISC-V Технологии Кибернетика, автоматика, протоколы Схемы, платы, компоненты

Средства и методы разработки

1015235 Топик полностью

фyтбoлиcт (01.07.2020 16:54, просмотров: 17) ответил Evgeny_CD на [Cerebras - компьютер на одной пластине. 18 Гбайт SRAM, 400k ядер, 15 кВт тепла] Шутили насчет микросхемы с двумя ручками для переноски? Как всегда, СССР просто обогнал свое время.

продвигается какое-то недопонимание.

1. сниженная разрядность используется прежде всего в инференсе, где вычислительная ошибка некритична, поскольку обученная сетка все-равно сойдётся.

2. лёрнятся сейчас, преимущественно, в BF16. все хотели бы точнее, но "локоток не укусишь". даже интель в AMX её заложил.

- Много раз писал, что у меня недостаток компетентности по AI. Неученый я в этой части. Evgeny_CD(185 знак., 02.07.2020 10:01)
  - есть. примитивно - касательную с конечной точностью можно провести к любой гладкой функции. снижение разрядности ничем не ломает такое доказательство. любые наборы входных данных - это уже совсем другая тема, безотносительно точности и формата вычислителя. - фyтбoлиcт(02.07.2020 11:21, )