0

На что влияет разрядность шины данных?

У RTX 4090 она 384 бит. У Quadro A6000 она то же 384, и стоит она в 3 раза дороже наверное потому что у нее больше памяти.

А вот у Tesla A100 она составляет 5120 бит, и стоит она еще в 2 раза дороже последней, при равных прочих характеристиках (вроде как).

И если будет карта A6000, то там больше памяти, значит можно будет более большие сетки запускать, или гонять большие пачки данных.

А вот на что повлияет разрядность шины данных, которая в 10+ раз больше у A100? Ответ интересен именно в контексте обучения сеток, в частности на PyTorch. И в частности, если ставить несколько карт.

В интернете пишется, что это ускоряет обмен данными между процессором этой карты и ее памяти. Но это как-то не очень понятно, что именно и на сколько ускорится для питорча.

Так же будет интересно узнать, как сказываются упоминания в этих картах, что у них столько-то тензорных или cuda ядер.

10
  • ну примерно условно так. за один такт процессор обрабатывает 2 байта на процессоре общего применения - это 8+6=16 бит, а на графической карте сразу 5120бит. ощущаете разницу на один такт? ну и, соответственно, одновременная работа с массивами, матрицами... и много другого. а количество ядер - это собственно количество упрощённых процессоров и выполняющих эти операции. ru.wikipedia.org/wiki/…
    – nexoma
    13 апр 2023 в 23:33
  • ru.wikipedia.org/wiki/…
    – nexoma
    13 апр 2023 в 23:33
  • ru.wikipedia.org/wiki/GPGPU
    – nexoma
    13 апр 2023 в 23:35
  • У A6000 примерно таже частота, и даже чуть по больше количество процессоров, чем у A100. Следуя логике, что производительность зависит от шины, то либо у A6000 процессоры простаивают, т.к. на них не хватает шины - лишних понаклепали. Либо у A100 кусочек лишней шины и она простаивает, т.к. ей не хватает процессоров куда ее применить. Как это соотносится? 14 апр 2023 в 0:19
  • есть узкое медленное место - постоянное чтение-запись в оперативку видеокарты данных.
    – nexoma
    14 апр 2023 в 0:50

1 ответ 1

0

вот по профилированию, но не пробовал

https://github.com/NVIDIA/PyProf

https://pytorch.org/tutorials/recipes/recipes/profiler_recipe.html

Ваш ответ

By clicking “Отправить ответ”, you agree to our terms of service and acknowledge you have read our privacy policy.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.