PCIe and FPGA

[faa 0]

1 минуту назад, RobFPGA сказал:

Kintex 7,  Kintex US,  Virtex 7,  

Kintex 7 даже через кабель - вопросов не было, gen2 же.

Kintex US через кабель - проблемы были. Поддержка xilinx спросила "хоть где-то работает?". На ответ "да" послали к вендорам хостов ;)

Virtex 7 не использовали.

[Flood 0]

4 часа назад, faa сказал:

В конторе есть еще несколько железок под EPYC, по ним тоже есть статистика.

Местами не очень хорошая ;) Особенно по супермикро :(

Спасибо! Я-то по прошлому письму подумал, что у EPYC все в принципе хорошо, а оказывается, не все так однозначно.

А что с супермикро не так? Надежность не очень? Или именно тайминги в работе странные?

9 часов назад, RobFPGA сказал:

И без  буферизации в FPGA перед контроллером PCIe работать нельзя.  Да и не только дело в PCIe.  Тот же доступ в память тоже шарится.

Понятно. Весь вопрос - в величине буферов. Пока что подбирал практически (поток + тестовая задача на доступ в память и копим таймеры на замираниях), т.к. внешней памяти не было,  а внутренняя не резиновая. Но понимаю, что это не слишком надежно - на одной системе будет работать, на другой задержки могут оказаться в многие разы больше, и все развалится.

[faa 0]

17 часов назад, RobFPGA сказал:

Тогда  странно, у меня было несколько систем  на Intel с похожими параметрами (x8 Gen3, поток 4..6 GB/s) и таких особых проблем не было.    

Основное чуть не забыл, мы четыре потока под 5ГБ каждый в одну машину толкать пытаемся ;)

2 в одну ноду, 2 в другую. Если интел - в разные камни. Если EPYC - делим на 4 ноды.

13 часов назад, Flood сказал:

Спасибо! Я-то по прошлому письму подумал, что у EPYC все в принципе хорошо, а оказывается, не все так однозначно.

А что с супермикро не так? Надежность не очень? Или именно тайминги в работе странные?

 

С gigabyte все неплохо. Работает, биос полный - есть доступ ко всем параметрам, техподдержка отзывчивая и толковая.

Супермикро: Работает плохо. Жлобы, за каждый чих хотят денег. Биос обрезан - параметры далеко не все, подкрутить ничего нельзя. ТП - динамисты и футболисты.

Это если коротко.

ЗЫ: Всех с наступающим 2022 НГ!

[dmitry-tomsk 0]

А кто-нибудь пробовал уже xcau10p? pcie4, 12 gtp, вроде может быть дешёвый мостик из оптики в pcie.

[alver 0]

13 минут назад, dmitry-tomsk сказал:

xcau10p

У младших моделей (10p/15p) нет корпусов для работы на скоростях pcie4, да и сам контроллер урезан. В последней Vivado 2021.2 нет поддержки 10p/15p, за исключением некоторых пользователей с early access.

Edited December 29, 2021 by alver

[dmitry-tomsk 0]

6 minutes ago, alver said:

У младших моделей (10p/15p) нет корпусов для работы на скоростях pcie4, да и сам контроллер урезан. В последней Vivado 2021.2 нет поддержки 10p/15p, за исключением некоторых пользователей с early access.

 

Спасибо. Ну их вроде и в продаже пока нет.