PCI Express: Как правильно реализовать систему? Опции

[doom13]

Приветствую.
Подскажите, как правильно реализовать систему?
Есть плата HTG-V7-G3, принимает данные по 10G Ethernet и надо запихнуть эти данные в ПК под управлением Linux.

Пока добавил в проект FPGA ядро AXI Bridge for PCI Express Gen3 Subsystem, GPIO (повесил на светодиод), Timer (прерывание
от таймера завёл на PCIe bridge). Всё это повесил на PCIe:BAR0. Под Linux сделал простенький драйвер для PCI,
который умеет писать регистры периферии. На прерывание от PCIe (таймера) повесил обработчик который "моргает" GPIO.
Драйвер выделяет буфер памяти, адрес буфера записываю в регистры моста AXIBAR2PCIEBAR_0U, AXIBAR2PCIEBAR_0L -
могу писать данные с FPGA в буфер выделенный драйвером. Т.е. умею писать/читать данные и со стороны AXI и со стороны PCIe.

Посмотрел как работает символьный драйвер. Выделяется буфер памяти, его могу писать/читать из user space.
Счас нужно добавить DMA, хочу использовать ядро CDMA от Xilinx (уже посмотрел, как оно работает).

Не совсем понимаю, как лучше собрать все эти куски вместе? Кто должен выступать инициатором передачи?
Пока вижу такой путь. Система стартует и драйвер настраивает всю периферию. По заполнению буфера в FPGA на PCIe bridge идёт прерывание.
Драйвер видит, что пришло прерывание, и запускает CDMA. CDMA должен успеть перебросить данные в выделенный драйвером буфер.
В user space используются: fopen() - для доступа к файлу драйвера, fread() - для чтения данных из буфера драйвера, fclose() -
при завершении работы user application. fread() будет работать в пуле, пытаться прочитать нужный объём данных.
Возможно, что-то понимаю неправильно и есть верный путь реализации системы?

Нужно ли иметь доступ к управлению периферией в FPGA из user space или достаточно будет все настройки осуществлять из kernel space?
Видел, что есть ещё какие-то ioctl, но пока не разобрался, что это такое. Нужно ли оно для моего случая?
Спасибо.

[карамболь]

спрашивайте если что

[doom13]

спрашивайте если что

Может быть Вы могли бы ответить на вопрос про прерывания (вот тут спрашивал, но так и не понял всех ньюансов)?
1) Как происходит назначение линии прерывания устройству?
2) Если это определяет операционка или BIOS, почему отличается номер в конфиг-спейсе устройства и в системе, когда прерывание работает?
3) Почему, когда поменял местами видеокарту и мою плату номера линий прерываний для данных устройств не изменились? Потому ли, что драйвер видеокарты стартует при запуске системы, а для моего устройства запускается уже позже?
4) Если для устройства (в железе) разрешаю MSI и задаю вектор из 4-х MSI (например), почему операционка видит, что устройство поддерживает 4 MSI, а выделяет под устройство только одну линиию? Если жёстко говорю выделить больше выкидывает ошибку.
Как тогда должен строиться драйвер, если устройство поддерживает 4 MSI, а система выделяет одну линию?

[карамболь]

Может быть Вы могли бы ответить на вопрос про прерывания (вот тут спрашивал, но так и не понял всех ньюансов)?
1) Как происходит назначение линии прерывания устройству?
2) Если это определяет операционка или BIOS, почему отличается номер в конфиг-спейсе устройства и в системе, когда прерывание работает?
3) Почему, когда поменял местами видеокарту и мою плату номера линий прерываний для данных устройств не изменились? Потому ли, что драйвер видеокарты стартует при запуске системы, а для моего устройства запускается уже позже?
4) Если для устройства (в железе) разрешаю MSI и задаю вектор из 4-х MSI (например), почему операционка видит, что устройство поддерживает 4 MSI, а выделяет под устройство только одну линиию? Если жёстко говорю выделить больше выкидывает ошибку.
Как тогда должен строиться драйвер, если устройство поддерживает 4 MSI, а система выделяет одну линию?

Не знаю как это реализовано на уровне Биос. А надо ли ? Я сначала разрешаю msi (pci_enable_msi) а уже потом request_irq и номер прерывания не меняется до перезагрузки драйвера, смотрю в /interrupts.

[doom13]

Не знаю как это реализовано на уровне Биос. А надо ли ? Я сначала разрешаю msi (pci_enable_msi) а уже потом request_irq и номер прерывания не меняется до перезагрузки драйвера, смотрю в /interrupts.

Так же сделано, но хотелось бы знать, как оно назначилось.