[HolyDel]

Проблема в том, что изменяя мировую матрицу я не изменяю матрицу объекта в PhysX.

т.е. после вытаскивания матрицы из объекта у тебя еще была какая-то причина ее менять? какая?

камера не ригидбоди?