Permission сделать что-то by owner

Работаю с djangorest. Не могу понять, как правильно задать retrieve, patch by owner. Т.е, есть таблица, в ней есть запись, в записи есть ForeignKey на User. Как мне сделать так, чтобы по api мог читать и изменять эту запись только owner?