Don't let me keep you from your work.

keep 在这里是及物动词，意思是"延迟、阻止"（delay or prevent）。 keep someone from something/doing something 是一个固定搭配，表示"使某人无法做某事"或"耽误某人"，即让某人因为被耽搁而无法正常进行某项活动。