陪审员回避由法官决定吗

申请陪审员回避由谁决定