проблема скорее всего в муфте 3, 4 передачи (скорее всего), либо в вилке включения 3, 4 передачи.
суть в том, что рычаг находясь в нейтральном положении, располагается в области штока вилки включения 3, 4 передачи. на штоке находится сама вилка, а вилка входит в муфту. Так вот если муфта разболталась или по каким-то еще причинам бьет по вилке, то соответственно эти удары отдаются и в рычаг.