ПОВОРОТ НАЛЕВО И КОГО ПРОПУСКАЕМ

Вчера попал вот в такую ситуацию. Готовлюсь к повороту налево. Пропускаю встречных (кто прямо и направо). На желтый начинаю поворот и направляю машину в средний ряд. В этом момент с визгом тормозов мне выскакивает наперерез авто. Успеваю затормозить и сам. Ко мне претензии, почему я его не пропустил, т.к. он поворачивал направо со встречной полосы. Вроде он и прав. Но, он уже рванул на желтый, а вполне и на красный. Сразу хотел занять средний ряд, чтобы не перестраиваться. Если бы он направил сначала свое авто в крайний правый ряд, а потом уже перестроился в средний, то проблемы бы не было. Как раз эта полоса правая идет на сужение и подразумевает такой маневр. Я, направляя свою машину в средний ему не мешаю, он в правый и все нормально. Я ведь не создаю ему помеху. И поворот направо он должен сделать только с крайней правой, если нет других разрешений, например пунктирная линия показывающая направление поворота в средний ряд. Вот если бы была дорога с одной полосой, то тогда я однозначно должен пропустить.
Человек нервный, бегал орал, чтобы я вышел на разборку. Жена схватила за руку и не пускает, зная, что я в прошлом хороший боксер. Да и глупо выяснять отношение посередине дороги, так и в полицию можно загреметь. Я таких ситуаций уже насмотрелся по видео в Инете.... Может я и не прав, ведь я еще "чайник" Прошу научить, чтобы я в дальнейшем знал, как поступать в таких ситуациях.