Linux копирование файлов исключая файлы по списку?

Нужно копировать файлы применяя файл исключения ignor.list
ignor.list содержимое файла
3.mp3
4.mp3
6.mp3

Чтобы получалось вот так

dir1                       dir2 
1.mp3                  1.mp3
2.mp3                  2.mp3
3.mp3                  5.mp3
4.mp3                  7.mp3
5.mp3
6.mp3 
7.mp3

Есть еще подводные камни в названиях файлов например (DJ KUBA-NE!TAN - Party On!.mp3, DAVE ARMSTRONG - Make Your Move (Part 2).mp3, LMFAO - Sexy & I Know It.mp3, QUINTINO-CHEAT CODES - Can't Fight It.mp3)
Благо список ignor.list небольшой и редактирую вручную и заносить записи такова вида непроблема (LMFAO\ -\ Sexy\ \&\ I\ Know\ It.mp3)

p.s. Применять можно любые средства cp, find, rsync, скрипты, главное чтоб выполняло задачу