1. Читаем текст pip install python-docx
2. пишем регулярку по поиску нужной подстроки. это самая заморочная часть. тут надо смотреть структуру документов , если есть какие то общие шаблоны типа "присутствует..." или "г. * ул. * цифры улицы" то надо цепляться за них в регулярке. также для проверки можно сверять найденные регуляркой значения, со списком городов, для проверки корректности результата.
только его надо где то предварительно стянуть)
3. пишем в excelpip install openpyxl
Все это в цикле по одному документу , и второй уровень цикла - по параграфам в документе.