一千多名开国将军中唯一的外国人, 毛主席说他用不好就撂挑子