В Германии ещё до войны был план уничтожить голодом 20-30 миллионов русских (советских) людей. Поэтому советских пленных изначально кормили гораздо хуже чем других пленных. Красный крест хоть и находился в нейтральной стране, но старался действовать в интересах Германии чтобы та не захватила Швейцарию.
В этих условиях СССР не видел никакого смысла сотрудничать с такой организацией.