宋金第一次议和时，原有将宋朝所有皇室成员全部遣返回国的约定，所以当韦氏被独自遣返回国的消息传出之后，立即就在所有滞留在金国的宋俘之中引起了一阵躁动，有为韦氏高兴的，也有为自己难过的，也有仍然对回国抱有幻想的，凡此种种，不一而足。韦氏在金国生活了十六年，虽然日夜都在盼着能够回国，但当这一天真正来临之时，心中也是感慨万千，不禁与跟她感情最深的乔贵妃抱头痛哭。乔贵妃当时仍然健在，像她们这些能活这一天的女性，都是已经找到靠山的人，所以也不缺钱，乔贵妃特意拿出了五十两黄金相送，并哭着对韦氏说道：“姊姊此归，见儿郎，为皇太后矣！若到快活时，莫忘了此中不快活。”
韦氏也哭着对乔贵妃说道：“不敢忘今日。”
临行那天，宋钦宗紧紧地挽住韦氏的车轮，嚎啕痛哭道：“第与吾南归，但得为太乙宫主足矣，它无望于九哥（赵构）也！”
宋钦宗是最该南返的人，韦氏一时无计，只好发誓道：“吾先归，苟不迎若，但瞽吾目！”当然宋钦宗肯定是回不去了，后来韦氏的眼睛还真就瞎了。
韦氏与宋钦宗、乔贵妃经过一番生离死别后，就在她的女真丈夫完颜宗贤护送下南返。韦氏这个人很有心计，生怕在回国路上出现意外，便向完颜宗贤借贷三千两黄金，约好进入宋境后加倍偿还。当然，韦氏此举也很有可能是为了在离开金国之前，送给完颜宗贤一笔厚礼，以感激他这么多年来对自己的照顾。
等到了淮河边上，完颜宗贤就提出先把本利结清，再放韦氏过境。宋方派来迎接韦氏的是参知政事王次翁，此人头脑十分灵活，他生怕自己如果垫付了这笔钱，回头秦桧会误以为他想暗中巴结韦氏，所以尽管“所赍甚丰”，但就是不肯给钱，韦氏也因此在淮河北岸滞留了三日，直到南宋方面结清了这笔借款，韦氏才得以渡过淮河。
韦氏回到南宋后，受到的自然是最高规格的礼遇，一方面她确实是赵构的生母，赵构孝敬也他是理所当然。而另一方面，赵构为了能给自己奠定与金国媾和的舆论基础，也没少打韦氏这张孝字牌，不对韦氏好点实在是说不过去。
韦氏归宋，看似是一件再正常不过的小事，其实也对南宋政局造成了很深刻的影响。赵构为了封锁韦氏在金国再婚、生子的消息，便不再接纳任何被金国掠去的皇室成员，这样宋钦宗就成了直接受害者，而那些曾经在金国生活过、又逃回南宋的人也跟着倒霉，最典型的莫过于柔福帝姬。
柔福帝姬是宋徽宗的十女儿，北宋灭亡之后也被掠至金国，与韦太后一起被发往浣衣院，又一起被盖天大王完颜宗贤所得，但不知道她用了什么手段，竟然从金国逃了回来，后来经过内侍们的鉴定核实，认为这个逃回来的柔福帝姬确属正品。赵构也信以为真，从此将柔福帝姬视作掌上明珠，让她享尽了荣华富贵，但是韦太后一回来，就说柔福帝姬是个冒牌货，当即命人活活打死。柔福帝姬究竟是真是假，只有韦太后自己知道了，但另一个人的身份则绝对是货真价实，此人就是有着“宋代苏武”之称的使臣洪皓。
洪皓，字光弼，饶州（今江西波阳）人氏，自幼博学多才，二十几岁就考中了进士，据说当时的权臣王黼、朱勔都想招他为婿，但洪皓不愿与这些奸臣同流合污，所以全部拒绝。建炎三年（1129年），刚刚南渡的赵构急于同金军讲和，洪皓奉命出使金国，但刚到太原就被完颜宗翰扣住了，其后就一直滞留在金国。洪皓在金国期间，始终坚贞不屈，多次暗中给南宋传递情报，并规劝金人不要出兵攻打南宋，由于他高尚的品格，最后连金人都很敬佩他，但始终不肯放他回国，直到两国达成和议之后，才将他遣返回南宋。
洪皓被金国扣留十五年，最后以这种方式回到国内，朝野上下无不敬服，像这种人朝廷自然要褒奖，赵构称他“身陷敌区，乃心王室，忠孝之节，久而不渝，”把他跟汉朝的苏武相提并论。洪皓朝见韦太后时，韦太后也以洪皓是故人为由，命人撤帘相见，给洪皓以极大的殊礼。然而没过多久，洪皓就被贬至英州（今广东英德），罪名竟然是“造不根之言，簧鼓众听，几以动摇国是”。洪皓和柔福帝姬一样，都是那个时代的名人，同样也都是熟知韦太后在金国经历的知情人，因此先后倒霉。除此之外，那些曾在金国长时间生活过、并且回到南宋的人也都陆续获罪，比如说跟洪皓一起被遣返回国的使臣朱弁、张邵，跟韦太后一起回国的官员白谔，都被安上了各种莫名其妙的罪名贬出朝廷，目的自然是为了防止他们泄露韦太后的秘密。
除了严格控制南归人员散布不利于韦太后的消息之外，赵构还有一项重要手段就是禁记私史。宋朝是一个文风大盛的朝代，知识分子地位很高，而且限制很少，所以很多士大夫都有记录私史的习惯，比如说大史学家司马光的《涑水记闻》就是一部私史。这一类私史有着很高的学术价值，朝廷对此从不反对，即便是赵构本人最初也抱着支持态度，比如说他就命人专门对《涑水记闻》进行过整理。但是到韦太后南归之后，赵构的态度一下变了过来，绍兴十四年四月，秦桧上表“乞禁野史”，赵构当即赞成，还说：“此尤为害事，如靖康以来，私记极不足信。上皇有帝尧之心，传位于渊圣，实出神断，而一时私传以为事由蔡攸、吴敏。”于是赵构、秦桧便开始大力禁止私史，使大批私史惨遭焚毁，或在史馆中被肆意篡改，最终造成了宋代历史上最大的一次文化灾难。
经过这一系列举措，韦太后的丑事被掩盖了下来，当然这些事情并不能怪她，她本人也是个受害者，但好在晚年还算幸福，回到南宋之后又活了十七年，直到绍兴二十九年（1159年），享年八十岁。而其他人就没那么幸运了，随着时间一天天过去，那些被金人掠走的俘虏们陆续离开人世，到死也没能回到故土，就连金国答应归还的徽宗帝后梓宫，也很有可能是假冒的。当时赵构收到徽宗帝后梓宫时，并没有开棺验货，而是直接安葬于会稽攒宫，不过到南宋灭亡后，元朝江南释教总统、西域番僧杨琏真伽盗挖徽宗陵寝时，打开该梓宫后却没有发现宋徽宗的尸骨，仅仅只有朽木一段。