TCP还是Unix Socket?

在linux中写了两个程序，一个基于QT，一个基于Python，各自有另外一方做不了(或不合适做)的任务。
然后两个进程需要互相发送数据进行通信。所以想到socket通信。但是选择TCP还是Unix Socket就犯了难。
本身服务器端是不需要外网通信的，所以初步选择了Unix Socket,但是常常因为对应的socket文件已经存在了，导致服务器启动不起来。但是用TCP的话，又会占用一个端口，并且不希望开放外部访问。
希望有做过类似东西的大神给指点一下这两种当时的正确用途都是什么？