按照楼主的拍摄需求，更推荐富士XT20。
1、数码成像，大底王道。也就是说，传感器的面积越大越好。在目前的传感器A/D技术（模数转换技术）处于同一技术层面的情况下，SNR技术（信噪比）就是影响成像的最重要核心，（信噪比的基础就是像素总数与传感器面积之比产生的像素密度差异导致的有效讯号与无效杂讯之比）。富士XT20（以下称富士）搭载半画幅2400万像素的 X-Trans CMOS III 传感器（面积3.73平方厘米），奥林巴斯E-M5 Mark II（以下称奥巴）搭载4/3画幅1600万像素的 Live MOS 传感器（面积2.25平方厘米），因此，富士的像素密度更低，单个像素点的光敏性更好，成像质量也就更高，而且富士在具备更好信噪比指标的同时还具备更高的像素，可以输出更大的画幅（放大更大的照片）。同时，富士具有更大面积的传感器（像平面更大），在使用相同光圈镜头的情况下，虚化的能力也更强；
2、镜头。镜头是影响成像质量的最重要核心，像质百分比是传感器占45%，镜头占50%，处理器占5%。由于无反相机（微单）可换镜头，富士和4/3系统各有好镜头和差镜头，难以具体展开一一对比，富士的好镜头更好一点，但价格贵，奥巴的镜头群更丰富一点，去掉两头极值，4/3系统镜头在总体上更好一点。使用什么样的镜头，有钱袋子决定。总体上高配镜头富士好，低配镜头奥巴好，中配镜头差不多，但镜头的便携性奥巴好；
3、处理器。由于现在后期软件的强大，处理器主要是在合成速度等方面的作用更大，RAW的成像质量与处理器的关联已经很小，不再展开说，就楼主需要的记录生活而言，富士和奥巴的处理器速度方面的差异基本可以忽略，RAW的像质也可以通过后期软件修正。但就直出的质量而言，富士比奥巴更好一点，富士还有其独家的胶片模式，很漂亮，而奥巴的自动白平衡从来就不准，画面泛红，如果在机内关闭暖色，该暖的色彩有呈现泛白，奥巴唯一值得骄傲的是业内一流的蓝色，即“奥巴蓝”。但就总体色彩而言，富士优于奥巴；
4、操控。操控主要包含对焦速度、精度、追焦能力、连拍张数等等，有关拍摄成功率。富士和奥巴各有所长。其中，富士的亮点是325点自动对焦系统，对焦更快范围更广，奥巴则是81点自动对焦系统，差不少；奥巴的亮点是强大的五轴防抖系统和传感器移位技术（即通过传感器位移拍摄得到4000万像素的照片。这种高分辨率模式可以一次连拍8张1610万像素的图像，每次拍摄将传感器移动0.5个像素，将8张图像的数据合成为一幅高精细的图像，相当于使用4000万像素图像传感器进行拍摄），就总体操控性能而言，富士对焦速度更快，更合适抓拍，奥巴五轴防抖厉害，更不容易糊片，（传感器移位在记录生活方面意义不大），各有所长。
5、就总体的像质和操控而言，富士更好一点，故推荐富士XT20。至于镜头，由于富士镜头比较贵，楼主没有说预算，我大概说一下。如果一机一镜，高配推荐富士XF16-55，低配推荐富士XF18-55，不推荐富士XC16-50；如果一机两镜，推荐XF18-55+XF56F1.2R（高配），或者XF18-55+XF23F1.4R（中配），或者XF18-55+XF35F1.4R（中下配）。其他题材比如拍风光用的XF10-24F4R，远摄用的XF100-400等等以后看情况慢慢添置；
6、至于颜值，各花各眼，没有标准。但便携性（机身+镜头），则是奥巴好于富士。