将AI与人类偏好对齐可能很困难。但市场上有不止一种AI,用户可以选择使用哪种。我们能否在不解决对齐问题的情况下获得完全对齐AI的好处?在一篇新论文中,我们研究了一个答案为肯定的情境。