为何公网 IP 也有连接数限制？

我看见好多人，有公网 IP ，但依然称连接数被限制为多少多少。 我的理解，连接数是 NAT 网关作出的限制。维持 NAT 状态消耗内存和 CPU ，不可能无限保持。 但是，如果有公网 IP ，那么运营商就只要搬运 IP 包就行了，对运营商来说应该不存在“连接”这个概念了？