小李的公司由海口市迁往三亚市，其只需在工商部门和税务部门变更地址信息即可，无需办理注销税务登记。