二是关于重大关系。对于“保护与利用”，习近平总书记强调“要始终把保护放在第一位”，同时要合理利用，充分发挥文化遗产的作用。对于“保护与发展”，要处理好城市改造开发和文化遗产保护的关系，在保护中发展、在发展中保护。对于“保护与开发”，习近平总书记强调，“发展旅游要以保护为前提，不能过度商业化，让旅游成为人们感悟中华文化、增强文化自信的过程。”

      习近平在贺信中指出，30年来，在党的坚强领导下，中国工程院团结凝聚院士和广大工程科技工作者，大力推动工程科技发展，不断攻克科技难关，建设大国工程，铸造国之重器，为推动我国工程科技创新进步、促进经济社会高质量发展作出了重要贡献。天博综合app官网登录

      三是关于保护理念。倡导推动系统保护，习近平总书记强调“保护好前人留下的文化遗产”，包括文物古迹，历史文化名城、名镇、名村，历史街区、历史建筑、工业遗产，以及非物质文化遗产；倡导加强老城保护，强调“历史悠久的老城区，是最宝贵的东西，不能因为浮躁、无知而破坏掉”，老城不能再拆；倡导保留历史原貌，不能搞过度修缮、过度开发，不能搞“拆真古迹、建假古董”那样的蠢事。天博综合app官网登录

      有别于传统的固定系数(固定超参)的aux loss，昆仑万维在MoE训练的不同阶段让模型自适应的选择合适的aux loss超参系数，从而让Drop Token Rate保持在合适的区间内，既能做到expert分发的平衡，又能让expert学习具备差异化，从而提升模型整体的性能和泛化水平。在MoE训练的前期，由于参数学习不到位，导致Drop Token Rate太高(token分布差异太大)，此时需要较大的aux loss帮助token load balance；在MoE训练的后期，昆仑万维希望Expert之间仍保证一定的区分度，避免 Gating倾向为随机分发Token，因此需要较低的aux loss降低纠偏。天博综合app官网登录（撰稿：何心静）