wujiekd

要说当下制约大模型释放更大规模潜力的桎梏，除了机器幻觉，肯定当属受限的上下文长度，前两天微软的 LongNet 正将 Transformer 的上下文长度扩展到夸张的 10 亿量级。