5月27日，大模型架构和AI应用的研发公司元始智能预告其下一代模型架构RWKV-8“Heron”即将发布，并率先公开该架构中的核心创新技术之一——DeepEmbed。

推理 moe heron parallelism beyer 2025-05-27 19:36  4

自2018年由Hugging Face开源以来，transformers库已成为自然语言处理（NLP）乃至多模态人工智能领域的基石。它汇集了全球最前沿的模型，如BERT、GPT、T5等，支持数千万开发者快速构建智能应用。随着人工智能算力的飞速发展，模型越来越大

训练 震撼 transformers parallelism 2025-05-23 07:37  4