Multimodal learning has become a pivotal approach in developing robust learning models with applications spanning multimedia, ...

在 NeurIPS 2024 大会上，OpenAI 联合创始人兼前首席科学家 Ilya Sutskever 在其主题报告中展望了基础模型的未来研究方向，其中包括了 Inference Time Compute ...

在 NeurIPS 2024 大会上，OpenAI 联合创始人兼前首席科学家 Ilya Sutskever 在其主题报告中展望了基础模型的未来研究方向，其中包括了 Inference Time Compute ...

为了适应长视频，一种时间平铺程序程序会将视频切分成片段，每个片段分别编码后拼接在一起。模型本身由一个类似DiT的主干网络给出，xt沿时间和空间维度被分块，然后将图像块传递给一个Transformer，Transformer会采用图像块之间的自注意力以及与语言模型嵌入的交叉注意力。

随着基因组学、蛋白组学以及同类学科逐步发展，潜在药物靶点和人群分层标志物大量涌现。这类疾病病因/进程的相关认知应当有机融合到创新药临床评价中去。但是很遗憾，目前基础研究和制药界尚未能充分消化应用这些标志物资源。

疼痛和瘙痒是具有不同性质的厌恶性感觉，在重叠的通路和大脑区域中处理，包括前扣带皮层（ACC），这是其情感维度的关键，但其在ACC中处理的细胞机制尚不清楚。2025年3月4日， 韩国国立庆北大学的Hyoung-Gon Ko及其团队在Nature Communications上发表题为《Processing of pain and itch information by modality-specif ...

在阿斯利康全球研发格局中，中国研发中心如今扮演着三个重要的赋能角色：加速器、孵化器、真正的创新者。撰文丨黄思宇成为全球创新药研发的领航者。这是2020年4月，何静博士出任阿斯利康全球高级副总裁、全球研发中国中心负责人时，带领阿斯利康中国研发管理团队设 ...

投资医药也是一样。彭巍认为，制药过程中最难让AI赋能的环节是靶点的预测与选择，因为致病机理是最复杂的，特别是非肿瘤适应症，很多基因有一定相关性，但并不是一个好的做药靶点。这种know-how（技能），需要兼具对biology（生物学）的深入理解和多年的制药经验，综合评估，不属于AI容易挖掘到的数据。

跨模态对齐和推理为 Multimodal RAG：多模态RAG 带来了独特的挑战： 提出了一个多模态RAG系统的通用框架； 并对多模态RAG系统进行了系统且全面的分析，涵盖了数据集、评估指标、基准测试、评估方法以及检索、融合、增强和生成方面的创新 多模态检索增强生成（RAG）通用框架，突出展示了每个阶段所采用的先进技术和方法。查询预处理、多模态数据库、检索策略（模态为中心）、融合机制、增强技术、生 ...