每日 AI 评测速递来啦(1.7)

【可不卸载重装】VS2019新建项目里没有CUDA选项 问题:VS2019 新建项目里没有CUDA选项,vs也属性没有cuda。这是因为你在Visual Studio 2019安装之前,先安装了CUDA Toolkit。 阅读详情

司南·Daily Benchmark 专区今日上新!

PET-Bench

首个面向多模态大模型的大规模功能影像评测基准,包含来自 9,732 项多中心、多示踪剂 PET 检查的 52,308 条分层问答样本。

https://hub.opencompass.org.cn/daily-benchmark-detail/2601%2002737

M3MAD-Bench

一个面向多领域、多模态、多维度指标的统一评测基准,用于系统评估多智能体辩论(MAD)方法的有效性、鲁棒性与效率。

https://hub.opencompass.org.cn/daily-benchmark-detail/2601%2002854

ST-Bench

一个面向时间序列的时空推理基准,涵盖病因推理、实体识别、相关性推理和上下文预测等核心任务。

https://hub.opencompass.org.cn/daily-benchmark-detail/2601%2003248

基于 Mask R-CNN 的实例分割:从零开始构建一个强大的分割模型 在本文中,我们将介绍如何使用 Mask R-CNN(Region-based Convolutional Networks with Masks)实现实例分割。实例分割是计算机视觉中的一种任务,旨在识别并分割图像中的各个对象。我们将讨论如何准备数据集、配置 Mask R-CNN 模型并在自定义数据集上进行训练。 阅读详情

相关推荐

脑电分析中的频谱特征提取 —— 从理论到实践

本文系统介绍了脑电信号(EEG)频谱特征提取方法及其应用。EEG信号通过频谱分析可分为Delta、Theta、Alpha、Beta和Gamma等具有明确生理意义的频段。文章详细讲解了功率谱密度、频带功率、相对功率、频谱熵等关键特征的计算方法,并提供了Python实现示例,包括模拟数据和真实CHB-MIT癫痫数据集的处理流程。这些频谱特征在脑机接口、情绪识别、疲劳监测和癫痫检测等领域具有重要应用价值。文章强调频谱特征结合时域和非线性特征可提升分析效果,为EEG研究提供了实用指导。

qq_32516809的博客 1441

AI技术动态筛选与解读:每日AI评测速递实践

在信息爆炸的时代,高效筛选和解读技术动态成为AI从业者的核心需求。通过构建多层过滤体系和自动化处理流程,可以从海量数据中提取有价值的技术资讯。关键技术包括基于BERT的信息抽取、知识图谱构建和热点识别算法,这些方法显著提升了信息处理效率。实践表明,结合自动化工具与专家复核的混合模式,既能保证时效性又能确保内容质量。这类技术动态服务特别适用于需要持续跟踪AI前沿的研究人员和工程师,如每日AI评测速递项目所示,其结构化呈现方式和深度技术解读为从业者节省了大量信息筛选时间。

csdndownload11123的博客 328

ABAP内表数据导出Excel:OLE、ALV与GUI_DOWNLOAD方案全解析

在企业级应用开发中,数据导出是连接后台系统与前端业务分析的关键桥梁。其核心原理是将结构化数据转换为通用文件格式,以实现跨平台的数据交换与可视化。从技术价值看,一个健壮的导出功能能显著提升数据处理效率,减少人工干预,是衡量系统实用性的重要指标。常见的应用场景包括报表生成、数据交接和临时数据提取。本文聚焦于SAP ABAP开发领域,深入探讨如何将内表数据高效、稳定地导出至Excel,涵盖了OLE自动化、ALV标准导出以及基于CL_GUI_FRONTEND_SERVICES与GUI_DOWNLOAD的通用方案,并

weixin_32715349的博客 317

每日 AI 评测速递来啦(11.20)

一个以能力为核心构建的多模态推理评测套件,从多个主流基准(如 BLINK、TIR-Bench、MathVerse、MathVista 等)重新采样并整合数据,并基于六大能力维度对实例进行标注,同时补充视觉导航等交互场景。它为模型提供统一、可比的能力评估视角,可用于系统分析多模态推理模型在不同任务中的能力调度与协同表现。一个用于系统评估视频模型推理能力的综合基准。一个面向学术场景动态钓鱼攻击的统一框架与基准套件,用于系统性评估 MLLM 的防御能力。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 214

RunHarmony报错解析:如何解决data.use与cell.embeddings维度不匹配问题

本文深入解析了单细胞数据分析中RunHarmony函数报错'non-conformable arguments'的根源,即data.use与cell.embeddings矩阵维度不匹配。核心原因是assay(如RNA与integrated)错配导致细胞ID或数量不一致。文章提供了三种解决方案:最推荐显式指定assay.use参数,也可设置project.dim=FALSE或统一数据环境,并给出了最佳实践指南以避免此类错误。

weixin_29093017的博客 575

Dify视觉模型节点避坑指南:我用Qwen2.5-VL做OCR识别时踩过的3个坑(及解决方案)

本文分享了使用Dify平台和Qwen2.5-VL视觉模型进行OCR票据识别时遇到的三个常见问题及解决方案,包括文件变量传递、结构化输出和条件分支判断失效。通过实战经验,帮助开发者优化多模态模型在财务自动化中的应用,提升OCR识别精度和效率。

weixin_29284885的博客 401

每日 AI 评测速递来啦(11.21)

一个大规模、系统化评测大语言模型“撒谎”行为的基准测试平台,包含超 7 万条来自多模型、多数据集的诚实与撒谎示例,覆盖不同类型的撒谎动机和目标信念。一个面向地理空间基础模型(GeoFMs)的综合评估基准,涵盖分类、分割、回归、目标检测和实例分割等任务,使用 19 个许可宽松的数据集进行测试。首个用于评估具身智能体间接越狱能力的基准,包含 1,632 条良性指令和 3,957 条恶意指令,覆盖了广泛的任务复杂度与攻击情景。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 202

Allegro172版本DFM功能介绍

Allegro172版本提供了实时DFM检查的功能,让违反要求的地方实时以DRC的形式报出来,让加工不可加工因素在设计的时候同步避免。打开Constraint,选择Manufacturing, 所有DFM相关DRC都在这。把所有下面DRC开关(DFM,DFA,DFT)都选择on,选择OK。这个规则和物理和间距规则等等都没有关系,单独的一个加工规则。这些DRC大部分是正常的,正常的可以去修改规则来消除。等待DRC刷新,板子上会出现很多DRC,类似下图。下面介绍如何调用和产生DFM规则。一直往下点击next。

weixin_54787054的博客 1336

每日 AI 评测速递来啦(11.18)

一个面向法律与金融领域的开放性、高难度专业推理基准,包含 1,100 个专家撰写的任务和 19,356 条评分标准,由 182 名资深专业人士贡献。一个综合性基准,旨在探索和评估 LMMs 在跨视角地理定位和位姿估计中的能力,包含 10,859 对全景-卫星图像,覆盖 49 个国家的 128 个城市,并配备 755,976 对问答数据。用于评估面向服务的助手在长期用户交互中的个性化能力,创新性地设置了需求重述、方案推荐和多轮对话三大任务,全面评估系统对用户偏好和主观需求的建模能力。数据集来源于 70 篇。

OpenCompass的博客 498

matlab 点云可视化(1)——pcshow()函数可视化单个点云

matlab可视化单个点云常用方法汇总。

点云侠的博客 5357

使用 Simulink 进行电力电子系统的效率优化仿真

电力电子系统(Power Electronics System)是现代电力系统和工业自动化中的关键组成部分,广泛应用于可再生能源发电、电动汽车、不间断电源(UPS)、电机驱动等领域。为了提高系统的整体性能和经济性,必须对电力电子系统的效率进行优化。效率优化的目标是最大化系统的能量转换效率,减少损耗,从而提高系统的可靠性和经济效益。Simulink 提供了一个强大的仿真环境,可以用来设计、分析和验证电力电子系统的效率优化策略。本教程将详细介绍如何使用 Simulink 进行电力电子系统的效率优化仿真。

xiaoheshang_123的博客 355

每日 AI 评测速递来啦(12.30)

一个专门为评估工具集成推理智能体设计的基准,涵盖多模态、多步推理任务,用于测试智能体在自主工具调用与复杂决策场景下的表现。一个面向多模态大模型真实且高难度多视角场景的空间推理评测基准,涵盖 6 类任务、共 100 万条问答对。一个面向金融、医疗、法律与科技等高风险应用场景的专业语音评测基准。司南·Daily Benchmark 专区今日上新!每日 AI 评测速递来啦(12.30)

OpenCompass的博客 353

EEMD算法原理及应用

本博客主要概括EEMD算法的背景、原理以及应用,利用EEEMD对信号进行分解,然后选择有用的IMF分量进行叠加以完成信号的重构,从而实现对信号降噪。本文配套的源代码见文中链接,可供大家免费下载。

总结论文中的算法并给出论文的复现代码 4万+

每日 AI 评测速递来啦(12.12)

一个用于评估多模态大模型 连续视觉输入空间理解能力的评测基准,基于 1,278 个来自 25 个公开数据集与自采视频的片段,共构建了 1,106 个问题,并围绕 感知、规划、预测与跨视频推理四个层级进行体系化设计。一个面向“微观空间智能”的系统化评测基准,包含逾 16.3 万个问答对、58.7 万张由约 4,000 个分子结构生成的图像,覆盖九类互补任务,评估模型从基本空间变换到复杂关系识别的多层次能力。一个专注于“动作中心图像编辑”能力的评测基准,从生成式、判别式和偏好式三类指标对模型能力进行全面衡量。

OpenCompass的博客 208

WINCC7.3破解文件

WINCC7.3硬件够破解文件,有需要的下载!WINCC7.3硬件够破解文件,有需要的下载!

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

每日 AI 评测速递来啦(1.21)

一个面向深度研究智能体的多模态基准,包含来自 21 个领域的 140 个专家设计任务,每个任务提供图文组合,用于评估模型的多模态理解能力以及基于引用的报告生成能力。一个用于评估真实软件开发中领域专化方法的新型基准,涵盖 6 个新兴领域,包含 11 个软件框架和 25 个项目,配备了精心构建的知识语料库,并提供多粒度评测任务。一个跨文化推理基准,包含 4,900 条平行句子和 1,098 个独特的文化特定项目,覆盖三类不同的推理任务,并配套相应的评测指标。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 143

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

每日 AI 评测速递来啦(1.14)

首个面向智能体场景的多模态成对情境完整性评测基准, 由源自同一视觉输入的正负样本对构成,并在三个层级展开:规范性的 Seed 判断、富上下文的 Story 推理,以及可执行的智能体行为 Trace。一个面向混合动机博弈的多阶段评测基准,并配套引入了一套过程感知的评估框架,可在以下三个模块上开展协同分析:行为轨迹分析;一个轻量级的并行问题评测基准,用于评估大语言模型在 32 种语言上的语言强制行为,从而支持对多语言 steering 方法进行系统化比较。,让真正有价值的评测工作被更多人看见。

OpenCompass的博客 130

深度学习工具包 DeepLearningToolbox

深度学习工具包Deprecation notice.-----This toolbox is outdated and no longer maintained.There are much better tools available for deep learning than this toolbox, e.g. [Theano](http://deeplearning.net/software/theano/), [torch](http://torch.ch/) or [tensorflow](http://www.tensorflow.org/)I would suggest you use one of the tools mentioned above rather than use this toolbox.Best, Rasmus.DeepLearnToolbox================A Matlab toolbox for Deep Learning.Deep Learning is a new subfield of machine learning that focuses on learning deep hierarchical models of data.It is inspired by the human brain's apparent deep (layered, hierarchical) architecture.A good overview of the theory of Deep Learning theory is[Learning Deep Architectures for AI](http://www.iro.umontreal.ca/~bengioy/papers/ftml_book.pdf)For a more informal introduction, see the following videos by Geoffrey Hinton and Andrew Ng.* [The Next Generation of Neural Networks](http://www.youtube.com/watch?v=AyzOUbkUf3M) (Hinton, 2007)* [Recent Developments in Deep Learning](http://www.youtube.com/watch?v=VdIURAu1-aU) (Hinton, 2010)* [Unsupervised Feature Learning and Deep Learning](http://www.youtube.com/watch?v=ZmNOAtZIgIk) (Ng, 2011)If you use this toolbox in your research please cite [Prediction as a candidate for learning deep hierarchical models of data](http://www2.imm.dtu.dk/pubdb/views/publication_details.php?id=6284)```@MASTERSTHESIS\{IMM2012-06284, author = "R. B. Palm", title = "Prediction as a candidate for learning deep hierarchical models of data", year = "2012",}```Contact: rasmusbergpalm at gmail dot comDirectories included in the toolbox-----------------------------------`NN/` - A library for Feedforward Backpropagation Neural Networks`CNN/` - A library for Convolutional Neural Networks`DBN/` - A library for Deep Belief Networks`SAE/` - A library for Stacked Auto-Encoders`CAE/` - A library for Convolutional Auto-Encoders`util/` - Utility functions used by the libraries`data/` - Data used by the examples`tests/` - unit tests to verify toolbox is workingFor references on each library check REFS.mdSetup-----1. Download.2. addpath(genpath('DeepLearnToolbox'));Example: Deep Belief Network---------------------```matlabfunction test_example_DBNload mnist_uint8;train_x = double(train_x) / 255;test_x = double(test_x) / 255;train_y = double(train_y);test_y = double(test_y);%% ex1 train a 100 hidden unit RBM and visualize its weightsrand('state',0)dbn.sizes = [100];opts.numepochs = 1;opts.batchsize = 100;opts.momentum = 0;opts.alpha = 1;dbn = dbnsetup(dbn, train_x, opts);dbn = dbntrain(dbn, train_x, opts);figure; visualize(dbn.rbm{1}.W'); % Visualize the RBM weights%% ex2 train a 100-100 hidden unit DBN and use its weights to initialize a NNrand('state',0)%train dbndbn.sizes = [100 100];opts.numepochs = 1;opts.batchsize = 100;opts.momentum = 0;opts.alpha = 1;dbn = dbnsetup(dbn, train_x, opts);dbn = dbntrain(dbn, train_x, opts);%unfold dbn to nnnn = dbnunfoldtonn(dbn, 10);nn.activation_function = 'sigm';%train nnopts.numepochs = 1;opts.batchsize = 100;nn = nntrain(nn, train_x, train_y, opts);[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.10, 'Too big error');```Example: Stacked Auto-Encoders---------------------```matlabfunction test_example_SAEload mnist_uint8;train_x = double(train_x)/255;test_x = double(test_x)/255;train_y = double(train_y);test_y = double(test_y);%% ex1 train a 100 hidden unit SDAE and use it to initialize a FFNN% Setup and train a stacked denoising autoencoder (SDAE)rand('state',0)sae = saesetup([784 100]);sae.ae{1}.activation_function = 'sigm';sae.ae{1}.learningRate = 1;sae.ae{1}.inputZeroMaskedFraction = 0.5;opts.numepochs = 1;opts.batchsize = 100;sae = saetrain(sae, train_x, opts);visualize(sae.ae{1}.W{1}(:,2:end)')% Use the SDAE to initialize a FFNNnn = nnsetup([784 100 10]);nn.activation_function = 'sigm';nn.learningRate = 1;nn.W{1} = sae.ae{1}.W{1};% Train the FFNNopts.numepochs = 1;opts.batchsize = 100;nn = nntrain(nn, train_x, train_y, opts);[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.16, 'Too big error');```Example: Convolutional Neural Nets---------------------```matlabfunction test_example_CNNload mnist_uint8;train_x = double(reshape(train_x',28,28,60000))/255;test_x = double(reshape(test_x',28,28,10000))/255;train_y = double(train_y');test_y = double(test_y');%% ex1 Train a 6c-2s-12c-2s Convolutional neural network %will run 1 epoch in about 200 second and get around 11% error. %With 100 epochs you'll get around 1.2% errorrand('state',0)cnn.layers = { struct('type', 'i') %input layer struct('type', 'c', 'outputmaps', 6, 'kernelsize', 5) %convolution layer struct('type', 's', 'scale', 2) %sub sampling layer struct('type', 'c', 'outputmaps', 12, 'kernelsize', 5) %convolution layer struct('type', 's', 'scale', 2) %subsampling layer};cnn = cnnsetup(cnn, train_x, train_y);opts.alpha = 1;opts.batchsize = 50;opts.numepochs = 1;cnn = cnntrain(cnn, train_x, train_y, opts);[er, bad] = cnntest(cnn, test_x, test_y);%plot mean squared errorfigure; plot(cnn.rL);assert(er<0.12, 'Too big error');```Example: Neural Networks---------------------```matlabfunction test_example_NNload mnist_uint8;train_x = double(train_x) / 255;test_x = double(test_x) / 255;train_y = double(train_y);test_y = double(test_y);% normalize[train_x, mu, sigma] = zscore(train_x);test_x = normalize(test_x, mu, sigma);%% ex1 vanilla neural netrand('state',0)nn = nnsetup([784 100 10]);opts.numepochs = 1; % Number of full sweeps through dataopts.batchsize = 100; % Take a mean gradient step over this many samples[nn, L] = nntrain(nn, train_x, train_y, opts);[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.08, 'Too big error');%% ex2 neural net with L2 weight decayrand('state',0)nn = nnsetup([784 100 10]);nn.weightPenaltyL2 = 1e-4; % L2 weight decayopts.numepochs = 1; % Number of full sweeps through dataopts.batchsize = 100; % Take a mean gradient step over this many samplesnn = nntrain(nn, train_x, train_y, opts);[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.1, 'Too big error');%% ex3 neural net with dropoutrand('state',0)nn = nnsetup([784 100 10]);nn.dropoutFraction = 0.5; % Dropout fraction opts.numepochs = 1; % Number of full sweeps through dataopts.batchsize = 100; % Take a mean gradient step over this many samplesnn = nntrain(nn, train_x, train_y, opts);[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.1, 'Too big error');%% ex4 neural net with sigmoid activation functionrand('state',0)nn = nnsetup([784 100 10]);nn.activation_function = 'sigm'; % Sigmoid activation functionnn.learningRate = 1; % Sigm require a lower learning rateopts.numepochs = 1; % Number of full sweeps through dataopts.batchsize = 100; % Take a mean gradient step over this many samplesnn = nntrain(nn, train_x, train_y, opts);[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.1, 'Too big error');%% ex5 plotting functionalityrand('state',0)nn = nnsetup([784 20 10]);opts.numepochs = 5; % Number of full sweeps through datann.output = 'softmax'; % use softmax outputopts.batchsize = 1000; % Take a mean gradient step over this many samplesopts.plot = 1; % enable plottingnn = nntrain(nn, train_x, train_y, opts);[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.1, 'Too big error');%% ex6 neural net with sigmoid activation and plotting of validation and training error% split training data into training and validation datavx = train_x(1:10000,:);tx = train_x(10001:end,:);vy = train_y(1:10000,:);ty = train_y(10001:end,:);rand('state',0)nn = nnsetup([784 20 10]); nn.output = 'softmax'; % use softmax outputopts.numepochs = 5; % Number of full sweeps through dataopts.batchsize = 1000; % Take a mean gradient step over this many samplesopts.plot = 1; % enable plottingnn = nntrain(nn, tx, ty, opts, vx, vy); % nntrain takes validation set as last two arguments (optionally)[er, bad] = nntest(nn, test_x, test_y);assert(er < 0.1, 'Too big error');```[![Bitdeli Badge](https://d2weczhvl823v0.cloudfront.net/rasmusbergpalm/deeplearntoolbox/trend.png)](https://bitdeli.com/free "Bitdeli Badge")

每日 AI 评测速递来啦(12.1)

系统评估多模态大模型在视觉场景下结构化输出能力的基准,覆盖四大视觉领域,包括 UI 界面、自然图像、文档以及图表,由超过 6,500 个多样化的 JSON 模式和 1,800 个人工精挑细选、质量经人工验证的图像-模式配对构成。首个面向 AI 生成图像检测的推理增强多模态基准,通过多轻量级专家模型构建证据链,记录逐步推理轨迹与论证,实现可验证、可解释的取证评估。一个专为评估医疗多模态大模型多图像理解与复合推理能力而构建的高质量基准。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 534

每日 AI 评测速递来啦(1.8)

一个用于在真实新闻语境下评估大语言模型金融虚假信息识别能力的评测基准,以段落级别为评测粒度,刻画金融新闻中语义由分散线索共同构成的上下文复杂性。一个用于在无像素级输入条件下评估大语言模型空间智能表现的全新评测基准,包含 3,800 余条专家标注样本,覆盖五大类任务与 17 个子任务。首个面向多语言硬件代码仓库级补全任务的评测基准,聚焦于代码补全任务,覆盖三种主要的硬件设计编码风格。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 160

每日 AI 评测速递来啦(1.6)

首个系统性评测意图驱动空间推理能力的开放世界基准,要求模型将物理事件与其背后的人类目的相联系。用于系统评测大语言模型在多语言医疗任务中的性能,涵盖问答、摘要、医学信息抽取等任务。一个多用途的 4D 空间智能基准,用于全面评估 MLLMs 的 4D 空间推理能力。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 192

每日 AI 评测速递来啦(1.5)

一个标准化的闭环框架,将GPU内核生成、基准评测与实际部署有机连接起来,用于系统评估 LLM 智能体在 GPU 编程中的性能表现与局限性。通过一个严格设计的四阶段构建流程,用于系统评估 LLM 在多组学分析中的两项核心能力:生物分子相互作用推断以及端到端多组学通路机制解析。一个轻量级、开放的评测基准,面向日英翻译系统“好译文如何分优劣”的问题,系统评估礼貌性、语域与含蓄表达等细粒度差异。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 149

每日 AI 评测速递来啦(1.15)

旨在全面评估当前最先进的 MLLMs 在全景式胃肠道内镜临床流程中的表现,并分析其相对于人类内镜医师的临床实用价值。超高分辨率推理基准,用于评估 MLLMs 在极端高视觉信息密度场景下的推理能力。一个围绕通用性、可量化性与可靠性三大核心原则构建的幻灯片生成评测基准。2025 司南年度最受欢迎评测集评选活动正式火热进行中~司南·Daily Benchmark 专区今日上新!,让真正有价值的评测工作被更多人看见。

OpenCompass的博客 86

每日 AI 评测速递来啦(11.17)

通过对 28 个专有与开源 MLLM 的测试,VP-Bench 分析了影响视觉提示理解的关键因素,如属性变化、问题排列和模型规模,为研究 MLLMs 如何理解和解决基于视觉定位的指代问题提供了新的参考框架。通过在专家混合模型与稠密模型上进行微调实验,结果显示微调后的模型在超过 75% 的任务上显著优于基础模型。面向多模态大模型的内容安全评测套件,涵盖四种模态、九类风险的大规模双语数据集,并提出用于评估交叉风险的 MCRS 指标以及基于多模型评审的 FairScore 框架。

OpenCompass的博客 311

每日 AI 评测速递来啦(1.12)

首个系统性的学术海报编辑评测基准,包含 514 条编辑指令,并基于操作类型、任务难度与抽象层级等多维分类体系进行标注,结合有参考与无参考两种构建策略,以确保任务的真实度与多样性。首个以美国专利商标局专利审判与上诉委员会(PTAB)真实裁决案件为核心构建的评测基准,用于系统评估大语言模型在专利法律领域进行结构化法律推理的能力。一个用于评估多模态与视觉-语言模型在真实 AEC 图纸理解能力上的评测基准,涵盖两类互补的应用场景:目标计数任务和图纸支撑的文档问答任务。

OpenCompass的博客 82

每日 AI 评测速递来啦(12.3)

一个统一且全面的基准,用于评估视频生成、条件视频生成及视频理解中的感知与预测能力。PAI-Bench 包含 2,808 个真实世界场景案例,并设计了与任务对齐的评测指标,以量化物理合理性及领域特定推理能力。基于两大基本范式:文本到视频(T2V)和图像到视频(I2V),涵盖 6 类规则的 40 个代表性任务,共 622 个高质量标注实例。一个以事件为中心的危机舆情数据集,涵盖 463 个危机事件及其相关新闻、社交媒体帖子和参考摘要,用于支持自动化在线舆情报告生成任务的研究与评测。

OpenCompass的博客 296

每日 AI 评测速递来啦(11.25)

一个专门为评估多模态大语言模型在具身智能任务中精细动作能力而设计的新基准,包含 1,368 个精心挑选的视频和 19,562 个三模态问答对,覆盖物理交互、时序因果关系、意图理解和评估判断四大认知维度。一个专为评估文本驱动图像编辑效果而设计的基准套件,收录了多样的源图像、丰富的编辑提示及不同方法生成的编辑结果,并提供近 4,000 个样本的人类平均意见分。面向化学领域的多模态推理基准,旨在评估多模态大语言模型的视觉-文本-符号推理能力。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 531

每日 AI 评测速递来啦(1.13)

多轮多模态上下文安全评测基准,基于真实图像与多轮对话,围绕两种互补的风险设置来评估 MLLMs 的上下文安全性:升级式风险与语境切换风险。首个将临床医生视线作为“认知光标”来评估模型意图理解能力的评测基准,覆盖外科手术、急诊模拟与影像诊断解读等多种临床场景。司南·Daily Benchmark 专区今日上新!

OpenCompass的博客 85
上一篇: 通用安全 ≠ 行业可用!领域安全榜单揭示大模型垂域隐性风险 | 安全评测
下一篇: 每日 AI 评测速递来啦(1.8)
司南评测
博客等级 码龄2年 535粉丝 113原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值