Rohit Patel
PulseAugur coverage of Rohit Patel — every cluster mentioning Rohit Patel across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
Meta AI总监推出Ndoc以取代Office、Workspace
前Meta Superintelligence Labs总监Rohit Patel在Meta工作八年后离职，创立了一家名为Ndoc的新公司。Ndoc被设计为一个AI原生平台，旨在取代与Microsoft Office和Google Workspace等工具相关的碎片化工作流程。该平台将演示、分析和数据存储整合到一个统一的工作空间中，并强调透明度和用户验证AI生成工作的能力。
-
企业 AI 代理因非确定性而失败，需要严格的评估
由于 AI 模型具有非确定性以及其能力存在的“锯齿形智能前沿”，企业 AI 项目常常失败，这使得传统的软件测试方法不足以应对。ndoc.ai 的创始人兼首席执行官 Rohit Patel 表示，这些挑战导致许多组织依赖主观的“感觉检查”而非严格的评估。为了克服这一点，AI 评估（evals）至关重要，它们充当自动化测试工具，让 AI 模型执行标准化任务，并根据明确的标准衡量性能，这很像 AI 的专业执照考试。
-
新的GIM基准评估LLM在综合认知任务上的表现
研究人员推出了Grounded Integration Measure (GIM)，这是一个新的基准，旨在通过评估大型语言模型（LLM）整合多种认知运算的能力来对其进行评估。与仅关注知识回忆或抽象推理的基准不同，GIM提出的问题需要对约束满足和受众校准等技能与可访问知识进行协调。该基准包含820个原创问题，研究人员使用IRT模型和多位评审员开发了一个强大的评估框架来估算模型能力。他们的研究分析了22个模型和203,800个提示-评审员…