NVIDIA Jetson AGX Orin 64GB
PulseAugur coverage of NVIDIA Jetson AGX Orin 64GB — every cluster mentioning NVIDIA Jetson AGX Orin 64GB across labs, papers, and developer communities, ranked by signal.
5 天有情绪数据
-
NVIDIA Jetson 平台将强大的人工智能带入紧凑、便携的机器人
NVIDIA 正在推广其 Jetson 平台用于边缘人工智能和机器人技术,强调其紧凑的尺寸和强大的功能。人工智能投资者 Sarah Guo 展示了 Jetson Orin Nano Super,演示了它如何装入手提包并为自动驾驶和语音助手等人工智能应用提供动力。该平台专为开发人员、学生和研究人员设计,用于在边缘构建和部署智能机器人和人工智能项目,例如自动驾驶玩具车和设备上的语音助手。
-
探索用于NVIDIA Jetson边缘部署的小型视觉语言模型(VLM)量化
本文研究了小型视觉语言模型(VLM)的量化,以实现其在边缘设备上的高效部署,特别是NVIDIA Jetson Orin NX和AGX。研究系统地评估了六种量化配置下的五种假设,结果表明模型架构(MoE vs. 密集型)对量化敏感性有显著影响,MoE模型更能处理INT4噪声。研究还发现,SigLIP编码器在Jetson Ampere硬件上由于特定的内核-硬件交互而引入延迟,并且虽然INT4量化减少了VRAM,但可能会减慢令牌生成速度。复…
-
新方法降低嵌入式GPU上SLM微调的能耗
研究人员开发了一种面向资源受限嵌入式设备的SLM(小型语言模型)微调的能效方法。该研究在GLUE基准测试上对BERT和Pythia变体进行了微调行为的表征,并提出了基于机器学习的模型选择,以优化GPU DVFS设置。在NVIDIA Jetson AGX Orin上的实验表明,与默认的MAXN模式0相比,平均能耗节省了13.11%,节省幅度高达26.73%。
-
轻量级ZSAD框架LiZAD面向边缘设备,用于工业异常检测
研究人员开发了LiZAD,一个轻量级的实时零样本异常检测(ZSAD)框架,适用于工业制造中的边缘设备。该方法结合了DINOv3的视觉特征和MobileCLIP2的文本嵌入,与现有的ZSAD模型相比,显著降低了内存使用量并提高了速度。LiZAD已成功部署在NVIDIA Jetson设备上,并在真实生产线上进行了测试,证明了其在动态制造环境中的实际应用价值。
-
AsyncMDE 系统赋能机器人实时深度估计
研究人员开发了 AsyncMDE,一个专为边缘平台机器人感知设计的实时单目深度估计新系统。该系统利用一个冻结的基础模型进行高质量特征提取,以及一个轻量级的异步快速路径,通过重用这些特征来实现高推理速度。AsyncMDE 旨在通过将基础模型的处理分摊到一段时间内来降低深度估计的计算成本,从而能够高效地部署在 Jetson AGX Orin 等设备上。
-
本地 AI 工具涌现:离线听写、3D 模型、GPU 加速与 Mac 容器
本周的 AI 新闻重点介绍了用于增强本地 AI 部署的工具和技术。FluidVoice 在 macOS 上提供快速、私密的离线听写功能,而一个新的 3D 基础模型可以从流式数据中重建场景。对于 GPU 加速,CuPy 优化了消费级 NVIDIA GPU 上的 AI 工作负载,并且有一篇指南详细介绍了 NVIDIA Jetson 平台上的 FFmpeg 硬件加速。此外,Apple 的新“容器”工具允许在 Apple Silicon Ma…
-
新的Dyna-Pruner框架优化AI模型用于时空预测
研究人员开发了Dyna-Pruner,一个旨在优化时空预测模型效率和可扩展性的新框架。该系统根据输入特征自适应地剪枝数据和模型结构,创建特定于样本的稀疏子网络。Dyna-Pruner已在计算负载方面实现了显著降低,在NVIDIA Jetson AGX Orin等硬件上实现了高达70%的FLOPs减少和2.5倍的速度提升,同时对准确性的影响极小。
-
Jetson AGX Orin 64GB 使用 q8_0 量化可加快 LLM 预填充速度
一位用户在 r/LocalLLaMA 子版块分享了 Jetson AGX Orin 64GB 的性能观察结果,指出使用 q8_0 量化方法处理模型时,提示词处理速度明显快于 q6_k 和 q4_k_xl。该用户在最近的 llama.cpp 构建版本上使用 Unsloth Qwen3.6-27B-MTP-GGUF 模型进行了测试,观察到 q8_0 的速度提升超过 20%。他们推测,Jetson 的 CUDA 核心可能没有针对该特定硬件上…
-
新的深度补全模型在室外环境中使用稀疏雷达数据
研究人员开发了一种新颖的深度补全模型,该模型能够使用极其稀疏的深度测量(例如来自低成本雷达的测量)在具有挑战性的室外环境中准确地估计密集深度图。该模型基于Depth Anything V2架构,引入了一个“第四输入通道”来整合稀疏深度数据,使其能够克服低纹理和尺度模糊设置下的局限性。该系统在边缘设备上实现实时性能,适用于农业和水下探索等领域的移动机器人。
-
NVIDIA Jetson AGX Orin 用户寻求最佳模型用例
一位 r/LocalLLaMA 子版块的用户正在寻求关于如何最佳利用其拥有的两个 NVIDIA Jetson AGX Orin 64GB 设备的建议。用户强调了硬件的规格,包括 205GB/s 的内存带宽和约 55GB 的可用统一内存,并正在寻找最能发挥这些能力的模型推荐或应用程序。
-
TokenMask 提升视觉Transformer分割效率
研究人员开发了TokenMask,一种新颖的视觉Transformer分割方法,无需显式的图像空间重建。该方法直接从查询-Token亲和度计算掩码logits,简化了计算结构并提高了效率。TokenMask在各种数据集和骨干网络上展示了具有竞争力的准确性,同时降低了计算和内存需求,使其适用于嵌入式视觉系统。
-
LiteVLA-H 模型支持无人机的双速率视觉-语言-动作推理
研究人员开发了 LiteVLA-H,这是一个紧凑的 2.56 亿参数视觉-语言-动作模型,针对机载航空部署进行了优化。该系统以双速率运行,能够实现无人机控制的快速外环制导以及场景理解和叙述的较慢语义处理。该模型通过专注于高效的多模态预填充来实现低延迟,从而能够以近 20Hz 的速率输出响应式动作令牌,同时仍然支持句子级别的语义输出。
-
人工智能增强射频干扰抑制使用Transformer实现更快、更清晰的传输
研究人员开发了一种人工智能增强的射频干扰抑制方法,通过在期望信号和干扰混合物上进行训练,其性能优于传统技术。新方法利用自回归Transformer解码器模型,与之前的WaveNet模型相比,推理速度显著提高。该方法有效地抑制了模拟FM信号中的OFDM干扰,使难以理解的传输变得清晰,并在轻量级GPU上保持低延迟,在国家安全和商业领域具有潜在应用。
-
无人机除草检测模型在准确性和速度之间取得平衡,适用于边缘设备
研究人员开发了一个框架,用于在资源受限的无人机上部署除草检测模型,以实现位点特异性管理。该研究评估了包括YOLO和RT-DETR变体在内的各种目标检测模型,这些模型部署在Jetson Orin Nano和Jetson AGX Xavier等不同的边缘设备上。结果表明,在检测准确性和计算效率之间存在权衡,高容量模型实现了更好的准确性但推理时间较慢。轻量级模型提供了实时性能,而RT-DETRv2-R50-M和YOLOv11s在实际无人机应…