2024 年 8 月 20 日 作者 Justin Walker

分享

NVIDIA 和 MediaTek 携手合作,让全球游戏玩家更容易地使用业界最强大的游戏显示技术。

两家公司今天在 Gamescom 科隆游戏展上宣布合作,将整套 NVIDIA G-SYNC 技术集成到全球最热门的 scaler 组件当中。

游戏玩家的显示器有望实现出色的图像质量、卓越的运动清晰度、超低延迟、高精度的色彩,以及更多前沿优势。

G-SYNC Pulsar:领先的显示技术

此次合作的亮点是引入了一项新技术——G-SYNC Pulsar,它可提供 4 倍的有效运动清晰度以及流畅且无撕裂的可变刷新率 (VRR) 游戏体验。

G-SYNC Pulsar 将首次应用到新发布的显示器中,包括华硕 ROG Swift 360Hz PG27AQNR、宏基 Predator XB273U F5 和 AOC AGON PRO AG276QSG2。

这些显示器预计将于今年晚些时候上市,可提供 2560×1440 分辨率、360Hz 刷新率并支持 HDR。

将 G-SYNC 集成到 MediaTek scaler 组件中后,就不再需要独立 G-SYNC 模组,从而简化生产流程并降低成本。

这有助于以更实惠的价格将功能丰富的 G-SYNC 显示器推向市场。通过将这些优质游戏产品推广到更广泛的受众,将有更多玩家享受到最佳的运动清晰度、图像质量和性能。

高科技高速公路:印度使用 NVIDIA 加速计算缓解收费站的交通拥堵

NVIDIA Metropolis 合作伙伴 Calsoft 使用视觉 AI 应用来帮助解决该国高速公路的拥堵问题。

2024 年 8 月 20 日 作者 Lexi Mariash

分享

印度拥有全球第二大公路网,其总长度近 400 万英里,有 1,000 多个收费站,其中大部分为人工收费站。

像这样的传统收费站,无论在世界的哪个地方,都可能导致大规模的交通延误、通勤时间过长和严重的道路拥堵。

为帮助印度各地收费站实现自动化,由印度裔美国人创立的科技公司 Calsoft 协助印度将多项 NVIDIA 技术与该国的主流支付系统“统一支付接口”(UPI)集成在一起。

人工收费站花费的时间和人力均多于自动收费站。而印度收费站系统在实现自动化的过程中,还面临着一个额外的复杂问题——种类繁多的车牌。

印度车牌的不规范给车牌自动识别系统(ANPR)的准确性带来了巨大的挑战。印度的车牌有各种颜色、尺寸、字体样式和挂牌位置,所使用的语言也不统一,所以任何实施方案都必须解决这些车牌差异问题。

Calsoft 帮助开发的解决方案可自动读取过往车辆的车牌,并向相关驾驶员的 UPI 账户收费。这种方法减少了人工收费的需求,是解决该地区交通问题的重要一步。

自动化的落实情况

作为试点项目的一部分,该解决方案已被部署到多个主要城市。它通过使用 ANPR,能够在车牌通过收费站时对其进行检测和分类,使车牌读取准确率达到 95%。

Calsoft 高级技术副总裁 Vipin Shankar 认为 NVIDIA 的技术在这项工作中发挥了至关重要的作用。他表示:“夜间检测的难度尤其大。还有一个挑战是提高模型的准确性,解决由于雾、暴雨、强光反射、沙尘暴等环境影响造成的像素失真。”

该解决方案使用 NVIDIA Metropolis 对车辆进行全程跟踪和检测。Metropolis 是一个应用框架、开发者工具套件和合作伙伴生态,它通过结合视觉数据与 AI,提高各行各业的运营效率和安全性。

Calsoft 工程师团队使用 NVIDIA Triton 推理服务器软件来部署和管理他们的 AI 模型。该团队还使用 NVIDIA DeepStream 软件开发套件构建了一个实时流式传输平台,其整合了实时对象检测、分类等高级功能,是高效处理和分析数据流的关键。

Calsoft 在其 AI 解决方案中使用了 NVIDIA 硬件,包括 NVIDIA Jetson 边缘 AI  模块和 NVIDIA Tensor Core GPU 等。Calsoft 的收费站解决方案还可以进行扩展,这表示它能够适应未来的增长和扩展需求,更好地保证了其性能和适用性一直能够适应交通状况的变化。

了解 NVIDIA Metropolis 如何帮助北卡罗来纳州罗利市等城市更好地管理交通流量和提高行人安全。

利用 AI 技术追踪风暴:NVIDIA Research 最新研究成果推动天气预测和气候模拟发展

在飓风季,NVIDIA 发布用于模拟高保真大气动力学的突破性生成式 AI 模型。

2024 年 8 月 19 日 作者 Mike Pritchard

分享

随着飓风、龙卷风等极端天气事件的发生频率和严重程度不断增加,使用最新技术改善和加速气候研究与预测变得空前重要。

正值大西洋飓风季的高峰期,NVIDIA Research 近日发布了一个用于模拟高保真大气动力学的全新生成式 AI 模型 StormCast。该模型可以在中尺度(比风暴大但比气旋小的尺度)上作出可靠的天气预测,这对于防灾减灾工作至关重要。

NVIDIA 在一篇论文中详细介绍了 StormCast。当下,极端天气现象正在夺走人们的生命、摧毁人们的家园,仅在美国每年就造成超过 1500 亿美元的损失,该模型就是在这样的背景下诞生的。

该模型正是一个例子,体现了生成式 AI 正在通过推动气候研究和具有可操作性的极端天气预测取得突破性进展,帮助科学家应对拯救生命和世界这一最严峻的挑战。

NVIDIA Earth-2 是一个集 AI、物理仿真和计算机图形于一身的数字孪生云平台,能够以前所未有的准确性和速度在全球范围实现天气与气候预测的模拟和可视化。

在今年 6 月的 COMPUTEX 上,NVIDIA 创始人兼首席执行官黄仁勋发布了通过 Earth-2 提供的 CorrDiff 模型

例如在台湾地区灾害防救科技中心计划使用 CorrDiff (Earth-2 提供的一个 NVIDIA 生成式 AI 模型) 预测台风的精细尺度细节。

CorrDiff 可将模型分辨率从 25 公里提高到 2 公里,分辨率是以前的 12.5 倍,单次推理速度比传统的方法快了 1000 倍,能源效率提高了 3000 倍。

这意味着该中心以前需要花费近 300 万美元购买 CPU 才能完成的救援工作,现在只需花费约 6 万美元就能在搭载 NVIDIA Hopper Tensor Core GPU 的单个系统上完成。这一成本的大幅降低表明生成式 AI 和加速计算能够有效地提高能效和降低成本。

该中心还计划使用 CorrDiff 预测城市地区的下沉气流。因为当强风以漏斗状向下吹往街道时,就会损坏建筑物并影响行人。

StormCast 现在为 CorrDiff 增加了每小时自回归预测功能,这意味着该模型可以根据过去的结果预测未来的结果。

通过聚焦地区影响全球

全球气候研究始于地区层面的研究。

天气和气候变化造成的物理危害在不同地区之间存在显著差异。但由于在中尺度上模拟基本的流体动力学运动需要很高的空间分辨率,因此在这一层面进行可靠的数值天气预测需要大量计算成本。

过去,区域天气预报模型 (通常称为对流容许模型,缩写为 CAM) 迫使研究人员不得不在分辨率、集合规模和可负担性方面作出不同的权衡。

气象学家可以使用 CAM 追踪风暴的演变和结构并监测其对流模式或风暴形成时的构成方式。例如,龙卷风发生的概率取决于风暴的结构和对流模式。

使用 NOAA 的地球静止环境观测卫星观察中尺度对流系统,图片来自 NOAA

CAM 还有助于研究人员了解与天气有关的物理危害对基础设施层面的影响。

例如,研究人员可以使用全球气候模型模拟为 CAM 提供参考,帮助它们根据大气、河流含水量的缓慢变化,预测沿海易受灾地区的山洪暴发。

在较低分辨率下,在全球数据上训练而成的机器学习模型已能够有效地模拟数值天气预报模型,来改进严重事件的预警系统。这些机器学习模型的空间分辨率通常为 30 公里左右,时间分辨率为 6 小时。

如今,在生成扩散技术的帮助下,StormCast 能够实现 3 公里的空间分辨率和每小时的时间分辨率。

尽管尚处于起步阶段,但该模型在与降水雷达配合使用时,已经可以提供最多提前 6 小时的预报,其准确度比美国国家海洋和大气管理局 (NOAA) 最先进的 3 公里尺度 CAM 高出 10%。

此外,StormCast 的输出结果可显示符合物理学的逼真热量和湿度动态,并且能够预测 100 多个变量,例如在多个精细划分的高度层上的温度、水分浓度、风力和降雨雷达反射率值等。这使科学家们首次能够在 AI 天气模拟中确认风暴浮力的真实 3D 演变过程。

NVIDIA 研究人员利用来自美国中部的约三年半 NOAA 气候数据对 StormCast 进行了训练,并使用 NVIDIA 加速计算加快计算速度。

酝酿更多创新

科学家们已经在探究如何利用该模型的优势。

The Weather Company 创新负责人 Tom Hamill 表示:“由于有序的雷暴和冬季降水会产生巨大的影响,而且对其作出可信预报的难度极大,因此制作计算上易处理的风暴尺度集合天气预报是数值天气预报领域所面临的一项艰巨挑战。StormCast 显然是一个能够应对此类挑战的模型。The Weather Company 十分高兴能与 NVIDIA 一起开发、评估并在未来使用这些深度学习预报模型。”

科罗拉多州立大学大气合作研究所机器学习负责人 Imme Ebert-Uphoff 表示:“开发高分辨率天气模型需要使用 AI 算法解决对流问题,而这是一个艰巨的挑战。NVIDIA 的这项新研究探索了利用 StormCast 等扩散模型实现这一目标的潜力,这代表着我们朝着未来开发 AI 高分辨率天气预报模型迈出了重要一步。”

这些研究突破不仅实现了达到物理学精度的气候模拟的加速与可视化、创造了地球的数字孪生,还展现了 NVIDIA Earth-2 如何开启了气候研究的一个全新的重要时代。

NVIDIA Research 在全球拥有数百名科学家和工程师,专注于气候 AI、计算机图形学、计算机视觉、自动驾驶汽车和机器人等领域的研究。

主题图片来自 NASA

了解有关可持续计算的更多信息,访问 https://www./data-center/sustainable-computing/

了解有关软件产品信息的通知,访问 https://www./about-nvidia/terms-of-service/

NVIDIA Edify 解密 — 一种帮助开发者创建自定义模型的技术,这些模型可基于其数据进行训练

Generative AI by iStock 为工作室和创作者提供了图像生成和修改工具。

2024 年 8 月 14 日 作者 Gerardo Delgado

分享

编者注:本文属于《解码 AI》系列栏目,该系列的目的是让技术更加简单易懂,从而解密 AI,同时向 NVIDIA RTX PC 和工作站用户展示全新硬件、软件、工具和加速特性。

内容生成器 — 无论是生成语言、2D 图像、3D 模型还是视频 — 为创意社区提供了各种工具,可更快将想象变为现实。

为帮助开发者构建这些新型生成式 AI 工具,NVIDIA 建立了 NVIDIA AI Foundry。它有助于公司使用 NVIDIA Edify 基于自己的已授权数据训练生成式 AI 模型。Edify 是一种多模态 AI 结构,可使用简单的文本提示生成图像、视频、3D 素材、360 度高动态范围成像和基于物理性质的渲染 (PBR) 材质。使用 AI Foundry,公司可以训练定制 AI 模型来生成上述任何素材。

Edify 的关键优势包括能够生成多种类型的内容、其卓越的训练效率 (这便于它在基于更少的图像进行训练时生成高质量内容),及其调优模型以进行风格匹配或学习字符或对象的能力。

基于 NVIDIA AI Foundry 和 Edify 构建的服务范例之一为 Generative AI by Getty Images,一种可商用的生成式摄影服务。组合使用 AI Foundry 与 Edify,用户可以控制他们的训练数据集,从而创建符合其需求的模型。

为避免版权问题,Getty Images 使用 Edify 基于自己的已授权内容对该服务进行了训练,以确保数据集中不存在知名人物或产品。该公司还与贡献者分享部分利润,为对该模型做出贡献的创作者创造了新的收入来源。

使用 Edify 生成资产

可以对 Edify 进行训练,以生成各种图像类型,包括图像、3D 素材和 360 度 HDRi 环境光贴图。

Edify Image 可在约六秒内生成四张高质量 1K 图像,性能比之前的模型提高一倍。还可以通过生成式放大器添加其他细节,将图像转换为 4K 格式。

Getty Images 4K 图像生成使用安全商用创意库在 NVIDIA Edify 上进行训练。

得益于高级提示依从性,图像实现了高度可控,摄像头控制可指定焦距或场景深度,同时 ControlNets 将指导生成。ControlNets 包括 Sketch 和 Depth,前者允许用户提供要依从的草图或复制图像的构图,后者用于复制图像的构图。

也可以使用 Edify Image 来编辑图像。InPaint 允许用户在图像中添加或修改内容。Replace — 一个严格 InPaint — 可以更改衣服等细节。并且 OutPaint 可以扩大图像以匹配不同的宽高比。所有这些操作都可通过 Segment 进行简化,这是一项只需要一条文本提示即可遮罩对象的功能。

Edify 还可以创建艺术家级别的 3D 网格。这些网格采用基于四边形的清晰拓扑、高达 4K 的 PBR 材质和自动 UV 展开,便于更轻松地进行纹理编辑。快速预览模式可在短短 10 秒内提供结果,然后将其转换为完整的 3D 网格。

这类网格非常适合原型设计场景、为布景生成背景对象,或作为 3D 雕刻的开端。

Edify 360 HDRi 将生成自然景观环境图,可将其用于场景照明、反射甚至作为背景。该模型可根据文本或图像提示生成高达 16K 的 HDRi 图像。获得所需背板后,用户就可以创建自定义 HDRi 来进行匹配,而不必花费数小时寻找。

根据文本提示生成高动态范围 360 度全景图。

多模态功能为 Edify 所独有,能够实现组合不同素材类型的高级工作流。例如,与智能体结合使用时,Edify 允许用户在几分钟内使用简单的文本提示进行完整场景原型设计 — 就像在 NVIDIA 研究团队 SIGGRAPH 演示中那样,该演示展示了由 NVIDIA Edify 提供支持的模型和 NVIDIA Omniverse 平台的辅助性 3D 世界构建功能。

另一个用例是将 Edify 3D 和 360 HDRi 与 Image 结合起来使用,以便用户完全控制图像生成过程。通过以 3D 格式生成场景,艺术家可以四处移动物体并设定他们想要的镜头,然后使用 Edify Image 将原型转化为逼真的图像。

Generative AI by Getty Images

Getty Images 是创意视觉效果、编辑摄影、视频和音乐领域的大型内容服务提供商和供应商之一,也是人们最初搜寻、购买和分享来自世界上的优秀摄影师和录像师的精彩视觉内容的地方之一。

Getty Images 使用 NVIDIA AI Foundry 来训练 NVIDIA Edify Image 模型,以支持其生成式 AI 服务。该服务通过面向企业的 Generative AI by Getty Images 以及面向小型企业和业余创作者的 Generative AI by iStock 提供,允许用户使用由 NVIDIA Edify 提供支持的模型来生成和修改图像。

Generative AI by Getty Images (或 iStock) 提供了一系列已授权内容。

Getty Images 和 iStock 最近已更新到最新版本的 Edify Image,以便更快生成内容,实现更高的提示依从性并公布摄像头控制。

已更新 Generative AI by Getty Images 中的摄像头控制。

用户现在还可以在预拍创意内容时使用生成式 AI 工具,这便于他们编辑和修改 iStock 的视觉效果库,以快速迭代和美化内容。这些相同的功能将于不久后在 Gettyimages.com 上发布。