炸裂,AI 打造了一个西部世界!

大家好,我是 程序员小灰。

今天继续分享几个看到的,非常不错的 AI 项目。

如果感觉,项目更新太快,学不动了!

别慌,收藏等于学会。

一、PAniC-3D

Stable Diffusion 刚火的时候,我就说过:下一个突破的方向就是 3D 了。

sd生成国风图
sd生成写实图

没想到刚过几个月,PAniC-3D 就来了。

10M动图,正在努力加载中,请稍后...

通过动漫头像的单视图,即可生成 3D 模型。

再配合上 talking head anime 2,就能实现一个可以说话的二次元头像。

10M动图,正在努力加载中,请稍后...

放到直播里,配合着真人去驱动,大家都能低成本,制作专属的二次元头像,这也算二次元直播的福音了吧。

下一步,就是精细化 3D 模型的效果,然后就是真人 3D 模型建模了。

到了那时,网络上帅哥和美女的数量,可能会更多了。

项目地址:

https://github.com/ShuhongChen/panic3d-anime-reconstruction

Generative Agents

《西部世界》这个美剧,各位小伙伴看过吗?

西部世界的主角npc

在西部世界里,机器人能够像人类一样生活、学习,工作、社交,复刻人了的一举一动。

在他们的身体里,预装了各种各样的故事情节,它们可以像人类一样行事,记得自己见过的人,看过的东西,说过的话。与进入“西部世界”的玩家,交流,引导玩家走进这个世界的核心故事情节中。

而这种曾在影视作品中的设想,现在通过 AI 实现了。

最近火爆的一篇论文中,研究者们成功地构建了一个「虚拟小镇」,里面有 25 个 AI 智能体在这个小镇上生活。

这些智能体(Agent)不仅能够从事各种复杂的行为,比如每天的学习和工作、举办情人节派对等,而且还很真实,不再是以往游戏中那种没有感情的 NPC。

而且,研究者还把这个「虚拟小镇」部署到了网站上!

体验地址(需要使用????):

https://reverie.herokuapp.com/arXiv_Demo/

论文地址:

https://arxiv.org/pdf/2304.03442v1.pdf

通过上述地址,你就能看到这 25 个 Agent,每天从早上 6 点开始的生活了。

25 个智能体居住在名为 Smallville 的小镇,每个智能体由一个简单的化身表示。所有的角色都可以:

  • 与别人和环境交流;
  • 记住并回忆它们所做的和观察到的事情;
  • 反思这些观察结果;
  • 制订每天的计划。

Smallville 小镇有许多公共场景,包括咖啡馆、酒吧、公园、学校、宿舍、房屋和商店。

智能体可以在 Smallville 内随处走动,进入或离开一座建筑,导航前行,甚至去接近另一个智能体。

你可以看到这个 Smallville 小镇上所有 Agent 一天的活动,与其他人的交流。

非常有意思的一项研究,感兴趣的小伙伴,可以去体验一下。

GPT-4-LLM

我们都知道 LLM(Large Language Model)的一个问题就是 hallucination,即一本正经地胡说八道。

Instruction Tuning 指令微调,可以大幅改善这类问题,提高模型在 Zero-Shot 任务上的性能表现。

GPT-4-LLM 就是通过 GPT4 的生成结果,指导 LLaMA 模型进行微调,有点像教师网络的结果指导学生网络学习的意思。

刚刚开源,新鲜热乎的。

正在尝试训练自己的 ChatGPT 的小伙伴,不要错过~

项目地址:

https://github.com/Instruction-Tuning-with-GPT-4/GPT-4-LLM

最后

今天的推送内容,你对哪个最感兴趣呢?

好了,先聊这么多吧,我是 程序员小灰,我们下期见~