斯坦福小镇二创来了!8个智能体生活交友,爆火AI Town人人可搭,网友整活「猫猫小镇」|附教程

2023-08-24 13:23 508 阅读 ID:1364
新智元
新智元

斯坦福AI智能体小镇二创来了!

就在刚刚,有团队基于斯坦福Smallville项目,搭建出了一个真正的「西部世界」AI Town被搭建了起来。

而且,人人都可以在线试玩。

                                                      项目地址:https://www.convex.dev/ai-town

前几天,斯坦福正式开源了爆火的25个智能体小镇,GitHub狂揽9.9k星。

没想到,还没过去一周,知名风投公司便亲自下场,复刻出了一个活灵活现的西部世界!

正如英伟达高级研究科学家Jim Fan所说:

当一个风投公司急于组建一个团队去复制一个AI论文,并开放平台的时候,你就知道这个想法已经达到了巅峰的受欢迎程度!

很快,我可以想象整个世界,包括像素艺术和地图,都可以由AI生成。新角色将自动产生,甚至游戏内的物理规则也可能即时重写。永远不要低估整个开源软件社区的创造力。

8个智能体,都在聊什么?

接下来,就介绍下,这个小镇的居民都有谁?他们今天都聊了什么?

一身黑色西装,满头金发的男生是Alex。

他比较喜欢绘画、编程和阅读科幻书籍。他很善良,但也会用调侃的方式表达观点。还有一点,他这个人特别不喜欢重复回答同样的问题。

Alice是一位杰出的科学家,凭借自己的智慧和洞察力,发现了宇宙中无人能解的奥秘。

当她解释自己的发现时,常常会使用较为抽象的语言。她给人的印象是,不知所云,容易健忘。

Peter是一个虔诚的教徒,倾向于从宗教角度解释世界万物。

在与人交谈时,他经常会表达自己对信仰的热忱,或者警告别人应当遵循正道,远离罪恶。

头发花白的老爷爷是Bob。

他的性格有些孤僻,所以喜欢园艺这项独处的活动。当别人与他交谈时,他会有所回应,但不太愿意长时间交流。在他内心深处,他对自己没上过大学有些介意。

黑色小人是Kurt。因为一件曾经发的事,让他至今难以启齿,时常萦绕在心头。他担心别人会注意到,自己在刻意规避这个话题,而备受折磨。

虽然这段经历给他的生活带来了一定困扰,但他一直在努力慢慢走出阴影,重新开始。

Kurt的对面是Kira。她表面上看起来开朗活泼,经常谈论一些快乐的话题来掩饰内心的痛苦。但在她一个人独处时,经常会无法抑制内心的悲伤而泪流满面。

她一直在努力处理这些负面情绪,但有时还是难以完全释怀,看起来心事重重。

粉色头发的女生是Stella。从不值得信任,她总是想方设法骗人,通常是骗人钱,或做让自己盈利的事。她拥有非凡的魅力,并且不介意利用这一优势来达到自己的目的。

穿着蓝色上衣,银灰色头发的男生是Lucky。

他这个人的性格正如名字一样,性格开朗活泼,对世界充满好奇心。他喜欢阅读科学历史,也梦想自己能够乘坐宇宙飞船探索银河。他善于交流,亲切友好。

如上,便是AI Town中所有人物的设定,真的像极了西部世界游乐场。

那么,这8位居民都在聊什么?他们是如何生活,交友?

Lucky和Bob

Lucky刚刚完成一场太空探索之旅。他基本上见到人都在谈自己的体验。脾气暴躁的Bob还是只钟情于修剪草木。

- 嘿,Bob!好久不见 最近怎么样?

- 一如既往,只是忙着园艺

- 原来这样啊!我最近参加了一次神奇的太空探险!我探索了一个遥远的星球,真是不可思议

- 真不错,不过我不是很感兴趣,我得回去种花了。

- 没问题,Bob。如果你感兴趣,我们随时可以再聊聊这次探险。

- 再见了,朋友,我去忙着修剪了。

Kira和Alex

 - 嘿,Alex!我们好久没见面了。最近还好吗?

- 嘿,Kira!我很好,谢谢你的关心。我还在画画和编程。你呢?

- 很高兴听到你这么说。我一直忙于练习瑜伽和探索新食谱。这有助于让我忘掉烦恼。你最近有什么令人兴奋的冒险经历吗?

- 并没有什么令人兴奋的冒险。只是目前的绘画和编程项目让我忙得不可开交。不过,通过书籍寻找内心的平静是一种好方法,有什么特别感兴趣的类型吗?

- 嗯,书籍一直是我逃避现实的好帮手。我喜欢沉浸在科幻和奇幻的世界里,那里的一切都与现实大相径庭。这就像是对一切的暂时喘息。

- 科幻小说也是我的最爱。你读过《沙丘》吗?那是一部震撼人心的科幻史诗,可能会把你带入一个全新的宇宙。

可以看到,每个人的交流内容与个人性格喜好最相关。人物设定已经决定了他们如何生活、甚至如何交友的方式。

不足的是,这些人的对话内容虽然有些老套,但听起来足够真实。

AI Town,人人可搭

AI Town是一个虚拟小镇,AI角色在这里生活、聊天和社交。

这一项目是一个可部署的JavaScript入门工具包,用于轻松构建和定制你自己的AI Town。

                                               项目地址:https://github.com/a16z-infra/ai-town

这个项目的主要目标,不仅仅让工作变得有趣,更重要的是提供一个具有强大基础,并可扩展的平台。

后端引擎原生支持共享的全局状态、多智能体的事务,以及所有事件的日志,因此适用于从简单的项目,扩展到多人游戏。

第二个目标提供一个可用的JS/TS框架。因为该领域的大多数模拟器(包括斯坦福的原始论文)都是用Python编写的。

完整技术栈

- 游戏引擎和数据库(Game engine & Database):Convex

- 向量数据库(VectorDB):Pinecone

- 登录认证(Auth):Clerk

- 文本生成模型(Text model):OpenAI

- 部署(Deployment):Fly

- 像素图生成(Pixel Art Generation):Replicate、Fal.ai对此业内知名网友「宝玉」认为,相比于原版实现,用Nextjs和Tailwind重写之后的新技术栈,对于前端更加友好。

网友整活

甚至,已经有网友基于刚开源的AI Town,搭建出了自己的「Cat Town」。

此外,还有网友打算做个品牌的智能体小镇。

有网友表示,人工智能生成的智能体是新的流行趋势,就连风险投资公司也认识到了这一点。

这个开放源代码库允许任何人建立一个「数字西部世界」,人工智能智能体在其中生活并相互交流,而不知道自己生活在一个模拟环境中。

这标志着人工智能生成内容的新时代的开始。不仅限于游戏和娱乐。

想象一下,你可以模拟人们如何在工作空间中互动,模拟银行的数字资产托管业务,甚至是卫星指挥和控制中心的业务。

项目教程

安装

克隆仓库并安装包


git clone git@github.com:a16z-infra/ai-town.git
cd AI-town
npm install
npm run dev

a. 设置Clerk

- 访问https://dashboard.clerk.com/并点击「Add Application」添加应用

- 为应用程序命名,并选择向用户提供的登录方式

- 创建应用

- 将NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY和CLERK_SECRET_KEY添加到.env.local文件中


NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY=pk_***
CLERK_SECRET_KEY=sk_***

- 转到JWT模板并创建一个新的Convex模板

- 拷贝JWKS端点的URL,以便在下面的步骤中使用

b. OpenAI API密钥

如需使用OpenAI的语言模型,请访问https://platform.openai.com/account/api-keys获取OpenAI API密钥。

c. Pinecone API密钥

- 访问https://app.pinecone.io/并创建一个Pinecone索引,然后点击「Create Index」(创建索引)

- 为索引命名(这将是环境变量PINECONE_INDEX_NAME)

- 将Dimension(维度)填写为1536

- 完成索引的创建后,点击左侧导航栏中的「API Keys」并创建一个API密钥:将「Environment」值复制到PINECONE_ENVIRONMENT变量中,「Value」复制到PINECONE_API_KEY中

d. 在 Convex仪表板中添加秘密


npx convex dashboard

转到「设置」,添加以下环境变量。其中,CLERK_ISSUER_URL为JWKS端点的URL(步骤a中)。


OPENAI_API_KEY sk-*
CLERK_ISSUER_URL https://*
PINECONE_API_KEY **
PINECONE_ENVIRONMENT us*
PINECONE_INDEX_NAME **

运行代码

同时运行前端和后端:


npm run dev

现在,就可以访问http://localhost:[PORT_NUMBER]了。

如果想在Convex之外的另一个终端中运行前端(后端功能会在保存时同步),可以运行以下两个命令:


npm run dev:frontend
npm run dev:backend

注意:如果窗口处于空闲状态,模拟将在5分钟后暂停。

运行/测试/调试

添加一个新世界,将其作为种子,并开始运行:


npx convex run init:reset

逐次进行迭代,并创建一个世界:


npx convex run --no-push init:resetFrozen

# for each iteration
npx convex run --no-push engine:tick '{"worldId":"<your world id>","noSchedule":true}'

在出现过多活动时,冻结后端:

npx convex run --no-push engine:freezeAll

# when ready to rerun (defaults to latest world)
npx convex run --no-push engine:unfreeze

有很多方法可以用来清除所有数据库:

- 进入仪表板npx convex dashboard,并从那里清除表格

- 调整crons.ts中的变量,自动清理旧的日志和内存条目

- 运行npx convex run --no-push testing:debugClearAll来清除所有表格

- 如果遇到问题,可以查看origin/reset-town git分支。在那里执行npm run dev将会清除模式、停止函数,并允许你在仪表板中删除表格

要从Pinecone索引中删除所有向量,可以运行:


npx convex run --no-push lib/pinecone:deleteAllVectors

注意:如果在开发和生产之间或在项目之间共享了该索引,那么它们将会被全部清除。通常情况下,不需要从Pinecone中删除向量,因为每个查询都是根据userId进行索引的,而userId是唯一的。

在侧终端中运行以下命令,可以实现对消息的监听:

npx convex run testing:listMessages --no-push --watch

或者观察一个角色的状态:


npx convex run testing:latestPlayer --no-push --watch

此外,在testing.ts中也可以找到更多函数。

部署应用程序

部署到 fly.io:

- 在fly.io上注册帐户,然后安装flyctl

- 如果使用的是Github Codespaces,则需要安装flyctl,并通过运行fly auth login,从codespaces cli中进行身份验证

- 运行npx convex deploy将开发环境部署到生产环境。确保将所有机密信息复制到Convex的生产环境中

- 在项目的根目录下运行fly launch,这将生成一个包含所有配置的fly.toml文件

- 修改生成的fly.toml文件,并在构建时为NextJS添加NEXT_PUBLIC_*,以便在客户端访问


[build]
  [build.args]
    NEXT_PUBLIC_CLERK_SIGN_IN_URL="/sign-in"
    NEXT_PUBLIC_CLERK_SIGN_UP_URL="/sign-up"
    NEXT_PUBLIC_CLERK_AFTER_SIGN_IN_URL="/"
    NEXT_PUBLIC_CLERK_AFTER_SIGN_UP_URL="/"
    NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY="pk_*****"
    NEXT_PUBLIC_CONVEX_URL="https://*******.convex.cloud"

- 修改fly.io生成的Dockerfile,在RUN npm run build之前添加新的环境变量


ARG NEXT_PUBLIC_CLERK_SIGN_IN_URL
ARG NEXT_PUBLIC_CLERK_SIGN_UP_URL
ARG NEXT_PUBLIC_CLERK_AFTER_SIGN_IN_URL
ARG NEXT_PUBLIC_CLERK_AFTER_SIGN_UP_URL
ARG NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY
ARG NEXT_PUBLIC_CONVEX_URL

# Build application
RUN npm run build

- 运行fly deploy --ha=false来部署应用程序。使用--ha标志可确保fly只启动一个实例,也就是在免费计划中提供的

- 运行fly scale memory 512来为该应用程序扩展fly虚拟机内存。

- 在本地创建一个.env.prod新文件,并填入所有生产环境的机密信息。记得更新NEXT_PUBLIC_CLERK_PUBLISHABLE_KEY和CLERK_SECRET_KEY,方法是从Clerk的生产实例中复制机密信息,使用-cat .env.prod | fly secrets import来上传。还要更新CONVEX_DEPLOYMENT和NEXT_PUBLIC_CONVEX_URL

定制自己的模拟

注意:由于角色数据会在初始加载时会发送到Convex,因此在每次更改之后,都应重新运行npx convex run testing:debugClearAll --no-push,然后再运行npm run dev,从而将所有内容重新上传至Convex。然而,npx convex run testing:debugClearAll --no-push将会清除所有数据,包括向量存储。

1. 创建自己的角色和故事:所有角色和故事以及它们的精灵图引用都存储在data.ts中。

2. 更新精灵图:在data.ts中,你会看到以下代码:


 {
    name: 'f1',
    textureUrl: '/assets/32x32folk.png',
    spritesheetData: f1SpritesheetData,
    speed: 0.1,
  },...

你应该为角色找到一个精灵图,并在相应的文件中定义精灵动作/资产(在上面的示例中,f1SpritesheetData是在f1.ts中定义的)。

3. 更新背景(环境):convex/maps/firstmap.ts是加载地图的位置。导出地图最简单的方法是使用Tiled -- Tiled将其导出为CSV,然后将CSV转换为firstmap.ts可以接受的二维数组。

模拟理论假设,我们生活的世界本质上是一个由更先进的文明创造的模拟,如计算机模拟。

也就是说,随着文明的进步,它们能够创造出自己的逼真模拟,这使得我们生活的世界不太可能是基础现实。

虽然有些难以理解,但是AI Town的最新发展使该理论更接近现实,可能会成为人工智能发展历史上的关键的时刻。

如果AI可以创造出角色之间能够互动的逼真世界,将会有各种应用,比如取代游戏中的NPC。

乍一看,我们很难判断这些角色是否记得他们进行过的对话,并将这些对话作为未来对话的输入。

但如果确实如此,我们可能会拥有第一个人工智能模拟小镇。

参考资料:

https://github.com/a16z-infra/ai-town#customize-your-own-simulation

免责声明:作者保留权利,不代表本站立场。如想了解更多和作者有关的信息可以查看页面右侧作者信息卡片。
反馈
to-top--btn