服务粉丝

我们一直在努力
当前位置:首页 > 财经 >

ControlNet仅靠一张照片完成“旧房改造” | GitHub热榜第一

日期: 来源:量子位收集编辑:
Alex 发自 凹非寺
量子位 | 公众号 QbitAI

这是同一个房间改装前后的样子:

一下子质感Up,从凌乱过时变成了有腔有调的现代风。

至于设计费嘛,其实是…一分钱都没花!

因为这并不是专业设计师做的方案,而全靠一只AI完成。

——只用给AI一张照片,它就能搞定的那种。

还可以选择不同风格。

如此实用的“旧房改造”AI,很快引来大波网友驻足围观;原帖登上了GitHub热榜第一,目前已收获2700+颗星。

还在HackerNews上引起热议。

有网友称,这个应用让他觉得很惊喜,并表示:

如果这种AI还能添加一些功能就更好了,比如给生成图片中各设施进行估价,这样就有机会落地商用了。

还有网友指出:

这实际上就是一种生成式预训练Transformer,和其他Transformer本质是一样的。

一张图就能搞定房间设计

不管怎么说,这个AI确实在现有技术上整出了实用且新颖的用法。量子位没忍住也亲自上手试了试

我先找来几张破旧房间的照片,然后开始和AI共同设计改造。

说是共同改造,但其实我要做的,就只用给AI一张图,然后点击两个选项:风格和房间用途。

比如,这里选择现代风的客厅:

几秒钟后,我眼前一亮。不仔细对比左右两张图的格局,真的很难相信这是同一个房间。

除了现代风,还有其他选择,于是我又试了试极简风:

虽然这似乎不太“简”,但很精美,甚至比上面的现代风更胜一筹。(给我看得都心动了…)。

不过需要说明的是,目前此AI一个IP每天最多只能用3次——实在想多弄几张的话,可以换台电脑。

看到这里,话说一只小小的AI,为何短短几秒就能设计好一整个房间?

其实,这主要得益于它背后一种强大的新晋机器学习模型:ControlNet

ControlNet,由斯坦福大学研发,是一种通过添加额外条件,来控制扩散模型的神经网络。

这个模型,可以将神经网络块的不同权重,分别复制到“锁定”副本(locked copy)和“可训练”副本(trainable copy)中。

锁定副本,会保留输入信息的一些关键特征;可训练副本,则会通过训练、学习来调节其他特征。然后,这两部分还会连接起来协同工作。

对于可训练副本而言,其训练的方向包括:物体的准确边缘、语义分割、人体姿势等等。

简单来说,就是AI能够判定,一张图中各个要素是否可以改变;然后会在原图某些核心要素不变的前提下生成新的内容,不会导致生成图和原图看起来毫无联系。

另外,这个模型搭配文字“食用”效果更佳——比如刚才我选择的房间用途和装修风格,其实就是在给AI添加一点文字提示。

总而言之,基于这样的原理,ControlNet不仅可以胜任室内设计,还有可以玩出别的花样。

比如,一键涂色:

还有“一键换猫”(猫换了,但可爱的歪头杀不变):

“一键换牛”:

Emmm,那某些游戏皮肤是不是……?

值得一提的是,如果你嫌专门登陆官网(见传送门)比较麻烦,可以通过API将这个AI应用连到你的本地应用上。

按这种用法,首先需要下载数据库。

git clone https://github.com/Nutlope/roomGPT

接着去Replicate网站上创建一个帐户,并获取 API 密钥。注意,然后需要把将API 密钥存储在 .env 文件中,如 .example.env。

再安装依赖项:

npm install

然后你就能在命令行中运行该AI了:

npm run dev

开发者简介

最后,来认识一下此AI的幕后开发者:其实一共就3个人。

其中,最主要的贡献者Hassan El Mghari,本科毕业于德雷塞尔大学计算机工程系,现在是一名全栈软件工程师。

除了开发各种应用,这哥们儿还曾创立了一家游戏营销公司,在Steam上拥有500,000+名用户。

官网传送门:
https://www.roomgpt.io/
Relicatec传送门:
https://replicate.com/
参考链接:
[1]https://github.com/Nutlope/roomGPT
[2]https://news.ycombinator.com/item?id=35001046
[3]https://levelup.gitconnected.com/controlnet-control-your-ai-art-generation-616c86c88964
[4]https://www.elmghari.com/about

「中国AIGC产业峰会」启动

邀您共襄盛举

「中国AIGC产业峰会」即将在今年3月举办,峰会将邀请AIGC产业相关领域的专家学者,共同探讨生成新世界的过去、现在和未来。

峰会上还将发布《中国AIGC产业全景报告暨AIGC 50》,全面立体描绘我国当前AIGC产业的竞争力图谱。点击链接或下方图片查看大会详情:

被ChatGPT带飞的AIGC如何在中国落地?量子位邀你共同参与中国AIGC产业峰会


点这里

相关阅读

  • 易纲为中国人民银行行长

  • 新华社快讯:大会经投票表决,决定易纲为中国人民银行行长。大家都在看听完政府工作报告,央行青年有话说超出预期!2月金融数据出炉,有这些新看点→美国出现2008年以来最大银行倒闭
  • 代表委员带来的这些好消息,振奋人心!

  •   这两天,全国政协十四届一次会议第三场“委员通道”、十四届全国人大一次会议第三场“代表通道”相继开启。代表委员带来的这些好消息,振奋人心!国产存储系统在国内市场的份
  • 神舟十五号乘组将于今年6月返回地面

  • 据中国载人航天工程办公室12日消息,目前,神舟十五号航天员乘组状态良好,计划于今年6月返回地面,执行神舟十六号和神舟十七号飞行任务的航天员乘组已经选定,正在开展任务训练。据
  • 韩国,被迫“迁都”中国

  • 全文共4166字 | 阅读需11分钟山城宛如一个舞台,记录着两个不同民族并肩作战的历史时期,韩国人也在这里上演着追求民族独立和山河一统的大戏,但是舞台终将落幕,戏曲终究虚幻,半岛
  • 为高质量发展贡献中行力量

  • 图片说明:中行总部大楼◆ 下好“先手棋”,打赢“主动仗”,以专业、全面、暖心的金融服务,展现出国有大行服务实体经济的速度、温度、精度、力度◆ 目前,中国银行已对接营销服务各

热门文章

  • “复活”半年后 京东拍拍二手杀入公益事业

  • 京东拍拍二手“复活”半年后,杀入公益事业,试图让企业捐的赠品、家庭闲置品变成实实在在的“爱心”。 把“闲置品”变爱心 6月12日,“益心一益·守护梦想每一步”2018年四

最新文章

  • 知识图谱赋能时空AI | 3月16日 TF96

  • 本期会议邀请到来自百度等头部企业的代表,来自清华大学的研究人员,以及来自维智科技、河溓海平等时空AI明星创业企业的技术负责人,一起深入探讨时空知识图谱在构建与行业应用落
  • ChatGPT造孽!中国高校因它算力荒

  • 衡宇 发自 凹非寺量子位 | 公众号 QbitAI不做大模型,就没有算力用。这是ChatGPT点燃AI风口后,国内某top3高校AI实验室的残酷现状。同一个实验室里,非大模型团队6人用4块3090卡,