实现前端工程师的第一个AI应用(前端之父是谁)

boyanx5个月前技术教程16

大家好,我卡颂。

最近几个月,AI相关新闻不断抢占大家的注意力。逞着这波热度,各路开发者都投入到AI应用的开发。

比如,15岁的开发者saviomartin7[1]开发的IconifyAI[2]可以根据文字描述生成应用Logo。网页上线5天就赚到了接近1.5k刀。

这波机遇对前端同学有很大利好,因为各种基础服务(比如各种存储服务、AI服务、部署)都有成熟的解决方案可以直接使用,前端同学只需专注业务逻辑的实现即可。

本文让我们看看一位国外老哥是如何用一个周末时间开发一款AI应用。该应用上线仅40天,就获得了20wUV

应用架构

首先介绍下这款应用,应用名叫restorephotos[3],用户上传模糊的老照片后,AI会修复照片,并返回更清晰的版本。应用的完整代码已开源。

应用开源代码地址[4]

整个应用的架构分为4部分:

  1. 前端(Next.js
  2. 图片存储服务
  3. Next.js服务端
  4. AI API

完整工作流程如下:

  1. 用户在前端上传老照片
  2. 前端调用图片存储服务,返回图片存储地址给前端
  3. 前端将图片存储地址发送给后端
  4. 后端调用AI API处理图片
  5. AI API返回处理后的图片给后端,后端返回给前端
  6. 前端展示处理后的效果

前端部分

整个前后端的实现使用Next.js,前端主要包括两部分:

  • 图片上传
  • AI处理后的图片展示

所有主要功能均使用开源库实现。其中,图片上传功能使用react-uploader[5]实现:

<UploadDropzone
 uploader={uploader}
 options={options}
  width="670px"
 height="250px"
 onUpdate={(file) => {
   // ...图片上传成功后的逻辑
 }}
/>;

处理后的图片展示效果使用react-compare-slider[6]

PS:这里用的是我曾祖父的老照片

后端部分

后端核心逻辑包括两部分:

  1. Redis做接口调用频率限制

Redis使用@upstash-redis[7],这是一款基于HTTPRedis客户端。在线创建Redis数据库后,我们可以在服务端通过HTTP请求的方式调用它。

  1. replicate提供的swinir模型处理图片

replicate是一家机器学习的云服务商,我们可以根据业务需要选择不同机器学习模型,比如:

  • 处理图片清晰度
  • 破碎照片修复
  • 文字转图片
  • ...

Next.js服务端,我们通过HTTP的形式调用模型API

// 我们上传的图片地址
const imageUrl = req.body.imageUrl;
// 请求模型接口
const startResponse = await fetch('https://api.replicate.com/v1/predictions', {
 method: 'POST',
 // ...省略代码
 body: JSON.stringify({
    // 我们需要的模型对应的版本
  version: '9283608cc6b7be6b65a8e44983db012355fde4132009bf99d976b2f0896856a3',
  input: { img: imageUrl, version: 'v1.4', scale: 2 }
 })
});

值得注意的是,模型计算需要时间,所以在服务端,我们每秒轮询一次结果,如果模型返回处理后的图片,我们就将图片返回给前端:

// 保存模型处理后的结果
let restoredImage: string | null = null;
while (!restoredImage) {
  // 请求模型API
  let finalResponse = await fetch(endpointUrl, {
    method: "GET",
    // ...省略代码
  });
  let jsonFinalResponse = await finalResponse.json();
  
  if (jsonFinalResponse.status === "succeeded") {
    // 模型返回图片成功
    restoredImage = jsonFinalResponse.output;
  } else if (jsonFinalResponse.status === "failed") {
    // 模型返回图片失败
    break;
  } else {
    // 模型还未返回图片,1s后轮询
    await new Promise((resolve) => setTimeout(resolve, 1000));
  }
}

总结

可以发现,所有基础服务均有现成产品可供使用,这极大加快了前端的开发效率,降低了开发成本。

作者运行这个应用的成本是多少呢?其中:

  • 图片存储使用的是upload.io[8]提供的存储服务。这里作者使用的是35刀/月的基础付费版本,每月有50GB的上传空间
  • Redis云服务考虑到仅用来做接口调用频率限制,使用免费版就好
  • 整个应用使用Vercel部署,Vercel Pro每月20刀
  • 20wUV的模型API调用费用,大概是900刀

对于想构建自己的AI应用的朋友,可以参考本文的实现与成本,行动起来吧。

参考资料

[1]

saviomartin7: https://twitter.com/saviomartin7

[2]

IconifyAI: http://IconifyAI.com

[3]

restorephotos: https://www.restorephotos.io/

[4]

应用开源代码地址: https://github.com/Nutlope/restorePhotos

[5]

react-uploader: https://www.npmjs.com/package/react-uploader

[6]

react-compare-slider: https://www.npmjs.com/package/react-compare-slider

[7]

@upstash-redis: https://docs.upstash.com/redis/overall/pricing

[8]

upload.io: https://upload.io/pricing

标签: slider.js

相关文章

Weex在内涵发现页中的工程实践(weex是骗局吗)

React-Native和Weex是目前最为火热的两个客户端跨平台解决方案。从去年2016年9月份开始,IES在抖音产品中应用了React Native,中途遇到了很多的问题,尤其是长列表的性能问题一...

快速搭建页面:一款开源可视化拖拽工具

简介基于vue可视化拖拽编辑,页面生成工具。提升前端开发效率,可集成至移动端项目作为通过定义 JSON 直接生成 UI 界面。安装教程npm install:安装 node_modules 模块npm...

后端接活儿利器:基于Vue,拖拽一键生成UI界面,简洁漂亮已开源

简介基于vue可视化拖拽编辑,页面生成工具。提升前端开发效率,可集成至移动端项目作为通过定义 JSON 直接生成 UI 界面。安装教程npm install (安装 node_modules 模块)n...

Python与数据可视化:Dash框架入门

Dash 是一个用于创建交互式 Web 应用程序的 Python 框架,它非常适合用于数据分析和可视化的项目。Dash 基于 Flask、Plotly.js 和 React.js 构建,因此可以轻松地...

基于vue实现可视化拖拽编辑器,页面生成工具,提升前端开发效率

项目介绍基于vue实现的可视化拖拽编辑器,实现页面生成工具,提升前端开发效率。可以基层到移动端项目作为自定义json直接生成UI页面。项目特点功能特点页面管理页面设置组件管理组件设置数据导入导出预览重...

微信小程序入门1(微信小程序入门指南)

第一天-------运行第一个小程序一、前言从今天开始小编将带大家一起来学习微信小程序的开发,作为依托于微信的产品,微信小程序的热度的确是不容忽视的,而且推广的话也会有很多优势,毕竟不用像app一样要...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。