精华内容
下载资源
问答
  • 人工智能训练平台

    千次阅读 2020-12-15 15:23:29
    人工智能训练平台 AI平台的架构如下图所示,用户通过Web Portal调用REST Server的API提交作业(Job)和监控集群,其它第三方工具也可通过该API进行任务管理。随后Web Portal与Launcher交互,以执行各种作业,再由...

    人工智能训练平台

    1、平台定位

    为深度学习提供一个深度定制和优化的人工智能集群管理平台,让人工智能堆栈变得简单、快速、可扩展。
    ● 为深度学习量身定做,可扩展支撑更多AI和大数据框架
    通过创新的AI平台运行环境支持,几乎所有深度学习框架如CNTK、TensorFlow、PyTorch等无需修改即可运行;其基于Docker的架构则让用户可以方便地扩展更多AI与大数据框架。
    ● 容器与微服务化,让AI流水线实现DevOps
    AI平台 100%基于微服务架构,让AI平台以及开发便于实现DevOps的开发运维模式。
    ● 支持GPU多租,可统筹集群资源调度与服务管理能力
    在深度学习负载下,GPU逐渐成为资源调度的一等公民,AI平台提供了针对GPU优化的调度算法,丰富的端口管理,支持Virtual Cluster多租机制,可通过Launcher Server为服务作业的运行保驾护航。
    ● 提供丰富的运营、监控、调试功能,降低运维复杂度
    PAI为运营人员提供了硬件、服务、作业的多级监控,同时开发者还可以通过日志、SSH等方便调试作业。

    2、系统架构

    AI平台的架构如下图所示,用户通过Web Portal调用REST Server的API提交作业(Job)和监控集群,其它第三方工具也可通过该API进行任务管理。随后Web Portal与Launcher交互,以执行各种作业,再由Launcher Server处理作业请求并将其提交至Hadoop YARN进行资源分配与调度。可以看到,AI平台给YARN添加了GPU支持,使其能将GPU作为可计算资源调度,助力深度学习。其中,YARN负责作业的管理,其它静态资源(下图蓝色方框所示)则由Kubernetes进行管理。
    在这里插入图片描述
    提交作业:Web Portal
    交互中间件:Launcher
    作业、资源管理:Hadoop YARN
    静态资源管理:Kubernetes

    AI平台完全基于微服务架构,所有的AI平台服务和AI Job均在容器中运行,这样的设计让AI平台的部署更加简单,无论是在Ubuntu裸机集群还是在云服务器上,仅需运行几个脚本即可完成部署。这同时也使其能够支持多种不同类型的AI任务,如CNTK、TensorFlow、PyTorch等不同的深度学习框架。此外,用户通过自定义Job容器即可支持新的深度学习框架和其他机器学习、大数据等AI任务,具有很强的扩展性。
    在运维方面,AI平台提供了AI任务在线调试、错误报警、日志管理、性能检测等功能,显著降低了AI平台的日常运维难度。同时,它还支持MPI、RDMA网络,可满足企业对大规模深度学习任务的性能要求。
    不仅如此,AI平台还实现了与Visual Studio的集成。Visual Studio Tools for AI是微软Visual Studio 2017 IDE的扩展,用户在Visual Studio中就可以开发、调试和部署深度学习和AI解决方案。集成后,用户在Visual Studio中调试好的模型可便捷地部署到AI平台集群中。
    AI平台提供了友好的用户界面,操作简单,便于用户进行集群监控、任务提交等。例如,主界面上显示了集群的GPU利用率、节点总数、CPU利用率、网络状况等。当某项数据异常时,AI平台将启动报警机制通知用户,并在UI上以颜色改变的形式进行提醒(如变成红色等)。
    在这里插入图片描述
    AI平台主界面
    在这里插入图片描述

    集群Job概览,点击Job名称可以查看详细信息及日志信息
    在这里插入图片描述
    Job运行状态页显示容器的IP地址、端口和GPU位置,该页面还提供远程SSH登录容器的信息
    在这里插入图片描述
    集群中机器运行状况概览,不同颜色展现了不同的忙闲程度
    在这里插入图片描述

    集群中每台机器上的Service运行状况

    本文所有权归属广东腾杰信息科技有限公司 http://www.tingate.com.cn

    展开全文
  • 领导人工智能AI)潮流的大咖DeepMind和OpenAI日前开放旗下了的训练平台,目标是进一步开发通用智能。 DeepMind隶属Alphabet的人工智能部门。DeepMind周一宣布开源DeepMind实验室。DeepMind实验室是DeepMind旗下...

    领导人工智能(AI)潮流的大咖DeepMind和OpenAI日前开放旗下了的训练平台,目标是进一步开发通用智能。

    英特尔360度回放技术  打造前所未有的西班牙国家德比

    DeepMind隶属Alphabet的人工智能部门。DeepMind周一宣布开源DeepMind实验室。DeepMind实验室是DeepMind旗下用于基于代理的AI研究的3D游戏平台。

    DeepMind团队在一篇博客文章中表示,3 D世界是从第一人称的角度观察到的,在3 D世界里开发通用智能会更容易一些。所谓的通用智能是指适应不断变化的环境和在未预先编程环境里运作的能力。

    该博文指,“毕竟,自然世界里唯一已知的通用智能例子起源于动物的物理和感官,是一个进化、发展和学习 的组合。动物和人类智能的大部分极有可能是丰富环境的直接结果,若无环境这些智能是不大可能出现的。”

    DeepMind实验室里的代理以漂浮物“个体”的形式出现,其推进器激活后,代理可以四处浮动。DeepMind实验室平台的研究重点放在导航、内存、一人称角度3D视觉、电机控制、规划、策略和时间管理上。用户可以利用GitHub上的资源在平台上添加新的定制层,包括诸如游戏逻辑和奖励计划以及在代理培训期间动态生成的小说地图布局等功能。

    另外,由Elon Musk、亚马逊网络服务和其他商家打造的非营利AI公司OpenAI也宣布推出名为Universe的软件平台,Universe可用游戏、网站和其他应用里的AI通用智能的测试和训练。Universe能将各种程序转换成支持Gym的训练环境。Gym是OpenAI开源工具包,可用于开发和比较各种强化学习算法。

    OpenAI的博文称,“我们的目标是开发一种单一的智能代理,该代理可以灵活地应用其过去在Universe环境里的经验,快速掌控不熟悉的困难环境,此举将会是通用智能领域里重大的一步。”

    OpenAI团队的解释称,Universe里的代理通过观察屏幕的像素和产生键盘和鼠标命令操作远程桌面。Universe在VNC远程桌面后面运行程序,Universe的程序库将代理转成一个VNC客户端。新发布的版本含数千个环境,包括Flash游戏、诸如slither.io的浏览器任务和游戏。此外,OpenAI已拿到了EA、微软工作室、Valve、Wolfram和其他商家的的许可,Universe人工智能代理因此可以访问许多游戏和应用程序。






    原文发布时间为:2016年12月6日 
    本文来自云栖社区合作伙伴至顶网,了解相关信息可以关注至顶网。
    展开全文
  • 实现方案:使用EasyDL定制AI训练平台的图像分类算法,训练模型并调用训练后的模型api,对本地图像进行分类操作 图像数据 创建图像分类数据集 上传图片 ——》在线标注 等我标完200个图片之后,发现一个更方便的...

    项目需求

    如下图所示,图片内容是吊牌分为吊牌,是水洗标分为水洗,不包含这两项标为其他

    从上万张图片中挑出吊牌和水洗图片

    把混在一起的图片进行分类挑出

    在这里插入图片描述

    实现方案:使用EasyDL定制AI训练平台的图像分类算法,训练模型并调用训练后的模型api,对本地图像进行分类操作

    图像数据

    创建图像分类数据集
    上传图片 ——》在线标注
    在这里插入图片描述
    在这里插入图片描述

    在这里插入图片描述

    等我标完200个图片之后,发现一个更方便的方法,

    建议多看文档,多摸索摸索

    因为我这边就三个标签,把对应标签下的图片分好,用标签名命名文件夹并压缩为zip格式,直接上传压缩包就可以自动标注了

    模型处理

    EasyDL定制AI训练平台
    在这里插入图片描述
    按照官方文档 训练模型 步骤一步步操作即可,都是图形化界面可以说是相当方便了,我选的公有云API部署,其他部署方式还没试,按步骤训练模型检验模型即可

    我个人三个标签下每个标签放了100张左右(分的不是太细,100多和90几),

    最后训练和检验结果还可以,正确率可以达到95%
    在这里插入图片描述
    训练好之后就可以发布模型了,只有发布了之后才可以调用
    官方说法通常的审核周期为T+1,即当天申请第二天可以审核完成,我的模型发布之后10分钟不到就审核完成了

    模型使用

    最后是模型使用,前面说了我是用的公有云API部署
    所以使用的化也要调用自己设置的公有云API,这个官方文档里也有操作说明

    因为我个人使用python3,官方文档的demo还是python2的,有点不适用

    放在这里有兴趣的可以自己瞅瞅,还可以选择其他语言
    图像分类API调用文档

    下面是我自己在python3环境下的改写

    # 先获取api token
    # encoding:utf-8
    import requests 
    # access_token: 要获取的Access Token;
    # expires_in: Access Token的有效期(秒为单位,一般为1个月);
    
    # client_id 为官网获取的AK, client_secret 为官网获取的SK
    host = 'https://aip.baidubce.com/oauth/2.0/token?grant_type=client_credentials&client_id=【官网获取的AK】&client_secret=【官网获取的SK】'
    response = requests.get(host)
    if response:
        print(response.json())
    
    # 单张图片test
    
    # encoding:utf-8
    # import urllib2
    from urllib.request import urlopen
    import base64
    import json
    import urllib
    pic_path = r"D:\Jupyter Notebook\水洗标\INSE-17.jpg"
    
    '''
    easydl图像分类
    '''
    
    request_url = "https://aip.baidubce.com/rpc/2.0/ai_custom/v1/classification/dpsxv1"
    
    with open(pic_path, 'rb') as f:
        base64_data = base64.b64encode(f.read())
        s = base64_data.decode('UTF8')
    
    params = {"image": s, "top_num": "3"}
    params = json.dumps(params)
    access_token = response.json()['access_token']
    request_url = request_url + "?access_token=" + access_token
    
    session = requests.Session()
    headers = {'Content-Type': 'application/json'}
    r = session.post(request_url, data=params, headers=headers)
    print(r.text)
    

    输出结果如下,对应各标签score
    在这里插入图片描述
    根据score对图片文件打标分类即可,是真的好用而且还是免费,还有其他很多模型开放,可以研究研究!而且很多免费
    低代码实现人工智能算法!加油吧!少年!!!

    在这里插入图片描述

    展开全文
  • Universe: 一个人工智能AI训练和测量平台。Universe。它是一个非常庞大的人工智能训练场,在这里,人工智能系统能够玩游戏、浏览网页。
  • 本文是2020年的正式第一文,介绍了人工智能领域深度学习平台的相关信息,内容包括:AI平台的基本介绍、系统架构、实现难点和相关能力。 接下来,围绕着作者自身搭建商品模型训练平台案例,分享相关设计经验,内容...

    AI平台的初衷永远是提高开发效率,加快算法迭代周期。通过产品化AI技术,让运营人员能够更贴近技术,更好地指导赋能业务场景,给客户带来更好的技术体验和产品体验。

    本文是2020年的正式第一文,介绍了人工智能领域深度学习平台的相关信息,内容包括:AI平台的基本介绍、系统架构、实现难点和相关能力。

    接下来,围绕着作者自身搭建商品模型训练平台案例,分享相关设计经验,内容包括:业务场景、训练平台系统架构的规划、数据和模型中心、投产比问题和相关总结。

    一、关于AI平台

    1.1 AI平台介绍

    AI模型训练平台,基于核心模块和应用场景不同,又可以称作深度学习平台、机器学习平台、人工智能平台(以下统称做AI平台)。

    AI平台提供业务到产品、数据到模型、端到端,线上化的人工智能应用解决方案。

    用户在AI平台能够使用不同的深度学习框架进行大规模的训练,对数据集和模型进行管理和迭代,同时通过API和本地部署等方式接入到具体业务场景中使用。

    简单理解,AI平台=AI SAAS+(PAAS)+(IAAS)。

    以下是腾讯DI-X和阿里PAI平台的介绍:

    DI-X(Data Intelligence X)是基于腾讯云强大计算能力的一站式深度学习平台。它通过可视化的拖拽布局,组合各种数据源、组件、算法、模型和评估模块,让算法工程师和数据科学家在其之上,方便地进行模型训练、评估及预测。

    阿里云机器学习平台PAI(Platform of Artificial Intelligence),为传统机器学习和深度学习提供了从数据处理、模型训练、服务部署到预测的一站式服务。

    使用AI平台,能够简化开发人员对数据预处理和管理、模型训练和部署等繁琐的代码操作,加快算法开发效率,提高产品的迭代周期;并且通过AI平台能整合计算资源、数据资源、模型资源,使用者能对不同资源进行复用和调度。

    开放AI平台后,也能有效进行商业化,对企业所处领域的AI业务生态环境有一定的推动和反馈。

    国内外相关的AI平台有:

    国内:

    • 华为ModelArts
    • 阿里云 PAI
    • 百度 Paddle Paddle
    • 腾讯 DI-X深度学习平台
    • 金山云 人工智能平台
    • qingcloud 人工智能平台
    • 京东 JDAINeuFoundry
    • 小米Cloud-ml平台

    国外:

    • Microsoft Azure Machine Learning
    • AWS Machine Learning
    • Google Cloud Platform

    1.2 AI平台系统架构

    基于一个企业整体系统的架构来看,AI平台可视为业务的技术支撑中台之一 (平行于数据中台),起到承上启下(承载业务,对接技术底层)的作用。

    若一个企业当前已有数据中台,则可将数据中台作为AI中台的数据输入和数据输出系统对象,AI中台作为业务前台的模型和算法供给平台。若业务前台有AI需求(如图像识别、语义识别、商品推荐等),算法运营团队则通过在AI平台对模型的训练迭代以支持。

    根据企业不同的规模、资源和业务场景,其AI平台会有不一样的定位。

    例如AI和数据可同为一个中台、AI平台可视为业务中台一部分、AI平台整合进技术中台或后台等。规模较小、资源有限的企业通常会选择使用第三方AI平台对业务进行服务,而非自建AI平台。

    一文介绍AI商品模型训练平台(深度学习平台)

    企业架构示例:AI平台作为AI中台

    关于AI平台自身的架构设计,各第三方平台都大同小异,主要是技术架构上的不同,暂时没有必要去深入研究。

    这里以京东NeuFoundry神铸项目系统架构为例,初探一二:

    一文介绍AI商品模型训练平台(深度学习平台)

    NeuFoundry平台架构图

    NeuFoundry基础设施层采用Docker容器进行算力资源的池化,通过Kubernetes进行整体的资源管理、资源分配、任务运行、状态监控等,平台集成了MySQL、Redis、MQ等多种中间件服务,通过数据标注、模型训练、模型发布,生成自定义的AI能力,为各行各业的业务服务提供有力的支撑。

    1.3 AI平台实现难点

    1)大数据处理问题

    在当前阶段,AI底层技术原理决定了“有多少数据,模型能力就有多好”的情况。同时,企业在日常业务运行中会不断产生新数据。

    当数据需求和客观数据量都很大,大数据的管理和处理能力对于一个AI平台来说是最基础的能力,开发人员需要结合AI模型训练任务的制定合理的数据调度方案,同时对数据进行生命周期的管理(如定期的删除冗余数据、不规则数据)。

    2)分布式计算

    大数据的处理、模型的训练都十分消耗资源。如果业务场景复杂,模型训练时间长或者样本规模大,超过单台服务器能力时,需要支持分布式训练。

    微博深度学习训练集群的解决方式是:

    以TensorFlow分布式运行方式为例进行说明,如图5所示。

    一个TensorFlow分布式程序对应一个抽象的集群,集群(cluster)由工作节点(worker)和参数服务器(parameter server)组成。工作节点(worker)承担矩阵乘、向量加等具体计算任务,计算出相应参数(weight和bias),并把参数汇总到参数服务器;参数服务器(parameter server)把从众多工作节点收集参数汇总并计算,并传递给相应工作节点,由工作节点进行下一轮计算,如此循环往复。

    3)AI平台实现的最大瓶颈

    在于企业对AI平台投产比的权衡(顶层、中层、执行层对AI平台的价值认知),这一点会在下文重点说明 。

    1.4 AI平台相关能力

    AI平台不仅需要提供AI开发流程所需基础技能,还需针对不同的用户(产品经理、运营人员、算法工程师……)、不同的客户(大企业、中小企业、传统企业、科技企业……)提供对应所需服务。

    我将AI平台能力分为以下五类:

    • 数据能力:数据获取、数据预处理(ETL)、数据集管理、数据标注、数据增强……
    • 模型能力:模型管理、模型训练、模型验证、模型部署、模型处理、模型详情……
    • 算法能力:支持各种算法、深度学习、数据运算处理框架、预置模型、算法调用、对算法组合操作……
    • 部署能力:多重部署方式、在线部署、私有化部署、边缘端部署、灰度/增量/全量部署……
    • 其他能力:AI服务市场、工单客服、权限管理、工作流可视化……

    一文介绍AI商品模型训练平台(深度学习平台)

    华为ModelArts平台技能

    二、AI商品模型训练平台设计经验分享

    2.1 业务场景

    在日常经营的过程中,每个新的商品都需要进行数据采集、标注,随后将数据扔进对应模型文件进行训练,其中涉及非常多重复且繁琐的工作问题。

    将数据采集处理到模型训练部署的流程平台化,能够极大提升开发效率,让运营人员和算法人员更好地分别针对场景和模型进行管理。

    而且,数据、模型(可线上使用)对于企业来说是最核心的技术资源,不过初期一直处在黑匣子状态,只有算法人员可接触和查看。所以在业务发展到达一定的阶段时,就需要开始对其进行有效管理。

    本文的AI平台,主要服务零售行业商品模型训练的业务场景,故称作AI商品模型训练平台。

    2.2 系统架构

    综合资源、场景、服务效率、商业化等多个维度去考量,作者设计的商品模型训练平台主要以数据中心和模型中心两大核心子系统组成,一方面可以以最小的开发资源实现涵盖了当前业务所需要的核心流程和个性化流程,另一方面也有利于平台后续的能力拓展和进行商业化。

    一文介绍AI商品模型训练平台(深度学习平台)

    AI商品模型训练平台

    数据中心主要服务3点数据管理业务需求:数据获取、数据处理、数据评估。其中涉及能力有数据集获取、数据集管理、数据增强、增强策略配置、数据标注、标注任务系统、半自动标注等。

    模型中心主要服务3点模型管理业务需求:模型训练和验证、模型管理、模型部署。其中涉及能力有模型训练、参数配置、训练任务管理、训练状态可视化、模型文件管理、模型版本管理、模型状态管理、模型操作、模型处理、模型处理策略管理、模型部署、部署业务管理等。

    接下来,针对核心的业务需求逐一说明解决方案。

    2.3 数据中心

    2.3.1 数据获取

    AI模型训练的第一步是对数据的获取(此处的数据都为图片数据)。

    数据的采集可以通过线下构建对应业务场景需要的环境进行拍摄采集,也可以通过平台内已有数据(线上数据、旧数据)、第三方数据(通过开源、付费购买、爬虫爬取多多种形式)获取。

    • 线上数据集的处理:多采用badcase,重新标注、增强。
    • 爬取数据集:爬取公开渠道如百度图片的对应label数据集,并区分可用不可用。

    因数据集都为图片数据,并且模型是基于深度学习技术构建,故涉及到数据ETL、特征工程等一些处理暂时不需要,后续可根据业务场景和应用技术的拓展,在技术架构和平台架构补充上对应的能力。

    数据集获取完成后,可以将数据按照不同的类型存放,通过数据集管理页面进管理。

    数据类型可以按照不同的维度区分:

    1)以标品和非标品区分

    • 标品数据:标品静态状态数据、标品动态状态数据;
    • 非标品数据:标品多角度数据、标品静态状数据、标品动态状态数据、其他异常情况数据。

    2)以数据来源渠道区分

    • 线下:构建不同的场景(静态动态)进行拍摄采集;
    • 线上:平台内已有数据(线上数据、旧数据)、第三方数据(开源数据集、付费数据集、爬取数据集)。

    3)以数据格式区分

    图片、视频、其他格式(2d、3d)。

    4)以数据使用性区分

    基本数据集、训练数据集(含标注)、验证数据集、异常数据集、自定义数据集。

    数据集应当有生命周期的管理和备注信息,以免在运营一段时间后数据量杂乱冗余。

    2.3.2 数据处理

    部分场景的模型训练前,需要对数据进行不同程度、不同方案的增强。运营人员或算法人员可以在数据增强的页面上,选择对应的数据集和数据增强策略,对数据进行增强,增强后的数据集将会同步以原数据的子文件形式,在数据集管理中以“增强数据集”类型展示。

    同时,为适应多种业务场景和加快数据增强实验的有效性,可利用已实现的数据增强技术,配置出多重数据增强方案。如:

    • 旋转:90°。
    • 左右镜像。
    • 增亮2倍。
    • 对比度1.25倍。
    • 数据模糊3倍。

    在数据集资源管理整合完成后,则可以在平台上对数据进行标注。运营人员可以对平台上已有数据集进行标注,也可以导入新的数据集文件进行标注。

    通常标注工作有:

    1. 对基本数据集(没有标注过的)进行标注或者半标注(半自动标注:利用少量数据集生成的模型进行自动标注,减少人工标注的工作量);
    2. 对异常数据集进行重新标准;
    3. 对自定义数据集进行标注。

    标注方式支持图像分类标注、方形框标注、圆形框标注、多边形标注、语义分割标注、3d标注。标注内容有标品和非标品,也有其他需要标注的内容信息如手、人脸。

    2.3.3 数据评估

    数据评估工作贯穿数据获取到数据处理整个过程,其操作质量和流程严密程度直接决定了数据质量的好坏,间接决定了模型表现效果的好坏。

    在获取数据以及对数据进行增强时,运营人员根据通用规则和经验进行数据评估是否可用,不确定的情况下需询问算法。但一般界定不确定的数据规则根据商品、当前模型、当前需求、算法认知和经验等多个因素确定,不确定性比较大,现实中还是多以“个人经验”为准则。这一部分随着相关员工经验和认知的增长,一定存在比较大的优化空间。

    日常需要对已有的数据集进行定期检查、定量检查,对数据质量和标注质量有一定的回归验证。同样,标注任务流程化(包括标注任务指派、标注任务完成的多重审核、标注人员的任务完成度和错误数据统计以及对应的奖惩机制)也是数据质量保证的重要环节。

    2.4 模型中心

    2.4.1 模型训练和验证

    确保数据提供到位后,运营人员或者算法人员可以在模型训练的页面上,选择模型,选择对应的数据集和对应的训练参数(如AI算法以及网络深度、训练step)即可开始进行增量或全量的模型训练。

    如果涉及GPU服务器运算量等考量,还可选择对应训练GPU服务器。训练过程中训练状态的可视化的展示可帮助运营人员对当前训练任务的进度有所了解,以便对损失度停止下降或者其他异常等不符合预期的模型训练任务进行暂停、取消等操作,解放算法人员的生产力。

    一文介绍AI商品模型训练平台(深度学习平台)

    TensorBoard界面

    模型训练完成后,可以对训练集的数据进行,得出模型MAP、精确率、召回率等指标,评估模型效果和质量;也可以选取未标注的验证数据集用模型进行识别,对模型的质量进行验证。

    2.4.2 模型管理

    初始的模型资源可通过外部文件导入,或者直接新增训练任务生成。

    通常来说,模型大部分时间处于“使用”的状态(线上的使用和更新的使用),故模型的管理主要针对模型的版本、模型的各种状态(服务状态、训练状态)、模型的操作记录、模型的详细参数等四个方面进行。

    在模型有优化更新、替代、异常等情况下,通过“模型管理“:可以对模型进行操作,如暂停服务,复制模型、上线模型、删除模型等操作。

    有一些模型可能需要在比较特殊的业务场景下运行(例如边缘端、硬件资源有限、网络延迟较高)进行,所以针对该种情况,也需要设计对模型进行压缩、调优等傻瓜式一键式处理方案,目的也是减少开发在繁琐工程上的工作量。

    2.4.3 模型部署

    在完成模型的训练生成模型,并且对模型进行一定验证后,可在”模型部署”对模型进行部署上线,部署流程通常为灰度部署过渡到全量部署。

    在边缘端应用场景下,也可以通过边缘端定期请求拉取最新模型文件或者通过边缘节点实现边缘端部署。

    2.5 AI平台投产比权衡

    上文提到,AI平台实现的最大瓶颈,其实在于企业对平台投产比的权衡。

    作者团队内部经过多次沟通考量,集中回答了以下三个问题,最终才决定对平台进行1.0的初步开发(主要也是先验证效用为主)。

    AI平台是否真的能支持业务,整体效率(开发效率、业务效率)能有多大提升?是否有潜在的实现后的未知成本(如算法人员需要花费大量时间教育运营人员使用某些模型训练功能)?能否使用数字对价值进行量化?就算能量化,是否又额外需要开发和沟通成本?

    现有的第三方AI平台已支持大部分业务,是否能先使用第三方AI平台进行业务链条的孵化?个性化的数据处理和训练业务是否可依旧可通过开发手动处理?

    AI平台的商业化价值短期能否提现(因为其他企业因数据安全问题不会安心使用,同时也极度依赖企业的知名度)?若短期无法体现,在什么阶段可以体现?

    关于价值权衡考量的问题没有标准化答案,每个企业都以自身的资源、业务等多个因素综合去考量,相关决策者和执行者对AI平台也有不一样的认知,故主要是看不同企业各自最终讨论出的最优投产比是否能大于投入成本后决定是否开发AI平台。

    总结

    不管是针对任何业务场景,AI平台的初衷永远是提高开发效率,加快算法迭代周期。通过产品化AI技术,让运营人员能够更贴近技术,更好地指导赋能业务场景,给客户带来更好的技术体验和产品体验。

    不仅如此,企业从内部服务起完善AI平台,逐渐开放平台并对平台进行商业化,服务原来没有足够资源和资金撬动AI技术的外部客户,为互联网AI生态的发展也起到了推动的作用。

    AI平台的发展和使用也是AI技术应用层面发展的重要节点,代表了AI技术开始产品化,更加落地,更加贴近业务层,也代表了企业有了更高效率的运用AI技术的方式。

     

    展开全文
  • AI on Android:安卓平台上的人工智能应用实战(02.模型的再训练AI on Android:安卓平台上的人工智能应用实战(01.环境的搭建):https://blog.csdn.net/NJP_NJP/article/details/88366318 上一篇我们介绍了...
  • 人工智能训练师知多少

    千次阅读 2019-07-26 18:01:38
    人工智能训练师又称为AI(Artificial Intelligence)Trainer,是近几年来伴随着人工智能的发展所兴起的一个新岗位。随着这个岗位被越来越多的人所熟知,不少疑问也随之而来,例如,人工智能训练师的日常工作包括哪些...
  • 华为Altas计算平台的主要特点 华为HiAI平台主要特点 华为云EL服务 一、深度学习开发框架简介 1、Pytorch 特点: 2、TensorFlow 优点:灵活可拓展,多语言,GPU,多平台,运算性能强,分布式。 二、TensorFlow2...
  • 作者:朱明徳全文共 4686 字 9 图,阅读需要 10 分钟———— / BEGIN / ————研究背景有人说,“人工智能训练师”是AI给人类带来的第一个非技术类“新职位”,这也许能让大家对AI多一些客观认知、甚至是好感;...
  • (完整版深度报告的下载方式,详见文末)研究背景有人说,“人工智能训练师”是AI给人类带来的第一个非技术类“新职位”,这也许能让大家对AI多一些客观认知、甚至是好感;不过这个新职位,AI领域从业者的认知度还不...
  • 编者按:今年四月,由马斯克和知名风投专家 Peter Thiel、Y Combinator 创始人 Sam Altman 共同创立的 AI 研究组织对外开放了其 AI 训练平台 OpenAI Gym。近日,该组织宣布还将开源测试和训练 AI 通用能力的平台 ...
  • AMAX,AI和深学习发展高性能服务器的领先制造商,宣布推出的DL-E48A,可重新配置的单双根高密度GPU平台,专为AI训练和推理而设计。AMAX在CVPR 2018展示了其备受瞩目的解决方案。 DL-E48A是一款高性能,高密度8x GPU...
  • 近年来,随着大数据的积累、理论算法的革新、计算能力的提升,人工智能人工智能再次受到学术界和产业界的广泛关注,并在很多应用领域取得了突破性进展。不过,定制模型往往需要 AI算法科学家们搭建深度学习模型,...
  • 我们常说的 AI 通用能力往往不针对具体的行业应用,而是主要解决日常或者泛化的问题,很多技术企业给出的方案是通用式的,比如通用文字识别,无论识别身份证、驾驶证、行驶证等,任何一张图片训练后的模型都会尽可能...
  • 有三个指标判断人工智能训练模型的单方面好坏 正确率(accuracy) = TP+TN/TP+FN+FP+TN 精确率(precision) = TP/TP+FP 召回率(recall) = TP/TP+FN 一、F1值 F值是精确率和召回率的调和平均 F1值...
  • 不久前,人力资源社会保障部发布了一种炙手可热的新职业:AI训练师。没想到,浙江大学与阿里安全的人工智能训练师马上创造出一个 “AI训练师助手”,高效打造...
  • 人工智能(AI)之模型训练是什么

    千次阅读 2020-03-02 23:19:09
    人工智能中,面对大量用户输入的数据/素材,如果要在杂乱无章的内容准确、容易地识别,输出我们期待输出的图像/语音,并不是那么容易的。因此算法就显得尤为重要了。算法就是我们所说的模型。 当然,算法的内容,...
  • 人工智能AI实训平台

    千次阅读 2020-12-23 14:12:47
    人工智能AI实训平台 目录 产品外观 产品架构 产品特点 技术优势 产品功能 系统组成 操作使用说明 网络结构 教学实训 手写数字识别项目案例WZ-AISZ-V1.0 人脸识别项目案例WZ-AIRL-V1.0 表情识别项目案例WZ-AIBQ-V1.0 ...
  • 你将收获 掌握如何一键标注缺陷或目标图片 掌握如何一键生成配置文件 掌握如何一键训练 ...2、打开智能AI标注训练平台 3、选择刚才刚才建的的文件夹作为项目主目录 进入NG文件夹,查看图片,并双...
  • 摘要: 业务人员甚至门卫大爷也能训练人工智能?曾经只出现科幻电影中的一幕真的发生了。7月18日,阿里巴巴机器智能技术实验室宣布在阿里云正式发布智能语音自学习平台公有云产品,突破性地提供一键式语音智能自助...
  • 只有实现一个好的计算平台,才能够够支撑更多的算法工程师将自己的idea做更多的尝试并找寻出更多的应用场景,让机器能够看到和听到并且感知到这个世界,真正地帮助人类解决问题,推动智能产业的发展。 这时候Tesra...
  • 本文简要介绍了如何在阿里云上利用阿里云的容器服务,文件存储NAS,对象存储OSS结合ECS,persues框架等搭建AI训练平台的步骤和方法,并包含了如何运行imagenet 训练的详细操作步骤。 详细操作步骤文档及实验文件,...
  • 基于百度AI Studio平台使用PaddleDetection 训练自己的数据集 PaddleDetection:传送门 1.下载并安装PaddlePaddle深度学习框架(AI Studio已经自动下载成压缩包) 进入AI Studio终端,查看当前所在路径,查看...

空空如也

空空如也

1 2 3 4 5 ... 20
收藏数 197,524
精华内容 79,009
关键字:

ai训练平台