TePDistTePDist是阿里云PAI团队自研的基于HLO IR层的全自动分布式深度学习系统,它不仅仅是一个分布式Compiler,还拥有自己的分布式Runtime,有效地解决了深度学习模型并行策略的自动搜索与分布式策略实施问题。
|
EasyNLPEasyNLP是PyTorch中易于使用的NLP开发和应用工具包,它采用可扩展的分布式训练策略构建,并支持适用于各种NLP应用的一整套NLP算法。集成了知识蒸馏和few-shot learning,用于落地大型预训练模型。
|
EasyCVEasyCV是阿里巴巴开源的基于Pytorch,以自监督学习和Transformer技术为核心的all-in-one视觉算法建模工具。EasyCV在阿里巴巴集团内支撑了搜索、淘系、优酷、飞猪等多个BU业务,同时也在阿里云上服务了若干企业客户。
|
EasyRecEasyRec实现了先进的深度学习模型,用于常见的推荐任务,在模型、调参、性能优化等方面具有显著的优势。
|
Easy Reinforcement Learning
基于tensorflow引擎搭建的深度强化学习算法库,支持大规模分布式训练的actor-learner架构,具备轻量化,模块化等特点,经过阿里集团多业务场景打磨。 Github地址 |
EasyTransferEasyTransfer致力于让自然语言处理场景的迁移学习开发与部署更加简单,降低NLP的预训练和知识迁移的门槛。
|
Alink基于Flink的机器学习算法平台,提供丰富的算法组件。2017年研发,2019年开源,Flink社区将机器学习作为重点领域,阿里云将Alink贡献到Flink,成为FlinkML。
|
Graph-LearnGraph-Learn是面向大规模图神经网络的研发和应用而设计的分布式框架。 从大规模图训练实际问题出发,提炼抽象了一套适合于常见图神经网络模型的编程范式。
|
BladeDISCBladeDISC是针对机器学习工作负载的端到端动态形状编译器项目,是阿里巴巴PAI-Blade的关键组件之一 。该项目基于MLIR,与mlir-hlo项目高度相关。
|
DeepRecDeepRec是阿里巴巴集团统一的稀疏模型场景训练引擎,支持了主搜索、首猜、定向广告、直通车广告等核心业务,支撑千亿特征、万亿样本超大规模稀疏训练。
|
EPL(Easy Parallel Library)EPL(Easy Parallel Library) 是统一多种并行策略的、灵活易用的自研分布式深度学习训练框架。
|
HybridBackendHybridBackend是阿里云机器学习平台PAI自研的、面向稀疏模型训练的高性能同步训练框架系统,核心能力是大幅提升GPU集群单位成本下的训练吞吐性能。
|
Proxima Bilin EngineProxima是阿里巴巴达摩院系统AI实验室自研的向量检索内核。核心能力广泛应用于阿里巴巴和蚂蚁集团众多业务,如淘宝搜索和推荐、优酷视频搜索等。
|
– |
更多AI开源项目信息请前往阿里云大数据&AI开源项目。
内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家
阿里云企业补贴进行中: 马上申请
腾讯云限时活动1折起,即将结束: 马上收藏
同尘科技为腾讯云授权服务中心。
购买腾讯云产品享受折上折,更有现金返利:同意关联,立享优惠
转转请注明出处:https://www.yunxiaoer.com/162091.html