锐客网

  1. 首页 > it技术 > >

揭秘（一款云原生的“Jupyter”，如何实现让算法团队更高产（））

2022年1月14日，国产自研的云原生AI开发生产平台——IDP（Intelligent Development Platform) 试用版正式发布。IDP由白海科技研发，目标在于为数据科学家、算法工程师等提供易用的 AI 开发与生产工具，填补该领域国产软件的空白，打造更具极致体验的“Jupyter”。
（申请免费试用体验：https://www.baihai.co/invitation）
AI 时代已至，但国产易用软件尚为空白
在数据、算法和算力“三驾马车”的协同推进下，AI的应用飞速发展，已逐渐渗透进国民经济的各行各业。伴随AI大生产而来的，是数据的庞杂繁芜、模型的日益复杂和计算量的指数级增长，算法开发团队亟需数据治理、模型开发、高性能计算等AI基础软件，以帮助其低成本、低门槛地进行AI开发与生产。
然而，目前国内市场对数据科学家和算法工程师在AI开发生产中的痛点关注不足，缺乏易用的、一体化的国产AI开发与生产工具。现存市场解决方案普遍为国外产品，这些产品或存在跨境使用速度较慢、体验受损的问题，或价格高昂、加重企业利用AI技术进行智能化转型的负担。
因此，白海科技创始团队决定打造AI智能开发平台IDP，专注赋能数据科学家、算法工程师以及欲转型为数据科学家的大数据工程师，为其提供易用的AI开发与生产工具，让其更加专注于模型开发和数据分析本身，提升工作效能，同时帮助企业提升效率，降低AI开发与应用成本。
云原生、专业轻量和按需使用
企业数据上云已成为不可逆转的趋势，从渗透率的角度讲，云服务已难以被称为一种“新兴技术”。根据红杉中国《2021企业数字化年度指南》中的调研数据，已有超过70%的企业使用了云服务，47%的企业正在大规模推广并应用。同时，随着企业业务的复杂化和云服务玩家的多元化，多云部署也成为新的趋势。
随着云服务的蓬勃发展，云原生应用也凭借快速部署、灵活扩展、降低成本等优势，逐渐受到广大企业的关注和喜爱。作为新一代AI开发生产平台，IDP致力于打造云原生的“Jupyter”，将Jupyter的交互式开发体验和云原生的卓越性能进行完美结合，为广大开发者和企业客户提供更加易用、灵活、高效、可迁移的AI开发生产工具。
IDP并非工具集成式的、厚重且大而全的机器学习平台，而是以IDE为唯一入口，专业轻量、按需使用的工具平台。
IDP以集成开发环境IDP Studio为唯一用户交互界面，通过内置可灵活安装与卸载的机器学习库/包、算法开发涉及的各功能组件等，让使用者可在IDP Studio内一站式、稳定、高效地完成包括数据准备、数据探索、模型构建、模型训练、模型评估模型部署与发布的全流程工作。IDP Studio同时支持直接使用SQL进行数据处理，并支持团队协作编程和实时共享。
此外，值得一提的是，为满足专业算法开发团队对性能的要求，IDP以高性能分布式计算引擎IDP Engine为核心支撑，帮助企业实现智能分布式执行，提升算法开发效率，降低资源消耗成本。
易用、性能和协同
IDP主要具有三大核心特征：
1. 易用：本地 IDE 级使用体验 IDP可提供与本地IDE同样优质的使用体验，同时满足交互式和非交互式编程的需求；且编程环境提供代码智能补全、代码自动修复等编码辅助功能，提升开发效率。
数据科学家可在同一开发环境中稳定、便捷地实现SQL处理和ML全流程工作，无需切换工具和平台；同时，可依托IDP Studio内置的主流数据科学库包和多种机器学习框架，快速上手算法开发。
2. 性能：高效率、低成本 IDP通过可视化工作流编排与管理功能，帮助数据科学家和算法开发团队对数据预处理、数据探索、机器学习、深度学习、DB Engine等工作进行统一调度，提升开发效率。
IDP可帮助企业进行精细化的算力资源管理，支持抢占式调度和计算资源自动扩容，具备进程级别的断点续跑和自动休眠功能，帮助企业提升资源利用效率、减少资源浪费、缩短训练等待时间。
另外，IDP通过数据并行、代码分片、代码编译优化等方法对单机版代码进行优化，实现智能分布式执行。
3. 协同：团队协作、多云兼容 IDP支持协作编程，算法团队可进行模型和项目的实时共享、协同编辑、评论交互等，以最大化团队生产力。
作为云原生的AI开发生产平台, IDP天然支持多云部署，为客户提供多样便捷的选择。
未来重点计划：核心开源
下一步，白海科技计划将IDP中IDP Studio的核心功能开源。同时，白海将进一步完善产品功能，一方面持续优化IDP Studio，以便更高效地满足企业对于团队协作和AI生产的基本需求；另一方面，夯实分布式计算引擎IDP Engine, 助力企业提升算法开发与训练的质量和效率。
白海科技创始人兼首席执行官卢亿雷表示：“提升专业数据科学家的生产力、促进企业的AI创新是IDP的初心，更是引领IDP未来发展的灯塔。我们希望通过开源IDP Studio，弥补国产易用IDE的市场空白，让算法开发团队有更多专业、简单、易上手的工具选择；希望通过开放的生态，与广大行业伙伴、开发者和客户，携手推进AI的开发、应用和落地，加速企业智能化转型与创新。”
荣誉体验官，IDP等你来
IDP试用版面向极客数据科学家和迫切希望提升算法团队生产力的企业，开放少量优先试用名额，您将有机会抢先体验IDP核心功能，探秘国产AI开发生产工具的惊喜。
与此同时，希望您积极反馈和分享实际场景下的试用体验，推动IDP的成长，共创中国AI基础软件工具的未来！
【揭秘（一款云原生的“Jupyter”，如何实现让算法团队更高产（））】请点击链接申请试用：https://www.baihai.co/invitation
或扫描下方二维码联系您的专属顾问
揭秘（一款云原生的“Jupyter”，如何实现让算法团队更高产（））
文章图片

    推荐阅读


    上一篇：Redis 集群别乱搭，这才是正确的姿势！

    下一篇：Python绘制圣诞树