针对数据分析处理过程中的特征工程模块,开发一了个支持多源数据源导入数据、自定义数据集成、对数据进行规范化处理和预处理、并且支持数据可视化、支持主流特征工程方法、支持工程追踪的平台工具。
"天枢人工智能开源平台"(简称:"天枢平台")是由之江实验室牵头,联合北京一流科技、中国信通院和浙江大学共同自研的人工智能开源平台。整个平台由一站式AI模型开发平台、高性能深度学习框架和模型炼知框架三大子系统组成。 其中, "一站式AI模型开发平台"面向AI模型生产的生命周期,提供了包括数据处理、模型开发、模型训练和模型管理等功能,方便用户一站式构建AI算法。
基于RBAC模型的权限控制的一整套基础开发平台,前后端分离,后端采用 django+django-rest-framework,前端采用 ruoyi-ui +vue+ElementUI。
依瞳人工智能平台旨在为不同行业的用户提供基于深度学习的端到端解决方案,使用户可以用最快的速度、最少的时间开始高性能的深度学习工作,从而大幅节省研究成本、提高研发效率,同时可为中小企业解决私有云难建成、成本高等问题。 平台融合了Tensorflow、PyTorch、MindSpore等开源深度学习框架,提供了模型训练、超参调优、集群状态监控等开发环境,方便AI开发者快速搭建人工智能开发环境,开展AI开发应用。在监控模块基础上搭建预警模块,自动将平台异常通知管理员,提升平台的预警效率及安全性能。
sparkStreamin与kafka、redis集成,解决重复消费问题
使用spark对hive、hbase、ES的读写, 实现一次配置可对不同数据库进行导入导出,并对ES、hbase进行封装
基于SpringBoot的权限管理系统 易读易懂、界面简洁美观。 核心技术采用Spring、MyBatis、Shiro没有任何其它重度依赖。直接运行即可用
一个api网关项目,可以当做api开放平台或外网转内网的转发工具 (仅支持http/https转发,基于HttpClient4.5),1、项目基于ruoyi搭建:http://www.ruoyi.vip 2、基于appKey+appSecret的账号 3、api支持通配符匹配 4、账号权限分配,和api使用限制 5、api后端服务器,加权轮询的负载均衡算法,自动检测服务器可用性
Scriptis是一款支持在线写SQL、Pyspark、HiveQL等脚本,提交给Linkis执行的数据分析Web工具,且支持UDF、函数、资源管控和智能诊断等企业级特性。
将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出等数据应用开发全流程场景需求。欢迎申请体验demo环境:https://sandbox.webank.com/wds/dss/#/register
davinci 的一键启动版本,不会出现启动报错, Maven导包出错,去掉注册之后的邮箱验证,注册之后直接登录, 适合想自己快速部署起来查看效果的, 所有许可权限归原作者所有: https://github.com/edp963/davinci