青云科技 Kubesphere 市场 新!北京数方元凌科技有限公司旗下的湖洞云原生湖仓一体实时数据开发平台正式上线。
关于LakeInsight
LakeInsight是企业级一站式实时数据分析和AI开发平台,基于自研开源湖仓一体一体化框架LakeSoul和云原生容器化架构,提供多源数据实时集成、实时数仓建模、BI指标上报平台和AI开发平台,实现数据+AI融合。
lakeinsight on kubesphere
数元率先发布LakeInsight湖仓一体实时数据开发版本,支持数据源配置和数据进出湖功能提供交互式SQL数据分析,任务发布功能为计算作业提供资源监控支持多租户权限隔离等功能。
您可以通过 KubeSphere 市场订阅部署 LakeInsight Lakehouse 实时数据开发版,快速将数据湖仓一体功能添加到 KubeSphere 平台。 部署完成后,平台管理员可直接进入 Kubesphere 导航栏中的数据智能平台,添加数据源、数据入湖、数据分析、任务管理等操作,还可以添加企业用户登录权限,通过在 Kubesphere 中对接不同权限级别的用户,实现数据智能平台的权限隔离。
通过 Kubesphere Marketplace 部署订阅:
在 Kubesphere 导航栏中,您可以直接进入数据智能平台
LakeInsight 用户可以直接访问 Kubesphere 导航栏中的数据智能平台,进行数据源添加、数据入湖、数据分析、任务管理等操作。
添加数据源。
LakeInsight 支持配置各种类型的数据源,包括 MySQL、Kafka 和 MaxCompute,并将很快添加 MongoDB 和 Oracle 等常用数据库。 数据源配置完成后,可在湖内外使用。
数据进入湖中。 可以实时采集 MySQL、Kafka 等数据源,并写入湖仓一体。 选择页面配置的数据源,启动自动实时采集任务。 LakeInsight支持从多个数据库自动实时引入整个数据库和多个表的数据,支持自动发现新表和自动DDL变更同步,无需手动和繁琐的运维操作。
数据开发。 提供支持SQL和Python的实时开发平台,实现实时增量数据开发。 LakeInsight支持全端实时增量计算,实时任务自动监听输入表的更新并自动触发增量计算,减少数据输出延迟,节省资源,同时也省去了传统的定时任务调度。 调试完成后,在任务发布页面选择已调试的笔记本,发布笔记本。
数据开发。
任务发布:
数据查询和湖退出。
可直接查询LakeInsight数据湖仓一体中的计算数据,并在“简介”页面查看业务连接地址。 同时,它还支持将数据从湖仓一体导出到外部系统,可以通过接口配置启动实时数据导出任务
监控告警。 LakeInsight集成了作业管理、日志查询和监控平台。 对于平台上运行的计算任务,您可以查看日志,在界面上启动和停止,自动采集各种监控指标,配置自动告警规则。
作业监控:
日志查询:
现在就试试吧。 LakeInsight Data Lakehouse Development Edition 支持为期一个月的免费试用。 试用期间,所有功能点、任务、计算节点、存储规模均无限制,还可享受原技术团队5*8问答。 立即前往 Kubesphere 市场,免费订阅 LakeInsight Lakehouse 实时数据开发版。
接下来,Digital Element还将推出Lakeinsght Lakehouse实时指标报告版和LakeInsight Lakehouse实时AI开发版,敬请期待。 我们相信 Kubesphere 上的 LakeInsight 将让数据智能触手可及