文库搜索
切换导航
首页
频道
联系我们
国家标准目录
国际ISO标准目录
行业标准目录
地方标准目录
首页
联系我们
国家标准目录
国际ISO标准目录
行业标准目录
地方标准目录
批量下载
https://openlookeng.io 开源openLooKeng 共建大数据繁荣生态 2022 年5月https://openlookeng.io Content openLooKeng 是什么? openLooKeng 的典型应用场景 openLooKeng 架构解析和关键特性 openLooKeng 开源策略及伙伴帮助计划https://openlookeng.io openLooKeng 打破数据和应用壁垒,快速实现数据价值 数据虚拟化引擎 openLooKeng交互式查询 批查询 SQL, HQL, Flink SQL, J ava API ... Remote clusterMulti -region 跨地域多Multi -syntax 数据语法多Multi -source 数据源多 OLTP OLAP Hadoo pNoSQLOLTP OLAP Hadoo pRemote clusterNoSQL交互式查询 批查询 开发语言多、组件多、开发门槛高用数难1 数据分散,管理复杂,流动性差,查询效率低找数难2 跨源分析需要数据搬迁,效率不佳取数难3统一入口, 化繁为简, 单引擎支持多场景用数极简1 全局数据虚拟视图,高性能查询找数极速2 高效跨源 /跨域协同计算, 数据消费免搬迁取数高效3https://openlookeng.io openLooKeng 统一高效的数据虚拟化引擎,让大数据变简单 跨域协同计算, 广域网的部署,局域网的体验内核增强,高性能查询统一入口, 化繁为简, 单一引擎支持多场景 跨源关联分析,数据消费零搬移 启发式 索引 动态过滤 算子下推 AA 高可用JDBC ODBC SQL REST统一数据访问接口 统一数据源连接框架引擎内核 数据中心 A 数据中心 B 数据中心 C openLooKeng 融合分析 Data Source Connector Data Center Connector ……MySQL PostgreSQLKafka HBaseHive CarbonData ORCParquethttps://openlookeng.io openLooKeng :统一高效的数据虚拟化引擎 互联网 金融 安平 政府 基础设施 鲲鹏 昇腾数据集成、开发、作业调度 数据管理 与分析数据使能 openLooKeng 统一接口( SQL 2003 ) MySQL Hive Spark批| 流 即席ES HBase 3rdParty 电力 3大运营商 社区其他开源技术 https://openlookeng.io openLooKeng 面对行业应用四大场景持续发力 痛点1:两个烟囱,两份数据,管理复杂HIVE 专题数据MySQL 批处理 交互式分析 专题数据批处理 SQL 交互式分析 SQL单引擎覆盖批 /交互式融合分析场景 ETL 痛点2:大数据量和高时效性的双重挑战难以满足实时数据分析场景 风险决策平台 实时计算决策服务 离线分析和挖掘平台决策分析平台 ES HiveHBaseT+1 批量数据历史存档业务和规则管 理平台 T+1 批量数据流处理流事件 行业分析平台 全量数据导入跨数据源关联分析场景 HQL ANSI SQL 数据源 Hive数据源 MPPDB 痛点3:引擎接口不统一,编程模型复杂分析/查询 DC1 数据源 Hive SparkSQL前置机ISV分析平台分析/查询 DC2 数据源 Hive SparkSQL前置机ISV分析平台分析/查询跨域协同分析场景 共享交换平台 痛点4:工作流人工处理,难以支撑 T+0 分析https://openlookeng.io Content openLooKeng 是什么? openLooKeng 的典型应用场景 openLooKeng 架构解析和关键特性 openLooKeng 开源策略及伙伴帮助计划https://openlookeng.io 即席服务提供秒级查询能力 业务场景 /需求 ➢交互式 查询场景,目标是为 数据分析人员提供方便快 捷的即席查询能力 ,性能要求 较高, 秒级 查询 HDFS 大数据集群XXX 即席查询客户端 【效果】XXX 即席查询平台采用 openLooKeng 后:当前业务平滑过渡, 实现查询加速,查询响应提升至 秒级,平 均性能提升 2~10+倍,用户查询效率大大 提升HDFSHIVE/SparkXXX 即席查询客户端 大数据集群交互式分析性能慢 ⅹopenLooKeng 秒级交互式 分析√当前业务痛点 ➢通过Hive 引擎来构建 即席查询 任务 ,查询时间 太长 (5分钟~2小时)性能不满足客户需求openLooKeng 价值 ➢openLooKeng 提供秒级查询 能力,结果 准确率高,增 强了用户对海量数据的 分析能力 ✓中间结果多次落盘 ✓调度效率低✓启发式索引 +执行计划 Cache ,效率高 ✓基于内存计算,无落 盘0100200300400 123456789101112131415161718192021222324POC查询性能对比 Lookeng(s) Hive(s)
安恒 罗旦 openLooKeng合作交流_引擎介绍 2022
文档预览
中文文档
31 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2元下载(无需注册)
温馨提示:本文档共31页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2元下载
本文档由 SC 于
2023-03-04 11:18:06
上传分享
举报
下载
原文档
(2.0 MB)
分享
友情链接
NB-T 10691-2021 数据中心机房用不间断电源系统.pdf
DB44-T 2359-2022 垛基果林湿地恢复技术规程 广东省.pdf
GB-T 23950-2009 无机化工产品中重金属测定通用方法.pdf
DB15-T 2007—2020 党政机关办公区突发事件应急预案编制导则 内蒙古自治区.pdf
T-ZAQ 10105—2022 耐久型不干胶标签.pdf
GB-T 17964-2021 信息安全技术 分组密码算法的工作模式.pdf
NB-T 10394-2020 光伏发电系统效能规范.pdf
GB-T 42433-2023 珠宝玉石鉴定 红外光谱法.pdf
GB-T 35753-2017 空调器室外机安装用支架.pdf
GB-T 41260-2022 数字化车间信息安全要求.pdf
证券公司网络和信息安全三年提升计划(2023-2025).pdf
LY-T 3162-2019 胶合板生产节能技术规范.pdf
艾瑞咨询 中国云安全行业研究报告 2021.pdf
信通院 数据中心产业图谱研究报告.pdf
DB3301-T 0322.3—2020 数据资源管理 第3部分:政务数据分类分级 杭州市.pdf
DB23-T 3104—2022 油田含油污泥处置与利用污染控制要求 黑龙江省.pdf
T-CAAMTB 15—2020 车载毫米波雷达测试方法.pdf
GB-T 10001.1-2023 公共信息图形符号 第1部分:通用符号.pdf
GB-T 20238-2018 木质地板铺装、验收和使用规范.pdf
T-GDCKCJH 068—2022 离子风机静电消除器性能要求与检测方法.pdf
1
/
3
31
评价文档
赞助2元 点击下载(2.0 MB)
回到顶部
×
微信扫码支付
2
元 自动下载
点击进入官方售后微信群
支付 完成后 如未跳转 点击这里下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。