腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

综合排序丨最热优先丨最新优先

Oceanus Kudu Sink总结

实时即未来，最近在腾讯云Oceanus进行实时计算服务，以下为flink写入Kudu实践中的总结。分享给大家~ kudu的架构依赖于Hadoop体系，一般具有3个masterServer。

2021-08-07

1.8K0

标签:

流计算 Oceanus

弹性 MapReduce

流计算 Oceanus 操作效率提升指南一

[image.png] 快速进入体验： https://console.cloud.tencent.com/oceanus/job

2022-05-23

1.5K0

标签:

Oceanus使用自定义Connector指南

实时即未来，最近在腾讯云Oceanus进行Flink实时计算服务，以下为使用自定义Connector的实践。分享给大家~ 支持自定义conncetor操作说明在腾讯云Oceanus页面-->程序包管理页面--> 选择新建程序包，上传自己jar包。上传时选择与自己环境对应的区域。

2021-09-26

1.4K0

标签:

流计算 Oceanus

Oceanus的实时流式计算实践与优化

本文由腾讯云实时计算Oceanus专家工程师杜立在 Techo TVP开发者峰会「数据的冰与火之歌——从在线数据库技术，到海量数据分析技术」的《实时流式计算实践与优化》演讲分享整理而成，为大家详尽介绍在使用 Flink SQL开发计算作业过程中，针对遇到的痛点，腾讯云实时计算服务Oceanus所进行的优化与扩展，以及实践总结。讲师简介杜立腾讯大数据专家工程师腾讯大数据专家工程师，Oceanus实时计算平台研发负责人，2018年加入腾讯，一直从事于实时计算相关领域的研发工作，目前主要专注于腾讯云及内部Flink SQL相关的扩展与优化，以及Oceanus产品化相关工作。

腾讯云开发者

2021-05-24

3.2K0

标签:

腾讯云流计算 Oceanus Connector 使用示例汇总

各位老铁，刚刚总结了流计算 Oceanus (Flink) 上下游 Connector 的使用示例，作为新年福利送给大家。欢迎收藏~ Flink SQL 示例： Connector 组合 - SQL 作业文章链接说明 datagen -> Oceanus -> blackhole https://cloud.tencent.com /developer/article/1895677 零基础 datagen -> Oceanus -> Elasticsearch https://cloud.tencent.com/developer 入门级 CKafka -> Oceanus -> CKafka https://cloud.tencent.com/developer/article/1867621 入门级 datagen -> Oceanus Oceanus -> COS 对象存储 https://cloud.tencent.com/developer/article/1875598 入门级 MySQL -> Oceanus -> ClickHouse

2022-01-24

3.2K0

标签:

流计算 Oceanus

Oceanus 实践-消费 CMQ 主题模型数据源

实时即未来，最近在腾讯云流计算 Oceanus 进行Flink实时计算服务，以下为 Flink 消费腾讯云 CMQ 的数据实践。 CMQ 主题订阅可以实时同步主题模型数据到队列模型，借助这种机制，我们可以在 Oceanus 实现 CMQ 主题模型数据源表的读取。 1. 环境搭建 1.1 创建 Oceanus 集群在 Oceanus 控制台的【集群管理】->【新建集群】页面创建集群，选择地域、可用区、VPC、日志、存储，设置初始密码等。我们这里新建两个队列，其中一个用来订阅 CMQ 主题模型数据，另一个用作 Oceanus 作业的目的表。作业创建 2.1 创建 SQL 作业在 Oceanus 控制台【作业管理】->【新建作业】-> SQL作业，选择刚刚新建的集群创建作业。

2021-09-30

2.2K0

标签:

流计算 Oceanus

大数据解决方案

Oceanus 开发自定义SQL Connector指南

Oceanus兼容原生的Flink 框架，基于Flink开发的Connector能够实现100%兼容。

2021-08-20

1.4K0

标签:

流计算 Oceanus

流计算 Oceanus 操作效率提升指南（一）

作者：李贤雨，腾讯 CSIG 工程师批量操作功能简介为了避免用户机械重复地对作业进行某一类操作，Oceanus 平台支持五种快捷高效的批量操作。分别是批量启动、停止、删除、创建副本、移动。更多 Oceanus 最佳实践以及入门指引参见我们的专栏文章，最后欢迎大家猛戳一元购试用 Oceanus，机不可失时不再来：）扫码加入流计算 Oceanus 产品交流群流计算 Oceanus 限量秒杀专享活动火爆进行中↓↓ 扫码关注「腾讯云大数据」，了解腾讯云流计算 Oceanus 更多信息~ 腾讯云大数据长按二维码关注我们

腾讯云大数据

2022-06-20

1.2K0

标签:

流计算 Oceanus

基于流计算 Oceanus 和 Elasticsearch 构建日志分析系统

实时即未来，最近在腾讯云流计算 Oceanus（Flink）进行实时计算服务，以下为MySQL 到 Flink 进行处理分析，再存储到ES的实践。方案中使用了云数据库 MySQL、流计算 Oceanus（Flink）、Elasticsearch、Kibana 和私有网络 VPC。图片.png 2 前置准备 2.1 创建流计算 Oceanus 集群在 Oceanus 控制台的【集群管理】->【新建集群】页面创建集群，选择地域、可用区、VPC、日志、存储，设置初始密码等。创建完后的集群如下： [oceanus集群] 2.2 创建Mysql集群在腾讯云主页【产品】->【数据库】->【云数据库 MySQL】页面购买 MySQL 集群。 Oceanus 也可以进行条件过滤，正则匹配等操作，能够兼容 Flink SQL的所有语法。

2021-11-29

1.6K0

标签:

流计算 Oceanus

腾讯云 Oceanus 在 MySQL CDC Connector 的核心优化

总结与预告本文从运行图优化、JobManager 内存优化、TaskManager CPU 执行效率优化等几个维度，讲解了腾讯云 Oceanus 对 MySQL CDC Connector 做的一些核心优化点

2022-11-29

1.9K0

标签:

流计算 Oceanus