大数据技术之接口发布与接收案例

在数据工程师的工作中,相当一部分任务需要为外部系统提供数据支持,包括查询画像、BI报表等,有时甚至需要接收外部系统发送的数据,将其处理或转储,例如对接日志服务器,将日志实时清洗后存入Kafka。

 

本套教程面向偏科的大数据工程师,尤其是JavaWeb应用开发薄弱的大数据工程师。从0到1,讲解如何基于主流的大数据工作场景,例如,从存储离线数仓Ads层数据的MySQL中,从存储实时数仓Ads层数据的ClickHouse中,以及从即席查询的ElasticSearch、HBase、Redis中查询指定的数据,发布数据接口。发布的数据接口可以为第三方的程序或BI大屏,提供实时请求的数据支撑。

 

本套教程包含两部分内容:第一部分,是数据接口发布的基础背景知识讲解,3小时快速掌握常用的Mybatis和SpringBoot开发常识;第二部分,是数据接口发布和接收的案例讲解,3.5小时,通过9个案例,讲解如何开发数据接口工程,如