介绍
QStreaming是一个框架,可简化基于ETL的编写和执行
它基于简单的类似于SQL的配置文件,并且可以在任何Spark集群上运行
入门
构型
要运行QStreaming,必须首先定义如下的Pipeline DSL文件。
管道DSL
例如,一个简单的管道dsl文件应如下所示:
-- DDL for streaming input which connect to a kafka topic
-- this declares five fields based on the JSON d
一、背景
在项目开发的过程当中,开发环境与生产环境的配置肯定是不一样的。拿个最简单的例子来说,比如连接字符串这种东西,开发环境肯定不能连生产数据库。在之前的话,这种情况基本靠准备两个同名的配置文件来进行处理,然后你在本地就使用本地的配置文件,生产环境就使用生产环境的配置文件,十分麻烦。
ASP.NET Core支持利用环境变量来动态配置 JSON 文件,下面就来看一下如何在项目中使用这样功能吧。
二、准备工作
ASP.NET Core在应用启动时读取环境变量ASPNETCORE_ENVIRONM