本代码给予local实现
安装相应的文件：python、 pyspark、panda、airflow
1、搭建airflow
修改airflow.confg
dags_folder ： 当前dags
2、修改文件地址
将代码中的文件地址修改成自己的目录
流程：
download数据存到本地 ——> 加载本地数据process并输出csv文件到本地 ——> 加载csv文件并publish成excel文件
-
Notifications
You must be signed in to change notification settings - Fork 0
yulongcai/data
Folders and files
| Name | Name | Last commit message | Last commit date | |
|---|---|---|---|---|
Repository files navigation
About
No description, website, or topics provided.
Resources
Stars
Watchers
Forks
Releases
No releases published
Packages 0
No packages published