02|02 DataBricks+DataFactory+Blob创建环境
本文主要是介绍创建Blob\Databricks\Datafactory资源Azure
进入Azure 首页https://portal.azure.cn/?whr=... 点击创建资源。如下图
文章图片
填入相应信息,直接点击审阅并创建即可。创建好点击进入在blob中创建一个blob 如data_file
文章图片
文章图片
Databrikcs
Databricks创建过程与Blob基本相同。注意创建Databricks后要创建一个集群用来计算处理数据,执行Databricksjob。
集群配置选择正常的开发配置就可以。下图是当前项目集群配置
文章图片
注意databriks是计算工具不是存储工具。
文章图片
创建Databricks访问令牌,进入databricks 点击用户名进入User Setting.生成token,设置token名称和生效时长。注意保存token
文章图片
Datafactory
Datafactory创建过程与Blob基本相同。在创建好Datafactory需要配置一些链接,如访问blob的链接、访问databriks的链接、访问s3容器的链接。
文章图片
创建Databricks链接是需要填写一些配置,主要是访问令牌
【02|02 DataBricks+DataFactory+Blob创建环境】
文章图片
推荐阅读
- django-前后端交互
- IDEA|IDEA 创建工程
- 创建缔造完美教室,让每一间教室都闪闪发光
- Servlet原理|Servlet原理 二(Web应用与创建Servlet实例)
- 企业为什么要融资
- 热点文章|鸢尾花预测(如何创建机器学习Web应用程序())
- 诚实表达,创建连接维护界限
- FTP创建
- 脚手架工具,Yeoman
- Python多线程编程——创建线程的两个方法