Databricks

Databricks 第1篇：初识Databricks，创建工作区、集群和Notebook

Azure Databricks是一个可扩展的数据分析平台，基于Apache Spark。Azure Data […]

大家知道，用户可以在Notebook UI中以交互方式运行Notebook中的SQL、Python等代码，交互 […]

Spark SQL 支持多种数据类型，并兼容Python、Scala等语言的数据类型。一，Spark SQL […]

DBFS使用dbutils实现存储服务的装载（mount、挂载），用户可以把Azure Data Lake S […]

有时，访问数据要求您通过JDBC对外部数据源进行身份验证，可以使用Azure Databricks Secre […]

为了把Identity（身份）和Access Management function（访问管理功能）委派给Az […]

Azure Key Vault（密钥库）是用于安全地存储和访问Secret的云服务，Secret是需要严格控制 […]

Spark SQL 表的命名方式是db_name.table_name，只有数据库名称和数据表名称。如果没有指 […]

Databricks 文件系统 (DBFS，Databricks File System) 是一个装载到 Az […]

对数据分析时，通常需要对数据进行分组，并对每个分组进行聚合运算。在一定意义上，窗口也是一种分组统计的方法。分 […]

pyspark中的DataFrame等价于Spark SQL中的一个关系表。在pyspark中，DataFra […]

在过去的几年里，Lakehouse作为一种新的数据管理范式，已独立出现在Databricks的许多用户和应用案 […]