如何在 Google Cloud Platform 免费层上构建现代数据平台

大家好，今天本人给大家带来文章《如何在 Google Cloud Platform 免费层上构建现代数据平台》，文中内容主要涉及到，如果你对文章方面的知识点感兴趣，那就请各位朋友继续看下去吧~希望能真正帮到你们，谢谢！

我在Medium.com上发布了一系列七篇免费公开文章“如何在Google云平台的免费层上构建现代数据平台”。 主要文章位于：https://medium.com/@markwkiehl/building-a-data-platform-on-gcp-0427500f62e8

第一部分“在GCP上构建数据平台”定义了功能要求，并详细说明了如何安装所需的软件。

第二部分“GCP 基础设施和身份验证”解释了如何使用 Google 应用程序默认凭据 (ADC) 来对用户管理的服务帐户进行身份验证。

第三部分“Google Cloud Pub/Sub 消息传递”展示了如何使用 Python 脚本生成和订阅 Google Pub/Sub 消息传递服务。

第四部分“使用 Docker 进行容器化”介绍了如何为 Python 脚本构建本地 Docker 镜像，在本地运行它，然后将其推送到 Google ArtifactRegistry（存储库）。

第五部分“Google Cloud Run 作业和调度程序”演示了如何使用 Google CLI 配置 Google Cloud Run 作业和 Cloud Scheduler 作业，以从任何 Google 区域以指定的时间间隔执行存储在 Google Artifact 注册表中的 Python 脚本。

第六部分“Google BigQuery 云数据库”使用 Google CLI 设置 Google BigQuery 数据集和表，然后使用 Python 脚本通过 SQL 编写和查询数据。

第七部分“Google Cloud Analytics”探索了如何从 Google BigQuery 表中提取数据，将其加载到 Pandas DataFrame 中，并轻松执行分析和可视化 - 所有这些都来自 Python 脚本。

到这里，我们也就讲完了《如何在 Google Cloud Platform 免费层上构建现代数据平台》的内容了。个人认为，基础知识的学习和巩固，是为了更好的将其运用到项目中，欢迎关注golang学习网公众号，带你了解更多关于的知识点！