MicroStrategy ONE

连接到 Amazon S3

Amazon Simple Storage Service (Amazon S3) 是一种对象存储服务，提供行业领先的可扩展性、数据可用性、安全性和性能。 MicroStrategy Cloud 对象连接器提供对 Amazon S3 的访问，以便快速浏览文件夹和文件并将其导入 MicroStrategy 立方体。

探索此页面上的以下主题：

  1. 准备连接参数
  2. 创建 DBRole
  3. 导入数据
  4. 限制

准备连接参数

为了使 Cloud Object Connector 成功浏览 Amazon S3 文件系统，您需要创建一个具有适当权限的 Amazon Web Service 帐户。IAM 实体（例如用户、群组和角色）启动时没有权限，必须获得权限后才能使用。有关向 IAM 实体授予权限的更多详细信息，请参阅 管理 IAM 权限。

MicroStrategy 建议您为 Cloud Object Connector 创建一个 IAM 用户。对于 IAM 用户来说，要访问存储桶及其中的对象，至少应为以下两个操作授予“允许效果”权限：

  • s3:获取对象
  • s3:列表桶

  • s3：列出所有我的存储桶

成功创建 IAM 用户后，请向 IAM 管理员索取访问密钥 ID 和秘密访问密钥。

创建 DBRole

访问 Amazon S3 Cloud Object Connector MicroStrategy Web 或工作站。

  • Web
  • Workstation
  1. 选择添加数据 > 新数据。

  2. 查找并选择 亚马逊 S3 来自数据源列表的云对象连接器。

  3. 在数据源旁边，点击 新数据源 添加新连接。

  4. 输入您的连接凭证。

    • 连接名称：新连接的名称。
    • AWS 区域：您的存储桶所在的确切 AWS 区域。
    • IAM 用户的 AccessKey：访问密钥 ID。
    • IAM 用户的访问密钥: 秘密访问密钥。

  1. 在左侧面板中的数据集旁边，单击 创建新数据集 。

  2. 查找并选择 亚马逊 S3 来自数据源列表的云对象连接器。

  3. 在数据源旁边，点击 新数据源 添加新连接。

  4. 输入您的连接凭证。

    • 连接名称：新连接的名称
    • AWS 区域：您的存储桶所在的确切 AWS 区域
    • IAM 用户的 AccessKey：访问密钥 ID
    • IAM 用户的访问密钥: 秘密访问密钥

导入数据

成功创建连接器后，您可以将数据导入 MicroStrategy。

  1. 选择新创建的连接。
  2. 在下拉菜单中，选择存储桶并浏览文件夹或文件。

  3. 双击文件或将其拖到右侧窗格中。

    在预览窗格中，您可以查看示例数据并调整列类型。

  4. 将立方体发布到 MicroStrategy 使用您选择的数据。

限制

支持的文件类型

仅支持以下文件类型：

  • .json
  • .镶木地板
  • 。欧元
  • .orc
  • .csv
  • 德尔塔格式

选择文件夹

选择整个文件夹时，文件夹必须满足以下要求：

  • 文件夹下的所有文件都需要具有相同的文件类型。对话框将提示您选择文件类型
  • 所有文件共享相同的架构

  • 如果该文件夹有子文件夹，则子文件夹应采用有效的分区格式。以下是有效文件夹结构的示例

Spark 限制

  • 只能读取每个换行符为完整 JSON 的 JSON 文件
  • 无法读取包含特殊字符 (, ; { } \ = " .) 的 Parquet 文件
  • 不支持列数据类型为 INT32(UINT_8)/(UNIT_16)/(UNIT_32)/(TIME_MILLIS) 的 Parquet 文件
  • 二进制类型的列无法在多维数据集中发布
  • 无法导入字段名称以“_col”为前缀的 ORC 文件（例如 _col0、_col1），且文件架构包含至少一个嵌套结构、数组或映射字段

功能

不支持以下功能：

  • 上传 MicroStrategy 连接到 Cloud Object Connector 的文件
  • 数据导入中的数据整理
  • 在数据导入中定义地理位置
  • Schedule Cube Publish 的高级调度
  • 在数据导入中对表进行分组