-
Google Cloud Data Fusion:如何将数据类型从字符串更改为日期?
有人知道如何在Data Fusion中将字符串转换为日期,以便它以“日期”而不是字符串的形式写入目标吗?</p -
通过覆盖设置BigQuery到Google Cloud Storage管道
我正在尝试在Data Fusion中设置一个非常简单的管道,该管道从BigQuery提取一个表格,然后将数据存储到Goog -
如何使用CDAP创建从BigQuery到Google Storage的ETL?
我正在Google Cloud Environment中设置CDAP,但是执行以下管道时遇到问题:在BigQuery上运行查询并将结果保存 -
导入/导出DataFusion管道
有人知道是否可以通过编程方式导入/导出DataFlow管道(已部署或处于草稿状态)? 这个想法是编 -
使用云数据融合将xml数据加载到大查询接收器时面临的问题
<blockquote> 我正在尝试通过将云数据融合成大文件来加载xml文件 查询数据接收器。我无法加载此特 -
将AWS RDS连接到Google Cloud Data Fusion的白名单
我们有一个Google Cloud Data Fusion实例,该实例需要连接到AWS RDS才能从中提取数据。唯一的问题是,我们无 -
无法上传自定义插件
我创建了一个自定义插件,该插件要上传到基于CDAP平台的Google Cloud Data Fusion平台上。 我按照开发和部署 -
访问Cloud Data Fusion实例的CDAP Rest API
您如何访问Cloud Data Fusion实例的CDAP REST API?我想使用Cloud Composer来协调我的管道。 我有一个启用 -
在KeyValueTable中写入键失败
我已经为Google Data Fusion上的CDAP平台开发并成功部署了自定义批处理源插件。 该插件有时可以在预览模式 -
Google数据融合执行错误“ INVALID_ARGUMENT:'DISKS_TOTAL_GB'配额不足。请求3000.0,可用2048.0。”
我正在尝试使用Google Data Fusion Free版本将简单CSV文件从GCS加载到BQ。管道因错误而失败。它显示为 <pre -
在Datafusion中使用压缩文件
是否可以将压缩文件与Cloud数据融合一起使用。我已经将Google存储空间用作来源,并将gzip文件放置在首 -
在Cloud Data Fusion中使用多字符定界符
我正在尝试在云数据融合中读取csv文件。 csv文件使用多字符(即〜^〜)定界符。当我尝试使用自定义定 -
如何在GCP Data Fusion中提取Table类型的数据集以用作Wrangler插件中的指令“ table-lookup”中的查找表
我正在尝试使用GCP数据融合牧马人插件通过table-lookup指令执行一些查找操作。此伪指令具有要由查找引 -
Elasticsearch至BigQuery管道部署在云数据融合实例上失败
我正在部署一个数据融合管道,该管道将从Elasticsearch的索引中获取数据并将该数据加载到bigQuery表中。 -
在云数据融合中转换为日期
我们如何在云数据融合中将字符串转换为日期? 我有一列值说是20191120(yyyyMMdd的格式),我想将 -
数据融合管道-牧马人转换不起作用
数据融合管道 源是GCS中的csv文件 牧马人->试图验证以下几列 Mobile_Number(column)->发送至错误->值 -
Cloud Data Fusion Pipeline中的SCD 2类实施
我需要在数据融合管道中应用SCD2,我的源数据是GCS,目标是BigQuery。我已经创建了管道并能够将数据加 -
设置Datafusion实例以连接安全的Dataproc集群
我们有一个安全的Dataproc集群,我们可以使用以下命令使用单个用户ID成功将SSH SSH到其中: <pre class=" -
牧马人-选择数据
从下载的json导入管道后, 当我单击Wrangle属性时,出现以下无法加载的页面。 如何修改牧马人的数据?< -
使用数据融合,通过将“ Wrangler”转换为相应的“规范化” BigQuery表来转换BigQuery表(源,包含ARRAY / STRUCT)
<strong>(1)</strong>有一个BigQuery源表,如... <pre><code>column_name | is_nullable | data_type OrderId | YES -
regex_path_filter如何在GCP中的DATA FUSION管道的GCSFile属性中工作
IN GCP的数据融合管道,GCSFile属性具有一个名为“ Regex路径过滤器”的字段。它是如何工作的?。我对此 -
如何允许Google Cloud Data Fusion连接到AWS RDS MySQL数据库?
在Google Cloud Data Fusion Pipeline中配置数据库连接时出现错误。 <blockquote> “获取查询架构时遇到SQL -
在Datafusion中上传PostAction插件时出现问题
我们正在尝试为Datafusion实现自定义的后期操作插件。插件构建成功。当我尝试上传Jar和Json文件时。失败 -
Cloud Datafusion中的SPARK加入策略
在云<code>Datafusion</code>中,我正在使用联接器转换来联接两个表。 其中一个是具有约87M联接的大表 -
使用云数据融合创建从SQL Server到BigQuery的数据管道的问题
我正在尝试使用CLOUD DATA FUSION创建从“ SQL SERVER(来自GCP VM)”到“ BigQuery”的数据管道;我已完成以下 -
GCP数据融合StatusRuntimeException:INVALID_ARGUMENT:'DISKS_TOTAL_GB'配额不足。要求3000.0,可用2048.0
我正在尝试在GCP数据融合中部署管道。我最初是在免费帐户上工作,但为了按照下面<a href="https://stackover -
适用于Google Cloud Fusion的REST API
我正在探索用于数据管道的新工具。尝试使用Google的数据融合,我很惊讶地没有看到任何REST连接器。 -
云数据融合Oracle源预览错误
我有一个需要澄清的问题,以及使用云数据融合的两个错误: 背景:创建管道以使用云数据融合将数据 -
对于CDAP Logging HTTP RESTful API,如何传递过滤器参数
根据CDAP文档,可以提供过滤字符串作为可选参数。它将返回的日志条目筛选为与提供的字符串匹配的日 -
如何处理CDAP(数据融合)中具有不同列的CSV?
在某些情况下,我会收到来自第三方的多个CSV(很难使它们更改格式),并且这些CSV应该具有相同的列