在导入到BigQuery时指定转义字符。“错误:右双引号(")和字段分隔符之间的数据。”

文章/答案/技术大牛

发布

1回答

google-bigquery

我正在尝试导入大量的.csv文件到谷歌BigQuery。我的一个字符串列有时包含一个数组，该数组包含用\进行转义的双引号。示例： ...我相信这个问题是由于BigQuery默认期望双引号被另一个双引号- ""转义引起的。我已经尝试向--quote参数发送不同的参数，但它的功能并不像我所希望的那样。或者我是被

浏览 28提问于2019-01-25得票数 5

1回答

文件中转义字符

google-bigquery

我有几百个文件，用CSV格式表示400 of的数据，具体说明如下我的数据可能是 col 1: A col 2: 30 col 3:产品

浏览 1提问于2019-09-18得票数 0

1回答

Csv未加载int BIgquery问题"\双引号和分隔符重复两次

python、csv、google-bigquery、google-cloud-functions

将下面的行加载到BQ时出现问题。我已经尝试了在stackoverflow上给出的建议，但没有成功。以下是我的数据： Id;description;curator_id;Q_code;ITG_NUM ABC；“天气适合滑雪\”B\“；ROLLON；HFCKQ:5051CDE；”怪不得它是好的“B”；；MOVEON；CKHLP；5058 我已经按照建议添加了以下参数： job_config = bigquery.LoadJobConfig( autodete

浏览 12提问于2021-08-16得票数 0

回答已采纳

1回答

MySQL大容量加载

mysql、special-characters、bulk-load、loaddata

分隔符：，(逗号) 作为源数据的一部分，很少有字段值括在双引号中，在我们拥有的双引号中，有一些记录的/是字段数据的一部分，我们需要对其进行转义。在默认情况下，/是转义的，当我指定“as转义字符”时，是转义</em

浏览 6提问于2018-09-18得票数 0

1回答

利用Azure数据工厂对雪花数据的摄取

snowflake-cloud-data-platform、azure-data-factory、azure-data-factory-pipeline、data-ingestion

使用Azure数据工厂将数据从数据库加载到雪花时，我会得到以下错误。当我在错误发生的特定点签入数据库时，我有一个列(数据类型: string)，其中包含了“”数据。任何一个请帮助加载数据没有任何错误？"ErrorCode=UserErrorOdbcOperationFailed，ErrorCode=UserErrorOdbcOperat

浏览 1提问于2021-07-14得票数 0

2回答

将Google导出到CSV时自定义分隔符

google-bigquery、google-cloud-sql

我已经用默认分隔符"，“成功地将GCloud SQL导出到CSV。我想将这个CSV导入到，并且我成功地做到了这一点。"Budi", "19", "Want to be hero, and knight" 是否可以使用自定义分隔符(例如“AC.26”)导出Google？如果没有，如何将上述示例数据<e

浏览 4提问于2019-04-16得票数 2

2回答

使用Excel创建具有特殊字符的CSV文件，然后使用SSIS将其导入数据库

sql-server-2008、ssis

对于所有的列值都没有用引号括起来，我感到有点惊讶，但是当数据中存在特殊字符(如逗号或dbl引号)时，假设EXCEL只指定列分隔符，这似乎也是合理的。和命令char作为列分隔符字符。但是，请注意，SSIS错误地导入了第3列，例如，没有将两个连续

浏览 4提问于2012-11-05得票数 0

回答已采纳

1回答

如何将csv读入使用引号分隔符的Pandas，但也可以使用需要忽略的非转义左、右双引号

python、pandas、csv

:这是一个CSV --所以逗号是分隔符，它使用双引号分隔符来表示不应该作为分隔符读取的值中有多个逗号，好吗，我想出了如何在熊猫read_csv选项中解释这一点，转义双引号：\"和左或右双引号</

浏览 23提问于2022-10-22得票数 0

回答已采纳

1回答

当特殊字符在csv中发现时，记录不能通过MLCP正确地摄取。

marklogic、mlcp

我正在使用MLCP将数据摄取到MarkLogic，但是由于文件中的无效字符，许多记录被跳过。警告跳过的记录: abc.csv在第1414行，原因:封装令牌和分隔符之间的字符无效

浏览 4提问于2022-02-20得票数 1

回答已采纳

1回答

USQL逃逸报价

double、double-quotes、u-sql

我是Azure数据湖分析的新手，我试图加载一个csv，这是一个双引号，用于刺痛，并且在列中有一些随机行的引号。例如1, "Life of Pi"当我尝试加载时，它在第二次记录上失败并抛出一条错误消息。”、“组件”：“运行时”、“源”：“用户”、“innerError”“消息”：“引用字段中引号后面的无效字符<

浏览 0提问于2018-07-09得票数 2

回答已采纳

1回答

BigQuery未能从tshark导入CSV

csv、awk、google-bigquery

目前，我已经记录了符合特定消息条件的所有数据包，并将它们输出到CSV中。然后将CSV存储在Google CloudStorage上，以便导入到BigQuery中。"0x00",BigQuery不会导入这一行，声称“关闭双引号()和字段分隔符之间<

浏览 1提问于2014-02-10得票数 1

回答已采纳

1回答

双引号(")是像字段分隔符或转义字符，还是CSV文件中的双引号？

python、csv、parsing

我读过，CSV的分隔符是逗号(，)，转义字符是双引号(")。此外，如果双引号(")是转义字符，那么"Santa Clause“中的S如何不转义呢?在"Santa Clause”之后不可避免地会出现的逗号是怎样的呢?这不是用e后面的双引号转义吗?显然不是.因为它没有被转义，

浏览 14提问于2022-11-15得票数 0

1回答

无法将字段中带有\“的数据注入BigQuery

google-cloud-platform、google-bigquery

我每天都有数以万计的压缩CSV文件被写入S3。它们包含逗号分隔的字段，每个字段都用双引号括起来(与数据类型无关)。但是，字段中包含的双引号使用\而不是标准"进行转义，如下所示："1","Look some text.","43.7" "2","27\" TV&

浏览 0提问于2019-09-21得票数 2

1回答

蜂巢复合体regexp_replace

csv、hadoop、hive

CCCC,"""DD,DD""",,"""FFFF""", 当我试图将它导入一个Hi

浏览 7提问于2016-08-09得票数 1

回答已采纳

3回答

是否可以用CSV格式关闭Postgres复制命令中的报价处理？

postgresql、csv、import

我有CSV文件，选项卡分隔，字段没有用引号包装，其中字段数据可以包含像单引号、双引号、管道和反斜杠这样的字符。，因为Postgres将反斜杠+选项卡视为“转义选项卡”，而不是反斜杠后面的字段分隔符。因此，我转而使用COPY操作符的"CSV格式“，如下所示： COPY <tablename> FROM <filename> WITH CSV DELIMITER E&#

浏览 2提问于2013-12-05得票数 30

回答已采纳

1回答

如何使Excel剥离CSV文本字段中的所有引号

text、import、excel-2007、excel-2003

将CSV文件导入Excel时，只会去掉该行第一个字段中的双引号，而将它们保留在所有其他字段中。如何强制Excel从所有字符串中去掉引号？我指定字段用逗号分隔，文本分隔符是双引号字符。数据预览和实际Excel电子表格列都只去掉了第一个文本字段中的双引号。所有其他文本字段仍然带有引号。真正奇怪<

浏览 0提问于2010-05-01得票数 4

回答已采纳

1回答

Postgres -带双引号的导入数据

postgresql

我在从csv文件导入标签分隔的数据时遇到了问题，因为数据中出现了双引号，例如：我正在使用pgadmin中的import选项导入数据。我将选项卡指定为分隔符，并尝试使用选项引号和/或转义。这些都不起作用。我知道这是双引号的问题，因为我从文件中删除了它并成功导入。我也知道这个问题已经上升了()，但是我不能使用选项COPY <tabl

浏览 4提问于2017-07-11得票数 0

回答已采纳

1回答

加载数据本地Infile问题

mysql

好的，我正在尝试上传一个txt文件到我的表中。我的问题是字段终止符。我试着使用了几个字符，但都不起作用。我最后一次尝试是用一个'.‘John. B.affected, 80 warnings (0.02 sec)表看起来像是所有东西都试图塞进第一个字段，但它只能容纳前8个字符。

浏览 2提问于2012-11-28得票数 0

1回答

在大查询中插入引号

google-bigquery

我可以很容易地上传一个由^分隔的文件，它看起来像...05-03 00:02:25^^Mozilla/5.0^通用web浏览器^^但是如果我在某处有一个双引号，它会失败，并显示一条错误消息...第1行/字段：，右双引号(")和字段分隔符之间的数据</e

浏览 3提问于2012-05-03得票数 1

回答已采纳

3回答

严格的CSV文件读/写定义

c、csv

我已经用C语言编写了自己的CSV读取器/写入器，用于在ODBC数据库的字符列中存储记录。不幸的是，我发现了许多在我的实现上出错的边缘情况，我得出的结论是我的问题是我没有严格地定义CSV的规则。例如，"“应该被认为是空令牌还是双引号？引号是从外到内匹配还是从左到右匹配？如何处理具有不匹配的单引号的输入字符串？当

浏览 0提问于2013-06-06得票数 6

点击加载更多