使用外部表将选择性字段从对象存储中的CSV加载到ADW
是一种常见的数据处理操作。下面是一个完善且全面的答案：
外部表是一种虚拟表，它允许我们在数据库中访问存储在对象存储中的数据，而无需将数据实际加载到数据库中。这种方法可以节省存储空间和加载时间，并且可以方便地处理大量的数据。
CSV是一种常见的文件格式，它以逗号分隔字段，并且可以在文本编辑器中轻松查看和编辑。在云计算领域，对象存储是一种用于存储和管理大规模非结构化数据的服务，它提供了高可靠性、高可扩展性和低成本的存储解决方案。
ADW（Autonomous Data Warehouse）是腾讯云提供的一种自动化数据仓库服务，它可以处理大规模数据集，并提供高性能的查询和分析功能。
使用外部表将选择性字段从对象存储中的CSV加载到ADW的步骤如下：
- 创建外部表：首先，我们需要在ADW中创建一个外部表，定义CSV文件的结构和位置。可以使用CREATE EXTERNAL TABLE语句来创建外部表，并指定CSV文件的位置、字段分隔符、行分隔符等信息。
- 加载数据：一旦外部表创建完成，我们可以使用INSERT INTO SELECT语句将选择性字段从CSV文件加载到ADW中的目标表中。在SELECT语句中，可以使用WHERE子句来选择需要加载的字段。
- 数据处理：一旦数据加载到ADW中，我们可以使用SQL语句对数据进行各种处理操作，如过滤、聚合、排序等。ADW提供了丰富的SQL函数和操作符，可以满足各种数据处理需求。
- 相关产品推荐：腾讯云提供了一系列与云计算和数据处理相关的产品，可以帮助用户更好地进行数据处理和分析。例如，腾讯云对象存储COS可以用于存储CSV文件，腾讯云数据库TDSQL可以用于存储和查询数据，腾讯云数据仓库CDW可以用于大规模数据分析等。
以下是一些相关产品的介绍链接地址：
- 腾讯云对象存储COS：https://cloud.tencent.com/product/cos
- 腾讯云数据库TDSQL：https://cloud.tencent.com/product/tdsql
- 腾讯云数据仓库CDW：https://cloud.tencent.com/product/cdw
通过使用外部表将选择性字段从对象存储中的CSV加载到ADW，我们可以高效地处理大规模数据，并且可以方便地进行各种数据处理和分析操作。这种方法可以帮助企业提高数据处理效率，加快业务决策速度。
相关·内容
我想知道我们是否能够通过Azure管道将文件中的选择性数据加载到ADW。
我将得到完整的文件每天，我必须加载到ADW的数据。但我只需要从文件中加载最近2天的数据。该文件将具有表示数据的日期。
我已经浏览了管道文档，但找不到任何方法来直接从文件中过滤出数据。
有没有人能建议一下这是否可能？
谢谢
浏览 0提问于2018-05-23得票数 0
1回答
当我对某个文件夹执行SVN更新时，我遇到了一个奇怪的错误。似乎该文件夹只会部分更新。
A trunk/adw_cleanup
A trunk/adw_cleanup/lib
A trunk/adw_cleanup/lib/DriveInfo.pm
A trunk/adw_cleanup/adw_cleanup.pl
A trunk/adw_cleanup/adw_cleanup.vpw
A trunk/adw_cleanup/adw_cleanup.vpj
A trunk/adw_cleanup/adw_cleanup.vtg
A trunk/a
浏览 0提问于2016-11-25得票数 0
回答已采纳
使用DBMS_CLOUD COPY从对象存储加载到ADW时，是否需要考虑一些参数来提高性能？我知道ADW管理它自己并相应地扩展，但我想知道这个负载是否依赖于我们可以处理的任何其他参数？从对象存储加载到ADW是否有性能基准？谢谢。
浏览 5提问于2021-11-03得票数 0
因此，我上传了一个2 2gb的csv文件到我的BLOB存储，我想要这个文件的记录计数(行数)，这样我就可以在它加载到ADW之后进行验证。有没有办法在azure中获取记录计数(如列计数)。 提前感谢
浏览 21提问于2020-04-02得票数 1
我有一个CSV文件，并希望与现有表进行比较，以确保字段被正确更新。(其他人做了表的更新，我只是检查它是否正确地更新)
我知道，在进行比较之前，我可以将csv加载到表中，但我想探索一下，在不将CSV加载到新表的情况下，是否有其他方法读取CSV。
我计划创建一个存储过程来进行比较，想知道是否可以在存储过程中读取CSV并直接与表进行比较吗？
谢谢!
浏览 0提问于2021-08-25得票数 1
是否可以使用External Table将平面文件中的选择性列仅加载到ADW中？客户有一个生成的巨大平面文件，他们想要一种方法来查看是否有一种方法可以仅将文件中所需的列放入ADW 这就是我到目前为止所尝试的:对象存储中的CSV文件有三列，我尝试在这里提取其中的两列： BEGIN
DBMS_CLOUD.CREATE_EXTERNAL_TABLE(
table_name =
>
'gentherm_canalyser5'
,
cred
浏览 30提问于2021-09-27得票数 0
回答已采纳
代码如下：
alter table costs
reject limit unlimited;
我试图使用dbms_cloud.copy_data将一些东西从Oracle object store加载到ADW中，但我一直收到这样的错误: Reject limit reached。因此，我尝试修改表以使拒绝限制为无限制，但是我得到00000- "invalid alter table option“无法弄清楚为什么会发生这种情况。
浏览 0提问于2020-09-24得票数 0
1回答
我们需要将数据从oracle云存储移动到Azure云存储。 该需求基本上是将数据从Oracle ADW数据库(托管在Oracle云上)移动到Snowflake数据库(托管在Azure上)。 由于表中的数据量很大(有些包含60mil+记录)，我们不希望使用任何ETL工具，而是希望设置一个管道，如下所示。 Oracle ADW database Snowflake将数据存储在Oracle存储中-->使用雪花管道或类似的雪花实用程序将数据移动到Azure云存储-> Load to snowflake。 我应该如何进行这个实现呢？ 我们是否可以使用Oracle fastconnect和A
浏览 21提问于2021-08-27得票数 1
我有CSV文件在对象存储中，大小大于85 am。
从对象存储的CSV文件中将数据加载到自治数据库中的Oracle表的有效方法是什么？
浏览 1提问于2021-09-24得票数 1
回答已采纳
1回答
将CSV导入到部署在服务器上的MongoDB实例时遇到问题。我能够使用mongoimport将数据加载到本地实例，方法如下
mongoimport -d Josh -c diagnosis -- type csv --file\\location\name.csv --headerlin -- ignoreblanks
我曾尝试通过cmd将数据加载到位于服务器上的Mongo
C:\Program Files\MongoDB 2.6 Standard\bin>mongoimport --host xxx.xx.x.xxx --db Josh -c diagnosis -- type csv
浏览 1提问于2014-05-31得票数 0
我们有使用ADF执行转换的数据仓库表。
如果我有一组ADW表，并且我需要对它们执行转换以将它们重新放回ADW，我应该将转换保存到Azure Blob Storage中吗？或者直接进入目标表。
ADW表的记录超过100Mil。
使用Blob Storage作为中间部分是可接受的做法吗？
浏览 5提问于2020-01-15得票数 0
我使用bigquery客户端对象将一些CSV文件(位于云存储中)上载到bigquery表中。
我成功地将数据上载到bigquery表中，但我希望将目标表更改为已分区表。分区将是文件名中的日期。
文件名是CSV文件中的一个列，与CSV文件名相同。
这就是我如何从文件名(假设文本是文件名)中提取数据的方法，date1稍后将用作我们的分区：
text = 'sales_2022-09-09T21-27-05_018787'
match = re.search(r'\d{4}-\d{2}-\d{2}', text)
date1 = datetime.strptime(m
浏览 7提问于2022-11-21得票数 0
是否有任何方法将数据从雪花卸载到csv格式，或者可以直接以csv格式存储在google云存储中？
我们正在使用composer(气流) dags连接到雪花，并将数据从表中卸载到csv文件中，并将它们存储在google云存储中，然后再进一步迁移。
我尝试过的:
从雪花表中查询数据并将其放入变量中。
我想做的是：
将数据转换为csv文件(因为还没有运行代码)并将其迁移到GCS桶中，但似乎只有GCStoGCSoperator在气流中起不到作用。
我在想什么：
如果我应该在调度器中使用python文件，而不是在DAG中编写。
通过数据流(束)完成，并在composer上运行。
代码：-
浏览 12提问于2022-10-10得票数 0
我想在一个postgreSQL表中导入相当数量的csv文件。csv文件包含的字段数量不同，但标题行包含的fieldnames与目标表中的字段相对应。
而不是使用以下命令指定每个csv文件中存在的字段：
COPY destination_table (comma_separated_fields_in_source_file) FROM '/filepath'...
我想知道是否有一种方法可以让postgres / pgAdmin识别标题行中的字段名？
谢谢。
浏览 2提问于2013-02-16得票数 1
我使用的是Tableau桌面& Server 9.3。我创建了名为'Sales'的字段。
除了“销售”，还有许多其他的度量和尺寸已经包括在表中。但出于某些原因，我不得不在中隐藏的“销售”字段。
我是通过取消选中选项'Show‘来做到这一点的。
我已经在tableau服务器上发布了我的工作簿。我想以交叉选项卡的形式下载该工作表
(即csv格式).
当我尝试这样做的时候，它给了我所有的字段，包括csv文件中的“Sales”字段。I不想在csv中显示“Sales”字段。
我怎样才能做到这一点？
谢谢。
浏览 3提问于2017-04-17得票数 3
我正在尝试将CSV文件中的大量数据行加载到ADW表中。CSV文件已经在对象存储中，我正在使用DBMS_CLOUD.COPY_DATA将数据从CSV文件加载到我的表中。 挑战是当列包含多行时。 下面是我存储在test.csv文件中的包含多行的列的简短示例： O_NO, O_DESC, O_DATE
A001,"This is the first
multi-line record", 28-Jun-2020 13:09:06
A002, "This is the second
multi-line
record", 28-Jun-2020 14:56:07
浏览 28提问于2021-10-08得票数 0
我有一个包含csv文件的文件夹，其中的模式与我想要加载到bigquery表中的模式相同。
是否可以选择将文件夹路径作为BQ命令的输入加载到bigquery表中？我很想知道它是否可以在不迭代文件或在源代码合并输入文件的情况下完成。
浏览 0提问于2017-02-18得票数 11
回答已采纳
1回答
我仍然在学习OracleSQL，我一直在试图找到最好的方法，用CSV文件中的数据更新/插入OracleSQL表中的记录。
到目前为止，我已经了解了如何使用Oracle中的外部表将csv加载到临时表中，但很难找到关于如何将加载的数据更新/插入(UPSERT)到现有表的详细指南。
当表中有30+字段时，最好的方法是什么？例如，最好是用熊猫之类的东西逐行读取csv，并逐个更新每条记录，还是最好用sql脚本来使用合并语句？并不是csv中的所有记录都有主键的值，在这种情况下，我需要插入而不是更新。谢谢你的帮助！
浏览 1提问于2022-04-24得票数 0
2回答
我在云存储实例(bd_storage)上有一个CSV文件，需要导入到Cloud数据库(test)中已经创建的表(matriculas)。问题是，在默认情况下，UI导入选项使用用逗号('，')分隔的字段，而我的CSV文件是分号分隔(';')。
我知道我可以用一个文本编辑器把所有的逗号都改成分号，但是CSV文件太大了，我的电脑做不到(这就是我使用Google平台的原因)。我如何使用来做到这一点呢？
以下是我尝试过但没有成功的一些例子：
注意:我使用gcloud sql connect mschiaff --user=root登录，然后使用use test指定数据库，
浏览 1提问于2018-03-31得票数 2
回答已采纳
1回答
我在S3桶中有CSV文件，我将其加载到外部阶段，然后使用merge语句创建存储的proc，因为数据只需要插入或更新。
但由于公司政策，我的s3桶密钥/密码每3个月更改一次。
在这种情况下，每次我都需要手动创建外部阶段。在不需要每次更改密钥/密码的情况下，任何其他方式都可以加载数据。
请帮帮忙。
浏览 2提问于2022-08-02得票数 1
回答已采纳
1回答
我从创建了一个BigQuery表。我使用以下选项:gs://my_bucket/*..csv
Google Cloud Storage URIs begin with "gs://" and specify the bucket and object you want to load.
Example: gs://mybucket/path/to/mydata.csv
You can use a wildcard to load multiple files, for example gs://mybucket/path/to/my*
我的桶包含多个CSV文件。
每次我添加
浏览 0提问于2018-09-13得票数 1
回答已采纳
我需要自动解析位于http url (比如)上的csv文件并加载到表中。我如何使用pl/sql来做这件事？
浏览 2提问于2017-05-11得票数 0
1回答
我有一个带有字段.CSV的Response文件。我使用SSIS将该.csv文件加载到Server表中。.csv文件在响应字段的文本之间有一些空格，当我将它们加载到表中时，空格将显示为Â。
如何从表中的列中删除这些Â？
提前感谢
浏览 4提问于2015-02-18得票数 1
回答已采纳
1回答
我使用的是Oracle DB 12c企业版。
我已经为保存在桌面上的平面文件(.csv)设置了文件目录。外部表已经创建，数据正被直接加载到我在oracle中设置的外部表中。
从.CSV -->外部表导入数据似乎是一个透明的过程。如何准确地确定将.CSV平面文件中的所有数据加载到外部表所需的时间？
我的.CSV平面文件有150,000条记录。生成了BADFILE和日志文件，但它没有提供加载所有文件所用时间的具体时间。
请帮帮我..
我的目标是确定通过外部表加载数据是否比SQL*LDR或SQL Developer中的数据导入实用程序更快。
浏览 2提问于2015-04-28得票数 0
1回答
让我们假设以下场景:我有几个用户将准备.csv文件(不知道对方，所以并发是可能的)。.csv文件将始终采用相同的格式。.csv文件中的数据将包含ids列表以及其他一些列(如update_date )。基于这些数据，我将创建一个过程来更新真实DB表中的数据。
这样做的想法是使用外部表，最大限度地简化.csv创建者的工作，这样他们就会把文件放到文件夹中，然后为他们做一些事情，rest是我的工作。
问题如下：
我是否可以有几个文件作为一个外部表的源，或者每个文件需要一个ext表(我的意思是，每当有新的函数调用从csv加载数据时，就应该将它添加到现有的外部table...so中，而不是所有文件都同
浏览 3提问于2015-07-20得票数 1
回答已采纳
1回答
在我们的应用程序中，我们需要加载大型CSV文件并从中获取一些数据。例如，从CSV文件中获取不同的值。为此，我们决定使用内存中的DB，如H2，因为不需要将数据存储在持久存储中。但是，该文件是动态的，因此列可能不相同。我需要将该文件加载到H2数据库中，该表是该会话的临时表。技术栈是Spring和H2。我在论坛上看到的例子是使用一个标准实体，它知道该表有哪些字段。然而，在我的情况下，表列将是动态的，我在spring中尝试了下面的内容
public interface ImportCSVRepository extends JpaRepository<Object, String>
使用
浏览 1提问于2019-11-12得票数 0
回答已采纳
我正在使用Azure data Factory (ADF)将文件夹中的数据从Azure Data Lake移动到SQL Server。 该文件夹包含数百个.csv文件。然而，与这些csv不一致的一个问题是，一些csv(并非所有csv)的最后一行包含一个特殊字符，当尝试将其装载到数据类型不是NVARCHAR(MAX)的sql表时，它将失败。为了解决这个问题，我必须首先使用ADF将数据加载到临时表中，其中所有列都设置为NVARCHAR(MAX)，然后将那些不包含特殊字符的行插入到具有适当数据类型的表中。 这是一个每周一次的过程，超过1TB的数据，它需要永远移动数据，所以我正在寻找导入到我的最终表
浏览 29提问于2019-02-01得票数 1
回答已采纳
伙计们有一个非常基本的问题，但不能破译，请帮帮我。
Q1:当我们使用下面的命令创建bigquery表时，数据驻留在同一个云存储中？
bq load --source_format=CSV 'market.cust$20170101' \
gs://sp2040/raw/cards/cust/20170101/20170101_cust.csv
Q2:假设我的数据主管是gs://sp2040/raw/cards/cust/为客户文件表结构定义的是：
bq mk --time_partitioning_type=DAY market.cust \
custid:strin
浏览 3提问于2017-10-05得票数 0
回答已采纳
4回答
情境:一个csv每月登陆到AWS S3中。供应商根据需要从文件中添加/删除/修改列。因此，模式并不是提前知道的。其要求是在雪花中创建一个正在运行的表，并将数据加载到该表中。马蒂尔利是我们的ELT工具。
到目前为止，这就是我所做的。
设置一个Lambda来检测文件的到达，将其转换为JSON，上传到另一个S3 dir，并将文件名添加到SQS。Matillion检测SQS消息，并将带有JSON数据的文件加载到SF表中的Variant列中。SF存储的proc将使用变体列并根据JSON数据中字段的数目生成一个表。SF中的VARIANT列只有在其JSON数据的情况下才能以这种方式工作。可悲的是，CSV不受
浏览 1提问于2021-01-26得票数 1
1回答
我想要将CSV文件加载到Oracle表中。该文件包含一个列，该列可以包含超过VARCHAR2最大长度的超长字符串。正因为如此，我要装载到的表中的这一列被指定为BLOB。 create table MY_TABLE(
COL1 VARCHAR2(100),
COL2 VARCHAR2(100),
COL3 BLOB
); 要加载的CSV文件如下所示： COL1,COL2,COL3
1,qwerty,<very long block of text>
2,asdfgh,<very long block of text>
3,zxcvbn,<very long blo
浏览 27提问于2020-08-11得票数 1
回答已采纳
具有销售数据的输入文件将以csv格式发送到s3存储桶，每天在特定时间最多发送5个文件。
使用胶水将csv文件数据加载到Redshift中。
在加载到Redshift之前，需要从csv文件文件进行转换，如计算和映射。
请分享您关于如何构建高效解决方案的意见/建议。
下面的内容需要注意。
1.在csv中复制客户端可能发送或可能不发送的内容。2.相同的数据表示前一天的数据已在第二天发送。3.想要处理Redshift表上的更新和插入。4. csv文件一旦处理/加载到Redshift中，将这些文件移动到S3存储桶中的另一个位置。
浏览 24提问于2021-04-09得票数 0
我正在将一个10 GB的CSV文件加载到AWS Aurora postgres数据库中。这个文件有几个字段，其中的值是十进制的，值是整数的+/- 0.1，但实际上它们应该是整数。当我使用SQLLDR将这些数据加载到Oracle中时，我能够将字段从十进制转换为整数。我想使用\copy命令在PostgreSQL数据库中执行同样的操作，但是我找不到允许这样做的任何选项。
是否有一种方法可以导入此数据并在\copy期间对值进行舍入，而不需要经过多步处理，比如创建临时表？
浏览 3提问于2022-07-22得票数 -1
1回答
我想将CSV加载到多个相互关联的表中。首先，我想知道如何一次将CSV的字段加载到多个表中。此外，在插入之前，我必须验证表中的列的字段，所以有没有办法逐行读取CSV文件？谢谢:)
索引只不过是CSV中的值的位置：)如果我有这样一行"Smith jodan，LA,30，+01233444“.Here smith jodan必须放在一个表中，这个表保存一个人的名字，LA是他的地址，必须放到另一个表中。
浏览 0提问于2016-04-18得票数 2
1回答
首先，先谢谢你的回答。
这个问题是关于外部表格和程序的。
我将在一个目录中存储一些.csv文件，并且必须将所有这些数据添加到一个表中。
我的想法是：
将csv文件数据加载到外部表中
将外部表中的所有数据插入最终表
我已经创建了将数据从csv文件加载到外部表的代码。
CREATE TABLE "INFO"."DEVICE_EXTERNAL"
(
"Serial Number" VARCHAR2(100),
"Status" VARCHAR2(100),
浏览 0提问于2018-07-30得票数 0
我的域层中有一个表单对象，它以分层的方式包含多个记录(对应于表行)。这些记录有字段(该表的列)。允许应用程序用户更新字段并从表单中添加/删除记录。表单对象的这个公共API启动表单的验证规则。
但是如何将数据库值加载到表单对象中呢？由于数据访问层知道域层，应该在域对象中创建内部方法吗？这样，当服务层(位于域顶部)向数据访问层请求表单对象时，数据访问层可以使用这些内部方法来创建所需的域对象。
public class DEForm
{
public DEForm(FormNumber number){}
public AddRecord(RecordNumber to, stri
浏览 2提问于2016-05-18得票数 0
回答已采纳
下面的查询执行作业: LOAD DATA LOCAL INFILE 'C:/x/y.csv‘到以'，’结束的表测试字段中，由'"‘结束的行\n’忽略1行；
但是我想通过使用存储过程来实现同样的目的。我遇到过各种各样的讨论，其中提到"Load Data“不能在存储过程中使用，但我找不到替代选项来做到这一点。
有人可以提供其他替代方案，可以用来加载数据从CSV到Mysql表使用存储过程。提前感谢！
浏览 0提问于2015-03-16得票数 0
1回答
我有一个SSIS项目，它将一个csv文件加载到sqlserver表中。当将带有两个十进制数字的字段加载到float列时，它会增加位数并更改列值。
例如，csv字段值为173.76，但表值为173.759994506836。
怎么会发生这种事？
CSV连接特性为；
现场:土耳其语(土耳其)
代码页: 1252
数据类型:浮动DT_R4
浏览 2提问于2016-07-08得票数 1
回答已采纳
我正在使用Oracle Database XE 11g。我有一个基于亚历山大实用程序的例程-
它从Clob中提取CSV文件(首先使用Blob_to_clob)，并允许将其作为包含列的表读取，以提取数据并将其加载到表中。
问题是，它的速度很慢，而且看起来相当占用CPU。20,000条记录需要超过8分钟..我已经在论坛上问过了，一般来说，但似乎找不到其他更快的方法来从CLOB中提取CSV文件并加载到表中。
CSV文件是标准逗号分隔的新行格式...
有人有什么想法吗？谢谢
浏览 0提问于2014-12-02得票数 2
我刚刚将100个csv.files合并到一个总大小约为50 of的怪物文件中。
我现在需要将它加载到我的azure数据库中。既然我已经在数据库中创建了表，那么将这个文件放入表中的最快方法是什么？
我读到的方法包括:导入平面文件，blob存储/数据工厂，BCP。
我在找有人能推荐的最快的方法吗？
浏览 8提问于2020-02-22得票数 0
回答已采纳
我有多个CSV文件(超过60个)，具有不同的结构(不同的列数、不同的列名)，我希望将它们加载到Server表中。
每个CSV文件将被加载到不同的表中。
SSIS过程需要使用CSV结构自动创建表，并将CSV数据加载到表中。
我该怎么做？
浏览 0提问于2019-01-16得票数 1
当我可以直接将值复制到表中时，我为什么选择在雪花中创建一个外部阶段呢？
例如，如果我能做到这一点：
create or replace TABLE EXAMPLE_DB.PUBLIC.USERS (
ID INT,
FIRST_NAME VARCHAR,
LAST_NAME VARCHAR,
EMAIL VARCHAR
);
copy into EXAMPLE_DB.PUBLIC.USERS
from s3://mybucket/users.csv
file_format = (
type = csv
field
浏览 4提问于2022-07-20得票数 1
回答已采纳
1回答
嗨，我正在尝试写一个脚本，它将根据csv的名称将csv加载到不同的表。
例如，应将Brooklyn Nets 24-01-2015.csv或Brooklyn Nets 28-01-2015.csv加载到mysql数据库上的Brooklyn Nets表中，但应跳过波士顿凯尔特人24-01-2015.csv。CSV字段与表匹配，因此不需要映射。
我不知道从哪里开始。有谁有什么建议吗？
浏览 1提问于2015-01-26得票数 0
我有一个用例，在这个用例中，我需要使用Hive实现基于SQL的数据仓库活动。
这个软件会生成一堆csv文件。当它转换为SQL表时，为每个csv文件分配一个唯一的名为session的id，并将其加载到SQL表中。比如说，我在csv文件中有3列。我将在SQL表中有四列，其中第一列表示会话。这意味着，存储在第一个csv文件中的值被写入带有sessios id '1‘的SQL表中，而来自第二个csv文件的值被附加到带有会话id '2’的SQL表中，依此类推。
在蜂巢里，
我将这些csv文件存储在hdfs目录中，并希望创建一个带有表示会话id的附加列的单元表。我不知道我怎么能做到。任何帮
浏览 3提问于2016-07-29得票数 1
我正在考虑将大量数据加载到我的oracle数据库中。
传入的数据类似于CSV，可以通过一些解析将其转换为CSV。
在加载过程中，可能会拒绝某些行，但我不希望其他插入回滚。
我正在考虑下列办法之一：
使用sqlloader
使用
使用存储过程
有人能为我指出每一种方法的优缺点，并提出其他我应该考虑的选择吗？
谢谢。
编辑：
对不起，应该澄清2。我打算创建一个外部表，然后选择到数据库中。我的理解是，对于大量类似CSV的数据，这是一种很好的方法吗？
浏览 5提问于2009-07-06得票数 2
在Hue --> Hive Query Browser中，我在Hive中创建了一个外部表，并使用以下语句将数据从我的一个CSV文件加载到其中：
CREATE EXTERNAL TABLE movies(movieId BIGINT, title VARCHAR(100), genres VARCHAR(100)) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' LINES TERMINATED BY '\n' STORED AS TEXTFILE;
LOAD DATA INPATH '/user/adm
浏览 13提问于2016-09-12得票数 0
回答已采纳
字段以“，”结束，将我的csv文件单列数据分割为两个字段。
这是我的代码：
将数据本地INFILE‘E:/转换/资产加载到表tmx_ind_asset_stg_tb字段，终止为’'，'\r\n‘忽略1行(id、make、model、desc、sn、customer)
csv中的desc列数据是:测试人员，呼吸器
但将数据作为两个字段加载到数据库测试器中，在desc中加载数据，将呼吸器加载到sn字段中。
浏览 1提问于2015-11-09得票数 0
4回答
我是一名Linux程序员。我过去常常编写代码来完成任务: java perl、php、c。我需要开始使用DATA STAGE。
我所看到的是DATA STAGE正在处理表/csv样式的数据，并逐行处理。
我想知道DATA STAGE是否可以处理不是table/csv类型的文件。它是否可以将数据加载到数据结构中并在其上运行函数，或者它被限制为一次只能在一行上工作。
感谢您提供有关DATA SATGE功能的任何信息
浏览 1提问于2014-02-15得票数 0
我有一个有15列和1000条记录的excel文件。我想将这些数据加载到3个不同的oracle表中。
我们该怎么做呢？我应该先将文件转换为csv吗？
此外，还有一个复杂的任务要完成。我需要在插入到表之前执行一些验证，例如。我在excel中有一个列A，我想使用列A从Oracle表中获取值B，即'tab‘，然后将B存储在表'tab’上。
浏览 1提问于2017-06-23得票数 0
当尝试通过ODI将csv文件加载到Oracle表中时，ODI无法从csv文件中提取数据。csv文件格式在这里是一个问题，数据在单行中。但是，当我们通过excel打开csv文件，然后将其另存为csv时，格式正在变化，数据得到了正确的排列，然后我们能够通过ODI导入它。问题是我们需要导入原始的csv文件，不管它是什么格式。有没有可能做同样的事情？
浏览 8提问于2016-01-06得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
云直播
对象存储活动推荐
腾讯云开发者
