如何快速完成MaxCompute 导入数据?

本文为您介绍如何使用Tunnel命令导入数据到MaxCompute。

MaxCompute提供多种数据导入导出方式,本文主要介绍在客户端上使用Tunnel命令操作进行数据导入。

Tunnel命令导入数据

1.准备数据 。将测试数据下载至本地备用,假设存放路径为D:。本文中使用的测试数据为banking.txt,主要用于记录各人员的年龄、工作、房贷等信息,选取其中前三条数据展示如下。

44,blue-collar,married,basic.4y,unknown,yes,no,cellular,aug,thu,210,1,999,0,nonexistent,1.4,93.444,-36.1,4.963,5228.1,053,technician,married,unknown,no,no,no,cellular,nov,fri,138,1,999,0,nonexistent,-0.1,93.2,-42,4.021,5195.8,028,management,single,university.degree,no,yes,no,cellular,jun,thu,339,3,6,2,success,-1.7,94.055,-39.8,0.729,4991.6,1

2.(可选)创建MaxCompute表。如果您已完成创建和查看表示例中bank_data表的创建,请跳过本步骤,否则请参照示例创建表bank_data。

3.执行Tunnel命令。登录MaxCompute客户端执行如下命令进行数据导入。

tunnel upload D:\banking.txt bank_data;

其中,7C5D1439_8F58_44da_84C3_A361A5AE5938是需要上传文件的本地路径。270A67B8_E9FB_439a_8BAB_300FB086ECE8为将要导入的表名称。当出现下图中OK字样,说明上传成功。

imageimage

4.结果验证。执行成功后,您可以使用如下语句查看表bank_data的数据条数,验证是否完成所有数据上传,示例数据中共有41188条数据。

SELECT COUNT(*) FROM bank_data;

imageimage

A9A35306_A23B_4f25_B07D_BD6572C780FAA9A35306_A23B_4f25_B07D_BD6572C780FA

其他导入方式

除了通过客户端导入数据,您也可以使用MaxCompute Studio、Tunnel SDK、数据集成、开源的Sqoop、Fluentd、Flume、LogStash 等工具将数据导入到MaxCompute,详情请参见数据上传下载-工具介绍。

后续步骤

当数据导入到MaxCompute后,可以在MaxCompute上运行SQL来处理数据。


本文来自 阿里云文档中心 MaxCompute 导入数据

原创文章,作者:网友投稿,如若转载,请注明出处:https://www.cloudads.cn/archives/34495.html

发表评论

登录后才能评论