阿里云odps大数据批量导出

Published: by Creative Commons Licence

阿里云odps大数据批量导出

产品需求让导出，导入时间为 21年2月份的代理商运单数据，dataworks一次只能导出最大一万条记录

  • 使用maxcompute客户端Tunnel工具实现大数据量批量导出

客户端安装

  • 以一个小表为例

  1. 进入客户端

  2. 输入查询的sql执行，记住这个id image.png

  3. 输入tunnel download instance://20210331022656657gdpki692 result; 下载到本地，这一串数字即为id 窗口session有效期是24小时 image.png

  4. 数据滚屏打印太快或者想再次输出 使用tunnel show history命令查看 image.png

  5. 这个地方有点坑就是找不到下载到哪了，没有任何提示，在odpscmd安装路径下翻了个篇也没找到，最后通过everything搜索result在C:\Users\dell目录下找到了下载的文件