Skip to content

DayBreak-u/file2hive

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

2 Commits
 
 
 
 

Repository files navigation

           1)运行环境:服务器、或其他装好依赖的linux系统(依赖: pyhoon3、pyhive、hiveserver2)

           2)运行说明:python3 load_data.py  路径文件名(默认当前路径)  编码方式(gbk 或者 utf-8)   模式(0或1)

                                  需要在调用时传入以上三个参数:

                                         a)路径文件名 :只写文件名默认当前路径(路径写相对路径,如父目录123.csv文件,可写  ‘../123.csv’)

                                         b)  编码方式:数据文件的编码方式 一般为gbk或utf-8

                                         c)  模式:0或1两个模式。模式0为不指定表头纯数据导入,即导入数据文件后每列

                                                         的字段名为c0、c1、c2...

                                                         模式1为指定表头导入,将按数据文件的第一行内容作为表字段名,其他

                                                         行作为数据,此处用英文还要注意填入的编码问题。

           3)生成的表名为:otemp.temp_load_文件名

            举例:

                     终端执行:python3   load_csv.py   123.csv   gbk   0

                     导入当前路径文件123.csv, 编码方式为gbk  模式为0

About

csv or xls input into hive

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages

  • Python 100.0%