网学之家(5588net.com) - 执着关注互联网技术!

网学之家|5588net.com

  • [hive教程] hive select操作(翻译自Hive wiki) 日期:2014-05-05 21:55:00 点击:174 好评:0

    Select语法 SELECT [ALL | DISTINCT] select_expr, select_expr, ... FROM table_reference [WHERE where_condition] [GROUP BY col_list] [CLUSTER BY col_list | [DISTRIBUTE BY col_list] [SORT BY col_list] ] [LIMIT number] select语句可以是uni...

  • [hive教程] hive属性(Hive wiki) 日期:2014-05-05 21:54:45 点击:99 好评:0

    Hive Configuration Properties Hive Configuration Properties Query Execution MetaStore Indexing Statistics Authentication/Authorization Hive Client Security Hive Metastore Security Archiving Locking Clustering Regions Command Line Interface...

  • [hive教程] hive Cli常用操作(翻译自Hive wiki) 日期:2014-05-05 21:54:35 点击:131 好评:0

    这里罗列常用操作,更多参考 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Cli hive命令行 执行一个查询 $HIVE_HOME/bin/hive -e select a.col from tab1 a 之后过程中,会在终端上显示mapreduce的进...

  • [hive教程] hive部署手册 日期:2014-05-05 21:36:25 点击:102 好评:0

    安装环境: 机器 只需要安装一台机器 操作系统:Ubuntu 11.04 64操作系统 hadoop:版本是1.0.2,安装在/usr/local/hadoop sun jdk:版本是1.6.0_31 64bit,安装在/usr/local/jdk hive:版本是0.8.1,安装在/usr/local/hive 安...

  • [hive教程] Hadoop和Hive的数据处理流程 日期:2014-05-05 21:36:25 点击:111 好评:0

    需求 场景:统计每日用户登陆总数 每分钟的原始日志内容如下: http://www.blue.com/uid=xxxxxxnbsp; uid STRING, ip STRING ) PARTITIONED BY (dt STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY , STORED AS TEXTFILE; 其实表...

  • [hive教程] hive元数据中utf8的修改 日期:2014-05-05 21:36:24 点击:104 好评:0

    表或者字段有中文的时候需要修改hive的元数据库的设置。 以mysql为例子,当mysql的字符集设置成utf8的时候使用hive会有问题,详细见hive的wiki。 所以当hive使用mysql作为元数据库的时候m...

  • [hive教程] hive并发调用的运行方式-个人经验篇 日期:2014-05-05 21:36:23 点击:118 好评:0

    前言 使用hive,我们很多情况下会并发调用hive程序,将sql任务转换成mapreuce提交到hadoop集群中,而在本人使用hive的过程中,发现并发调用hive有几个问题,在这个和大家分享下. 正文 默认...

  • [hive教程] hive lateral view语句(翻译自Hive wiki) 日期:2014-05-05 21:36:22 点击:108 好评:0

    Lateral View语法 lateralView: LATERAL VIEW udtf(expression) tableAlias AS columnAlias (, columnAlias)* fromClause: FROM baseTable (lateralView)* 描述 lateral view用于和split, explode等UDTF一起使用,它能够将一行数据拆成多...

  • [hive教程] Hive Union(翻译自Hive wiki) 日期:2014-05-05 21:36:21 点击:114 好评:0

    Union 语法 select_statement UNION ALL select_statement UNION ALL select_statement ... UNION用于联合多个SELECT语句的结果集,合并为一个独立的结果集。当前只能支持UNION ALL(bag union)。不消除重复行。每个...

  • [hive教程] hive中UDTF编写和使用(转) 日期:2014-05-05 21:36:21 点击:104 好评:0

    1. UDTF介绍 UDTF(User-Defined Table-Generating Functions) 用来解决 输入一行输出多行(On-to-many maping) 的需求。 2. 编写自己需要的UDTF 继承org.apache.hadoop.hive.ql.udf.generic.GenericUDTF,实现initialize, process...

栏目列表
推荐内容