将 ArrayBuffer 转换为 DataFrame 中的 HashSet 到 Hive 表中的 RDD 时的 GenericRowWithSchema 异常
本文介绍了将 ArrayBuffer 转换为 DataFrame 中的 HashSet 到 Hive 表中的 RDD 时的 GenericRowWithSchema 异常的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我有一个镶木地板格式的 Hive 表，它是使用I have a Hive table in parquet format that was...
从外部服务器将Python数据框插入Hive
本文介绍了从外部服务器将Python数据框插入Hive的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我目前正在使用PyHive(Python3.6)将数据读取到Hive群集之外的服务器，然后使用Python进行分析.I'm currently using PyHive (Python3.6) to read data to a server that ...
HIVE中的外部表格 - 从原始数据集中转义双引号
本文介绍了HIVE中的外部表格 - 从原始数据集中转义双引号的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我有一个带有字符串和整型值的文件。所有的字符串都是用括起来的。 I have a file with string and int values. All strings are in enclosed using " "int_value1, "...
如何创建HIVE表以读取分号分隔的值
本文介绍了如何创建HIVE表以读取分号分隔的值的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我想创建一个HIVE表，该表将以分号分隔的值读取，但是我的代码不断给我错误.有人有什么建议吗?I want to create a HIVE table that will read in semicolon separated values, but my c...
Hive：当Date是一个字符串时，在指定日期之间过滤数据
本文介绍了Hive：当Date是一个字符串时，在指定日期之间过滤数据的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我正尝试在2010年9月1日至2013年8月31日之间过滤数据。包含日期的列是字符串格式（yyyy-mm-dd）。我可以在此列上使用month（）和year（）。但是如何使用它们来过滤上述日期之间的数据？ I'm trying to filt...
如何在Hive中定义嵌套的收集项目
本文介绍了如何在Hive中定义嵌套的收集项目的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我试图用嵌套的Collection项目创建一个配置单元表。假设我有一个struct数组。 CREATE TABLE SAMPLE（记录数组< struct< col1：string，col2 ：字符串>> ）行格式定界字段以'，'结尾以'|'结尾的收集项目; 第一级...
如何将双引号括起来并由制表符分隔的CSV数据加载到HIVE表中?
本文介绍了如何将双引号括起来并由制表符分隔的CSV数据加载到HIVE表中?的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我正在尝试从 csv 文件加载数据，其中的值用双引号 '"' 和制表符分隔 '' 括起来.但是当我尝试将它加载到配置单元时，它不会抛出任何错误并且加载数据时没有任何错误，但我认为所有数据都被加载到单个列中，并且大多数值显示为 NULL...
插入Hive表中的值并用双引号将csv文件中的字符串
本文介绍了插入Hive表中的值并用双引号将csv文件中的字符串的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我正在将一个csv文件导出到配置单元表中.关于csv文件:列值包含在双引号中，并用逗号分隔.I am exporting a csv file into hive table.about the csv file : column value...
Spark SQL到Hive表-日期时间字段小时错误
本文介绍了Spark SQL到Hive表-日期时间字段小时错误的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我遇到这个问题:当我通过spark.sql在Hive中输入时间戳字段时数据，时间奇怪地更改为21:00:00！I face this problem: When I enter in a timestamp field in Hive with ...
使用 Python 访问 Hive 数据
本文介绍了使用 Python 访问 Hive 数据的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！ 问题描述 我在 HDFS 中有一些数据，我需要使用 python 访问这些数据，谁能告诉我如何使用 python 从 hive 访问数据?I have some data in HDFS,i need to access that data using python,...