我正在尝试对现有C *表运行Hive查询。
这是我的C *表定义:
drop table IF EXISTS mydata.site_users;
CREATE TABLE IF NOT EXISTS appdata.site_users (
user_id text,
user_test_uuid uuid, --for testing purposes, if we can use it in queries, there could be some serde problems?
user_name text,
PRIMARY KEY (user_id)
);
这是我的外部配置单元表定义:
CREATE EXTERNAL TABLE c_site_users(
user_id string, user_test_uuid binary, user_name string)
STORED BY 'org.apache.hadoop.hive.cassandra.cql3.CqlStorageHandler'
WITH SERDEPROPERTIES( "cassandra.ks.name" = "mydata",
"cassandra.cf.name" = "site_users",
"cql3.partition.key" = "user_id",
"cassandra.cql3.type" = "text, uuid, text"
);
我已经使用cqlsh将数据插入到C *表中:
cqlsh:appdata> select * from site_users;
user_id | user_name | user_test_uuid
---------+-----------+--------------------------------------
user2 | Ivan | 51569760-10e6-11e5-af86-23fdaf275fb9
user1 | Sergey | 51542660-10e6-11e5-af86-23fdaf275fb9
user3 | Johan | 5157a8d0-10e6-11e5-af86-23fdaf275fb9
(3 rows)
现在,我尝试使用 dse hive 运行相同的查询
vagrant@dsenode01:~$ dse hive
Logging initialized using configuration in file:/etc/dse/hive/hive-log4j.properties
hive> select * from c_site_users;
OK
Failed with exception java.io.IOException:java.io.IOException: com.datastax.driver.core.exceptions.UnavailableException: Not enough replica available for query at consistency LOCAL_ONE (1 required but only 0 alive)
Time taken: 13.297 seconds
太奇怪了!
C *表还可以,数据在那里,我可以查询它,但是dse hive抱怨。我做错了什么?
最佳答案
好的,答案很简单。我需要在每个节点上启用hadoop的情况下运行dse。我有3个节点,RF = 1。而且只有一个节点启用了HADOOP。我在所有3个节点上都启用了HADOOP,并且它可以从两方面使用:直接查询由C *表和C *表支持的外部表,因为DSE隐式地使用C *表更新元存储。