Errore di valore serializzato non valido durante la lettura di una mappa di Stringified JSON Objects da Cassandra 1.2 utilizzando DATASTAX 1.0.5 Driver Java e Cassaforte
-
26-12-2019 - |
Domanda
Sto usando Cassaforte 1.3.0-beta9, Cassandra 1.2 (DataStax) e Com.DataStax.Cassandra / Cassandra-Driver-Core 1.0.5 (dal momento che 2.0 non funziona con Cassandra 1.2).Ho un tavolo con il seguente schema:
CREATE TABLE entities (
id text,
address_country text,
address_county text,
address_region text,
address_street_two text,
csv_uploads list<text>,
documents list<text>,
name text,
notes list<text>,
photos list<text>,
project_id text,
property_code text,
property_data text,
retrofit_completion_date text,
metering_point_ids text,
devices map<text,text>,
user_id text,
PRIMARY KEY (id)
)
.
Questo è un esempio di ciò che è memorizzato in una riga:
7b237da126d39ccf98f80d78b6145a10828970f8 |
{'b9d88015c84312bf24cef0e7f1a0baf98dbc8d8d':
'{"metadata":{"passivrole":"zone 1 temperature,zone 1 temperature"},
"readings":
[{"type":"temperature","resolution":"120","accuracy":"0.1","period":"INSTANT"},
{"type":"interpolatedTemperatureAir","resolution":100,"accuracy":"0.1","period":"INSTANT"}],
"description":"External air temperature sensor",
"entity-id":"3e0730d4672538307056a30615aaaa333107d94e"}',
'd2fe3dca47b760dd67759a56ee0ebbc2cb3395f4':
'{"metadata":{"passivrole":"zone 1 humidity"},
"readings":[{"type":"blah","resolution":"120","accuracy":"0.1","period":"INSTANT"}],
"description":" air humidity sensor",
"entity-id":"3e0730d4672538307056a30615aaaa333107d94e"}'} |
alice
.
Quando provo a leggere la colonna devices
ottengo il seguente errore:
com.datastax.driver.core.exceptions.InvalidTypeException: Invalid serialized value for type map<text, text> (String didn't validate.)
at com.datastax.driver.core.DataType.deserialize(DataType.java:503)
.
Posso leggere la colonna dei dispositivi senza problemi usando CQLSH (che è mostrato sopra).I valori memorizzati nella mappa sono oggetti JSON stringizzati.
Ecco il flusso di lavoro campione:
(require '[clojurewerkz.cassaforte.client :as cassaclient]
' [clojurewerkz.cassaforte.query :as cassaquery]
' [clojurewerkz.cassaforte.cql :as cql])
;; SELECT on empty devices:
(binding [cassaclient/*default-session* session]
(let [entity (cql/select :entities (cassaquery/where :id "3e0730d4672538307056a30615aaaa333107d94e"))]
(prn "retrieved entity: " entity)))
;; Returns vector of results, no errors:
"retrieved entity: " [{:retrofit_completion_date nil, :notes nil, :property_code "3e49de0-12af-012e-4f3a-12313b0348f8", :devices nil, :name nil, :user_id "alice", :csv_uploads nil, :project_id "0b4f512fb7834a0878252ab144a525d424445ba2", :photos nil, :property_data nil, :metering_point_ids "[\"1\" \"2\"]", :address_street_two nil, :documents nil, :address_region nil, :address_country nil, :address_county nil, :id "3e0730d4672538307056a30615aaaa333107d94e"}]
;; UPDATE using cassaforte:
(binding [cassaclient/*default-session* session]
(cql/update :entities {:devices {"0edf9e09bce895caf0342ac6ae12511555930362" "{:metadata {\"passivrole\" \"zone 1 humidity\"}, :readings [{\"type\" \"tba\", \"resolution\" \"90\", \"accuracy\" \"0.2\", \"period\" \"INSTANT\"}], :description \"lalalala\", :entity-id \"3e0730d4672538307056a30615aaaa333107d94e\"}"}} (cassaquery/where :id "3e0730d4672538307056a30615aaaa333107d94e")))
;; update worked ok, cqlsh (select devices from entities where id = '3e0730d4672538307056a30615aaaa333107d94e';)
;; returns correct map:
;; {'0edf9e09bce895caf0342ac6ae12511555930362': '{:metadata {"passivrole" "zone 1 humidity"}, :readings [{"type" "tba", "resolution" "90", "accuracy" "0.2", "period" "INSTANT"}], :description "lalalala", :entity-id "3e0730d4672538307056a30615aaaa333107d94e"}'}
;; SELECT using cassaforte
(binding [cassaclient/*default-session* session]
(let [entity (cql/select :entities (cassaquery/where :id "3e0730d4672538307056a30615aaaa333107d94e"))]
(prn "retrieved entity: " entity)))
;; Returns this error:
;; InvalidTypeException Invalid serialized value for type map<text, text> (String didn't validate.) com.datastax.driver.core.DataType.deserialize (DataType.java:503)
.
Ho provato lo stesso flusso di lavoro usando CQL e Cassaforte Raw e i risultati erano esattamente lo stesso:
(require '[clojurewerkz.cassaforte.client :as cassaclient])
;; SELECT on empty devices:
(cassaclient/execute session "SELECT * FROM entities WHERE id = '3e0730d4672538307056a30615aaaa333107d94e';")
;; Returns vector of results, no errors:
[{:retrofit_completion_date nil, :notes nil, :property_code "3e49de0-12af-012e-4f3a-12313b0348f8", :devices nil, :name nil, :user_id "alice", :csv_uploads nil, :project_id "0b4f512fb7834a0878252ab144a525d424445ba2", :photos nil, :property_data nil, :metering_point_ids "[\"1\" \"2\"]", :address_street_two nil, :documents nil, :address_region nil, :address_country nil, :address_county nil, :id "3e0730d4672538307056a30615aaaa333107d94e"}]
;; UPDATE using cassaforte:
(cassaclient/execute session "UPDATE entities SET devices = {'0edf9e09bce895caf0342ac6ae12511555930362' : '{:metadata {\"passivrole\" \"zone 1 humidity\"}, :readings [{\"type\" \"tba\", \"resolution\" \"90\", \"accuracy\" \"0.2\", \"period\" \"INSTANT\"}], :description \"lalalala\", :entity-id \"3e0730d4672538307056a30615aaaa333107d94e\"}'} WHERE id = '3e0730d4672538307056a30615aaaa333107d94e';")
;; update worked ok, cqlsh (select devices from entities where id = '3e0730d4672538307056a30615aaaa333107d94e';)
;; returns correct map:
;; {'0edf9e09bce895caf0342ac6ae12511555930362': '{:metadata {"passivrole" "zone 1 humidity"}, :readings [{"type" "tba", "resolution" "90", "accuracy" "0.2", "period" "INSTANT"}], :description "lalalala", :entity-id "3e0730d4672538307056a30615aaaa333107d94e"}'}
;; SELECT using cassaforte
(cassaclient/execute session "SELECT * FROM entities WHERE id = '3e0730d4672538307056a30615aaaa333107d94e';")
;; Returns this error:
;; InvalidTypeException Invalid serialized value for type map<text, text> (String didn't validate.) com.datastax.driver.core.DataType.deserialize (DataType.java:503)
.
Qualsiasi aiuto e / o suggerimenti su come gli oggetti JSON dovrebbero essere memorizzati nella collezione Map Cassandra saranno molto apprezzati.
Soluzione
(cassaforte manutentore qui)
Non ho visto questa domanda fino ad ora,
Questo è stato un problema con la versione 1.0.5 del driver DataSax. Cassaforte è attualmente a 2.0.0, il problema è chiuso con qualsiasi versione sopra Beta12. Maggiori informazioni qui: https://github.com/clojurewerkz/cassaforte/issues/41
Usa la versione più recente di Cassaforte e prova ad attaccare alla versione del driver Java che viene in bundle con Cassaforte e sarà tutto fantastico.