Funkce to_avro

  • Článek

Platí pro: zaškrtnutí označeného ano Databricks SQL zaškrtnutí označeného ano Databricks Runtime 15.4 a novější

Vrátí binární hodnotu Avro se zadanou vstupní hodnotou.

Syntaxe

to_avro(expr [, avroSchemaSpec] )

Argumenty

  • expr: Výraz.
  • avroSchemaSpec: Volitelné cílové schéma ve formátu JSON. Pokud je zadaný, musí odpovídat expr typu uvedenému v poznámkách.

Návraty

Avro kódovaný BINARY.

Notes

Mapování typů SQL na typy Avro je následující:

Typ SQL Schéma Avro
VOID { "type" : "null" }
BOOLEAN { "type" : "boolean" }
TINYINT { "type" : "int" }
SMALLINT { "type" : "int" }
INT { "type" : "int" }
BIGINT { "type" : "long" }
DECIMAL(p, s) { "type": "fixed", "name": "a", logicalType": "decimal", "size": (p+1)/2, precision": p, "scale": s }
FLOAT { "type" : "float" }
DOUBLE { "type" : "float" }
STRING { "type" : "string" }
DATE { "type" : "int", "logicalType" : "date" }
TIMESTAMP { "type" : "long" } jako mikrosekundy od 1970-01-01 00:00:00.000000
TIMESTAMP_NTZ { "type" : "long" } jako mikrosekundy od 1970-01-01 00:00:00.000000
YEAR MONTH INTERVAL { "type" : "long" } jako měsíce
DAY TIME INTERVAL { "type" : "long" } jako mikrosekundy
BINARY { "type" : "bytes" }
STRUCT<field1 type1, ...> { "type" : "record", "name": "struct_name", "fields": [ { "name" : "field1", "type" : ... }, ... ] }
ARRAY<type> { "type" : "array", "items": { "type" : ... }
MAP<STRING, valueType> { "type" : "map", "keyType": { "type" : ... }, "valueType": { "type" : ... } }
MAP<nonStringType, valueType> Nepodporováno
VARIANT Nepodporováno

Příklady

> SELECT from_avro(to_avro(5), '{ "type" : "int" }');
  5

> SELECT from_avro(to_avro(5, '{ "type" : "int" }'), '{ "type" : "int" }');
  5

> SELECT from_avro(to_avro(named_struct('num', 5, 'txt', 'hello')), '{ "type" : "record", "name": "my_record", "fields": [{ "name": "num", "type": "int"}, { "name": "txt", "type": "string"}]}');
  {"num":5,"txt":"hello"}