Searching...
miércoles, 1 de junio de 2022

Generar fichero Avro con Avro Tools, Faker y export BQ

 https://medium.com/analytics-vidhya/avro-utility-tool-swiss-army-knife-a4524fa3f325

https://avro.apache.org/docs/current/index.html

https://cloud.google.com/bigquery/docs/exporting-data#console


Se puede generar el esquema creando una tabla vacía en BQ y exportándola a AVRO.

Luego se puede usar Avro-tools para generar el esquema json y un nuevo fichero con datos dummy a partir de dicho esquema.

Avro Schema specification: https://avro.apache.org/docs/current/spec.html#schemas

How to write your first Avro schema: 

https://dalelane.co.uk/blog/?p=3781 

Python faker: https://zetcode.com/python/faker/

Faker examples date time this year: https://python.hotexamples.com/es/examples/faker/Faker/date_time_this_year/python-faker-date_time_this_year-method-examples.html




0 comentarios:

Publicar un comentario

Gracias por participar en esta página.

 
Back to top!