Geopandas na Databricks

0

Jakiś pomysł z czego może wynikać brak dostępu do nieistniejącej ścieżki? Geopandas normalnie na klastrze jest zainstalowany. Potencjalny walkaround - ma ktoś pomysł jak inaczej odczytać przy pomocy koniecznie Pythona plik .shp i wyświetlić go w formie tabelarycznej?

screenshot-20210513165540.png

0

z czego może wynikać brak dostępu do nieistniejącej ścieżki?

Rzeczywiście pytaniem jest, z czego może wynikać brak dostępu do nieistniejącej ścieżki? Hm...

0

Geopandas nie ma po prostu dostępu do pliku, który znajduje się na Azure Storage'u, w przeciwieństwie do skonfigurowanego sparka i ogarnianie mu dostępu to ostatnia rzecz, jaką bym chciał tu robić.
Jakiś pomysł jak odczytać pysparkiem 3 plik typu shapefile? :P

Sedona coś mi nie praży
screenshot-20210517124819.png

0

Przerzuciłem plik ze storage'a na dbfsa celem odczytu z niego pliku geopandasem, ale występuje Driver error: permission denied. Jakiś pomysł jak nadać dostęp geopandasowi? Mogę zapisywać plik na dbfsie, ale nie mogę go odczytać ;_;

0

Cyk. Wystarczy przerzucić plik na dbfs przy pomocy dbutilsów, a potem odczytać geopandasem, ale korzystając z patha do File API, który jest inny niż dedykowany dla Spark API

dbutils.fs.cp("abfss://sciezka", "dbfs:/databricks/dupa", True)
geopandas.read_file("/dbfs/databricks/dupa")

1 użytkowników online, w tym zalogowanych: 0, gości: 1