Azure Databricks без / FileStore и / Users

Я только что создал рабочую область Databricks в Azure и настроил токен доступа для интерфейса командной строки Databricks.

Все работает. Подключения хранилища BLOB-объектов, доступ к базе данных JDBC и интерфейс командной строки.

Но: файловая система выглядит странно. Я помню, что там где /Users и /FileStore под dbfs:/ при звонке dbfs ls. Они отсутствуют.

При выборе «Копировать путь к файлу» для записной книжки путь является ожидаемым /Users/[email protected]/NoteBookName, но ни путь, ни записная книжка не отображаются при вызове dbfs ls.

Что здесь происходит?


azure azure-databricks databricks
person Reinhard Seifert    schedule 11.02.2019    source источник

Ответы (1)


arrow_upward
0
arrow_downward

Папка / Users, которую вы видите в рабочей области для записных книжек, не хранится в DBFS. Возможно, вам удастся найти записные книжки, если вы покопаетесь:

%sh ls /

FileStore хранится в DBFS, но создается по запросу (или вручную).

person simon_dmorias    schedule 11.02.2019
comment
Спасибо! Я вспомнил ложь. Это не databricks fs ls или dbfs ls , а databricks workspace ls /Users/. Рабочие области находятся не в файловой системе dbfs, а на диске виртуальной машины узла драйвера. Вы сэкономили мне много времени и головной боли. - person Reinhard Seifert; 11.02.2019