feature-engineering opdrachtgroep

Met feature-engineering de opdrachtgroep in de Databricks CLI kunt u functies in uw Databricks-functiearchief beheren.

Databricks kenmerk-engineering creer-kenmerk

Een functie maken.

databricks feature-engineering create-feature FULL_NAME SOURCE INPUTS FUNCTION TIME_WINDOW [flags]

Arguments

FULL_NAME

    De volledige driedelige naam (catalogus, schema, naam) van de functie.

SOURCE

    De gegevensbron van de functie.

INPUTS

    De invoerkolommen waaruit de functie wordt berekend.

FUNCTION

    De functie waarmee de functie wordt berekend.

TIME_WINDOW

    Het tijdvenster waarin de functie wordt berekend.

Options

--description string

    De beschrijving van de functie.

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

Globale vlaggen

Voorbeelden

In het volgende voorbeeld wordt een functie gemaakt:

databricks feature-engineering create-feature my_catalog.my_schema.my_feature my_source my_inputs my_function my_time_window --description "My feature description"

Databricks feature-engineering create-kafka-config

Maak een Kafka-configuratie aan.

databricks feature-engineering create-kafka-config NAME BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]

Arguments

NAME

    Naam die deze Kafka-configuratie uniek identificeert binnen de metastore. Dit zal de identifier zijn die wordt gebruikt vanuit het Feature-object om deze configuraties voor een feature te refereren. Het kan verschillen van de onderwerpnaam.

BOOTSTRAP_SERVERS

    Een door komma's gescheiden lijst met host-/poortparen die verwijzen naar kafka-cluster.

SUBSCRIPTION_MODE

    Opties om te configureren uit welke Kafka-onderwerpen data worden gehaald.

AUTH_CONFIG

    Authenticatieconfiguratie voor verbinding met onderwerpen.

Options

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

Globale vlaggen

Databricks feature-engineering create-materialized-feature

Maak een gematerialiseerde functie.

databricks feature-engineering create-materialized-feature FEATURE_NAME [flags]

Arguments

FEATURE_NAME

    De volledige naam van de functie in de Unity Catalog.

Options

--cron-schedule string

    De kwarts cron-uitdrukking die het schema van de materialisatiepijplijn definieert.

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

--materialized-feature-id string

    Server-toegewezen unieke identificatie voor de gematerialiseerde functie.

--pipeline-schedule-state MaterializedFeaturePipelineScheduleState

    De geplande status van de materialisatiepijplijn. Ondersteunde waarden: ACTIVE, PAUSED, SNAPSHOT.

Globale vlaggen

Databricks feature-engineering create-stream

Maak een stream.

databricks feature-engineering create-stream NAME SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]

Arguments

NAME

    Volledige driedelige (catalog.schema.stream) naam van de stream.

SOURCE_CONFIG

    Bronspecifieke configuratie. Bepaalt de bron van het streamingplatform.

CONNECTION_CONFIG

    Specificeert hoe je verbinding maakt en authenticeert met het streamplatform.

SCHEMA_CONFIG

    Schemadefinities voor de stream. Momenteel worden alleen directe schema's ondersteund. In een toekomstige mijlpaal zullen we schema-registries ondersteunen via een UC-verbinding.

INGESTION_CONFIG

    Configuratie voor streaming data-opname: de beheerde tabel die een offline kopie van forward fill-data en optionele historische backfill opslaat.

Options

--description string

    Door de gebruiker verstrekte beschrijving.

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

Globale vlaggen

databricks functie-engineering functie-verwijderen

Een functie verwijderen.

databricks feature-engineering delete-feature FULL_NAME [flags]

Arguments

FULL_NAME

    Naam van de functie die u wilt verwijderen.

Globale vlaggen

Voorbeelden

In het volgende voorbeeld wordt een functie verwijderd:

databricks feature-engineering delete-feature my_catalog.my_schema.my_feature

Databricks feature-engineering delete-kafka-config

Verwijder een Kafka-configuratie.

databricks feature-engineering delete-kafka-config NAME [flags]

Arguments

NAME

    Naam van de Kafka-configuratie die verwijderd moet worden.

Globale vlaggen

Databricks feature-engineering verwijder-gematerialiseerde-feature

Verwijder een gematerialiseerde functie.

databricks feature-engineering delete-materialized-feature MATERIALIZED_FEATURE_ID [flags]

Arguments

MATERIALIZED_FEATURE_ID

    De ID van de gematerialiseerde functie om te verwijderen.

Globale vlaggen

Databricks feature-engineering delete-stream

Verwijder een stream.

databricks feature-engineering delete-stream NAME [flags]

Arguments

NAME

    Volledige driedelige naam (catalog.schema.stream) van de te verwijderen stroom.

Globale vlaggen

databricks kenmerk-engineering haal-kenmerk

Een functie ophalen.

databricks feature-engineering get-feature FULL_NAME [flags]

Arguments

FULL_NAME

    De naam van de functie die u wilt ophalen.

Globale vlaggen

Voorbeelden

In het volgende voorbeeld wordt een functie weergegeven:

databricks feature-engineering get-feature my_catalog.my_schema.my_feature

Databricks feature-engineering get-kafka-config

Haal een Kafka-configuratie.

databricks feature-engineering get-kafka-config NAME [flags]

Arguments

NAME

    De naam van de Kafka-configuratie om te krijgen.

Globale vlaggen

Databricks feature-engineering get-materialized-feature

Zorg voor een gematerialiseerde speelfilm.

databricks feature-engineering get-materialized-feature MATERIALIZED_FEATURE_ID [flags]

Arguments

MATERIALIZED_FEATURE_ID

    De ID van de gematerialiseerde functie.

Globale vlaggen

Databricks feature-engineering get-stream

Haal een stream.

databricks feature-engineering get-stream NAME [flags]

Arguments

NAME

    Volledige driedelige naam (catalog.schema.stream) van de Stream om te krijgen.

Globale vlaggen

Databricks feature-engineering (kenmerken-engineering) list-features (kenmerk-lijst)

Kenmerken weergeven.

databricks feature-engineering list-features [flags]

Options

--page-size int

    Het maximum aantal resultaten dat moet worden geretourneerd.

--page-token string

    Pagineringstoken om naar de volgende pagina te gaan op basis van een vorige query.

Globale vlaggen

Voorbeelden

In het volgende voorbeeld ziet u alle functies:

databricks feature-engineering list-features

Databricks feature-engineering list-kafka-configs

Vermeld Kafka-configuraties.

databricks feature-engineering list-kafka-configs [flags]

Options

--limit int

    Het maximum aantal resultaten dat moet worden teruggegeven.

--page-size int

    Het maximum aantal resultaten dat moet worden geretourneerd.

Globale vlaggen

Databricks feature-engineering lijst-gematerialiseerde-features

Lijst van gematerialiseerde kenmerken.

databricks feature-engineering list-materialized-features [flags]

Options

--feature-name string

    Filter op functienaam.

--limit int

    Het maximum aantal resultaten dat moet worden teruggegeven.

--page-size int

    Het maximum aantal resultaten dat moet worden geretourneerd.

Globale vlaggen

Databricks feature-engineering lijststromen

Lijst streams.

databricks feature-engineering list-streams [flags]

Options

--limit int

    Het maximum aantal resultaten dat moet worden teruggegeven.

--page-size int

    Het maximum aantal resultaten dat moet worden geretourneerd.

--parent string

    Tweedelige naam (catalog.schema) van de ouder waaronder streams worden vermeld.

Globale vlaggen

databricks functie-engineering functie bijwerken

Werk de beschrijving van een functie bij (alle andere velden zijn onveranderbaar).

databricks feature-engineering update-feature FULL_NAME UPDATE_MASK SOURCE INPUTS FUNCTION TIME_WINDOW [flags]

Arguments

FULL_NAME

    De volledige driedelige naam (catalogus, schema, naam) van de functie.

UPDATE_MASK

    De lijst met velden die moeten worden bijgewerkt.

SOURCE

    De gegevensbron van de functie.

INPUTS

    De invoerkolommen waaruit de functie wordt berekend.

FUNCTION

    De functie waarmee de functie wordt berekend.

TIME_WINDOW

    Het tijdvenster waarin de functie wordt berekend.

Options

--description string

    De beschrijving van de functie.

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

Globale vlaggen

Voorbeelden

In het volgende voorbeeld wordt de beschrijving van een functie bijgewerkt:

databricks feature-engineering update-feature my_catalog.my_schema.my_feature description my_source my_inputs my_function my_time_window --description "Updated description"

Databricks feature-engineering update-kafka-config

Werk een Kafka-configuratie bij.

databricks feature-engineering update-kafka-config NAME UPDATE_MASK BOOTSTRAP_SERVERS SUBSCRIPTION_MODE AUTH_CONFIG [flags]

Arguments

NAME

    Naam die deze Kafka-configuratie uniek identificeert binnen de metastore. Dit zal de identifier zijn die wordt gebruikt vanuit het Feature-object om deze configuraties voor een feature te refereren. Het kan verschillen van de onderwerpnaam.

UPDATE_MASK

    De lijst met velden die moeten worden bijgewerkt.

BOOTSTRAP_SERVERS

    Een door komma's gescheiden lijst met host-/poortparen die verwijzen naar kafka-cluster.

SUBSCRIPTION_MODE

    Opties om te configureren uit welke Kafka-onderwerpen data worden gehaald.

AUTH_CONFIG

    Authenticatieconfiguratie voor verbinding met onderwerpen.

Options

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

Globale vlaggen

Databricks feature-engineering update-materialized-feature

Werk een gematerialiseerde functie bij.

databricks feature-engineering update-materialized-feature MATERIALIZED_FEATURE_ID UPDATE_MASK FEATURE_NAME [flags]

Arguments

MATERIALIZED_FEATURE_ID

    Server-toegewezen unieke identificatie voor de gematerialiseerde functie.

UPDATE_MASK

    Geef de materialisatie-featurevelden die bijgewerkt moeten worden. Momenteel kan alleen het veld pipeline_state worden bijgewerkt.

FEATURE_NAME

    De volledige naam van de functie in de Unity Catalog.

Options

--cron-schedule string

    De kwarts cron-uitdrukking die het schema van de materialisatiepijplijn definieert.

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

--materialized-feature-id string

    Server-toegewezen unieke identificatie voor de gematerialiseerde functie.

--pipeline-schedule-state MaterializedFeaturePipelineScheduleState

    De geplande status van de materialisatiepijplijn. Ondersteunde waarden: ACTIVE, PAUSED, SNAPSHOT.

Globale vlaggen

Databricks feature-engineering update-stream

Werk een stream bij.

databricks feature-engineering update-stream NAME UPDATE_MASK SOURCE_CONFIG CONNECTION_CONFIG SCHEMA_CONFIG INGESTION_CONFIG [flags]

Arguments

NAME

    Volledige driedelige (catalog.schema.stream) naam van de stream.

UPDATE_MASK

    De lijst met velden die moeten worden bijgewerkt.

SOURCE_CONFIG

    Bronspecifieke configuratie. Bepaalt de bron van het streamingplatform.

CONNECTION_CONFIG

    Specificeert hoe je verbinding maakt en authenticeert met het streamplatform.

SCHEMA_CONFIG

    Schemadefinities voor de stream. Momenteel worden alleen directe schema's ondersteund. In een toekomstige mijlpaal zullen we schema-registries ondersteunen via een UC-verbinding.

INGESTION_CONFIG

    Configuratie voor streaming data-opname: de beheerde tabel die een offline kopie van forward fill-data en optionele historische backfill opslaat.

Options

--description string

    Door de gebruiker verstrekte beschrijving.

--json JSON

    De inline JSON-tekenreeks of de link @path naar het JSON-bestand met de body van het verzoek.

Globale vlaggen

Globale vlaggen

--debug

  Of u logboekregistratie voor foutopsporing wilt inschakelen.

-h of --help

    Help weergeven voor de Databricks CLI, de bijbehorende opdrachtgroep of de bijbehorende opdracht.

--log-file snaar

    Een tekenreeks die het bestand aangeeft waar uitvoerlogboeken naar moeten worden geschreven. Als deze vlag niet is opgegeven, is het standaardinstelling om uitvoerlogboeken naar stderr te schrijven.

--log-format formatteren

    Het logformaat type, text of json. De standaardwaarde is text.

--log-level snaar

    Een tekenreeks die het niveau van de logboekindeling vertegenwoordigt. Als dit niet is opgegeven, wordt het niveau van de logboekindeling uitgeschakeld.

-o, --output Type

    Het type uitvoer van de opdracht, text of json. De standaardwaarde is text.

-p, --profile snaar

    De naam van het profiel in het ~/.databrickscfg bestand dat moet worden gebruikt om de opdracht uit te voeren. Als deze vlag niet is opgegeven en hij bestaat, wordt het profiel met de naam DEFAULT gebruikt.

--progress-format formatteren

    De indeling voor het weergeven van voortgangslogboeken: default, append, inplaceof json

-t, --target snaar

    Indien van toepassing, het bundeldoel dat moet worden gebruikt