Switch Tesla Powerwall to backup only while charging #5826

GrimmiMeloni · 2023-01-17T22:11:06Z

GrimmiMeloni
Jan 17, 2023
Collaborator Sponsor

I know there's different opinions and existing comments/discussions on here wether draining your home battery for charging your EV is an issue or not. As I did not want to drain my Powerwall via maximum load every time I charge the car, I decided to create a script for this, that can be used as an event handler for evcc.

https://github.com/GrimmiMeloni/powerwall-backupCtrl

andig · 2023-01-18T07:51:15Z

andig
Jan 18, 2023
Maintainer

Sehr schön, super gemacht. Das wäre in evcc dann ein:

interface DischargeLocker {
    LockBattery(bool)
}

den wir optional umsetzen könnten. Die Steuerung ist allerdings nochmal ein komplexeres Thema- es könnte ja attraktiv sein, bei günstigen Preisen auch die Batterie aus dem Netz nachzuladen.

Bzgl. Tesla: welchen Token verwendest Du hier- den vom Fahrzeug? Bei mehreren Tesla Fahrzeugen wären jeweils die gleichen Endpunkte im Energy API sichtbar? Da ich keine PW habe bräuchte ich dafür mal Zugangsdaten zum testen ([email protected]).

/cc @premultiply

1 reply

GrimmiMeloni Jan 18, 2023
Collaborator Author Sponsor

Der Token ist der "normale" Token vom Tesla Portal, da gibt es soweit ich das sehe keine Unterscheidung. Die API kennt sowohl Fahrzeuge als auch Energy Produkte. Ich benutze mein Refresh Token um mir die Access Tokens bei Bedarf zu holen, bzw. zu erneuern wenn sie abgelaufen sind.

Meine Zugangsdaten möchte ich nicht teilen - ich habe aber gerade einmal die kompletten Responses der 2 APIs die ich nutze gedumpt.

Data discovery (für die IDs) über /api/1/products (see https://tesla-api.timdorr.com/api-basics/products#get-api-1-products)

{
  "response": [
    {
      "energy_site_id": 12345678901234567890,
      "resource_type": "battery",
      "site_name": "Zuhause",
      "id": "S***************",
      "gateway_id": "********************",
      "asset_site_id": "*********************",
      "energy_left": 4426.263157894738,
      "total_pack_energy": 14781,
      "percentage_charged": 29.945627209896063,
      "battery_type": "ac_powerwall",
      "backup_capable": true,
      "battery_power": -10,
      "storm_mode_enabled": true,
      "powerwall_onboarding_settings_set": true,
      "powerwall_tesla_electric_interested_in": null,
      "sync_grid_alert_enabled": true,
      "breaker_alert_enabled": false,
      "components": {
        "battery": true,
        "battery_type": "ac_powerwall",
        "solar": true,
        "solar_type": "pv_panel",
        "grid": true,
        "load_meter": true,
        "market_type": "residential"
      }
    }
  ],
  "count": 1
}

Darin sind primär die energy_site_id und die id wichtig, da diese für die weiteren API calls benötigt werden.
Die response enthält wie oben gezeigt ein Array, scheint aber nur pro Site ein Eintrag zu sein. Die Seriennummer in ID und auch die Gateway ID sind beide aber ebenfalls nur Site spezifisch. Ich gehe also davon aus, daß selbst wenn ich eine zweite Powerwall hier hätte um meine Batteriekapazität zu verdoppeln, ich immer noch mit diesem einen Satz an IDs auskäme.

Das ganze ist aber auch eigentlich egal, denn zumindest zum Setzen der Batterie Reserve benötigt man lediglich die Site ID. Der Reserve Wert wird nicht pro Batterie sondern pro Site gesetzt. Der Aufruf erfolgt dann gegen den Endpoint backup auf der Tesla API, also /api/1/energy_sites/<SITE_ID>/backup. Dieser Teil der Tesla API ist leider noch undokumentiert. Ich habe die Info wie es geht in einer Diskussion hier gefunden.

Als Antwort bekommt man lediglich ein

{"response":{"code":201,"message":"Updated"}}

zurück. Vertrauen ist gut, Kontrolle ist besser - daher drehe ich noch die Extra Runde und Frage im Anschluß vom Gateway nochmals explizit die Einstellung ab. Dafür wird dann die oben erwähnte id benötigt. Kann man aber auch als optional ansehen. Auch dieser Aufruf scheint komplett undokumentiert, habe es ebenfalls aus der oben genannten Diskussion geklaut. Da gibt es dann nochmal einen ganzen Sack an Information zum Zustand, inkl. dem entscheidenden backup_reserve_percent.

{
  "response": {
    "site_name": "Zuhause",
    "energy_left": 4424.210526315789,
    "total_pack_energy": 14780,
    "grid_status": "Active",
    "backup": {
      "backup_reserve_percent": 100,
      "events": [
        {
          "timestamp": "2022-10-19T14:04:44+02:00",
          "duration": 312873
        },
        {
          "timestamp": "2022-09-20T10:06:43+02:00",
          "duration": 1188291
        }
      ],
      "events_count": 0,
      "total_events": 0
    },
    "user_settings": {
      "storm_mode_enabled": true,
      "powerwall_onboarding_settings_set": true,
      "powerwall_tesla_electric_interested_in": false,
      "sync_grid_alert_enabled": false,
      "breaker_alert_enabled": false
    },
    "components": {
      "solar": true,
      "solar_type": "pv_panel",
      "battery": true,
      "grid": true,
      "backup": true,
      "gateway": "teg",
      "load_meter": true,
      "tou_capable": true,
      "storm_mode_capable": true,
      "flex_energy_request_capable": false,
      "car_charging_data_supported": false,
      "off_grid_vehicle_charging_reserve_supported": false,
      "vehicle_charging_performance_view_enabled": false,
      "vehicle_charging_solar_offset_view_enabled": false,
      "battery_solar_offset_view_enabled": true,
      "solar_value_enabled": true,
      "energy_value_header": "Energy Value",
      "energy_value_subheader": "Estimated Value",
      "show_grid_import_battery_source_cards": true,
      "backup_time_remaining_enabled": true,
      "battery_type": "ac_powerwall",
      "configurable": false,
      "grid_services_enabled": false,
      "ITC_cliff": 1
    },
    "default_real_mode": "self_consumption",
    "operation": "self_consumption",
    "installation_date": "2022-09-19T13:46:22+02:00",
    "power_reading": [
      {
        "timestamp": "2023-01-18T22:33:24+01:00",
        "load_power": 11335,
        "solar_power": 0,
        "grid_power": 11348,
        "battery_power": -10,
        "generator_power": 0
      }
    ],
    "battery_count": 1
  }
}

Hoffe das hilft erstmal weiter zum Verständnis was "unten drunter" passiert.

ThinkEV · 2023-01-30T20:02:11Z

ThinkEV
Jan 30, 2023

Mir ist es auch wichtig, die Powerwall nicht beim Laden des PKW leerzusaugen bis zur Backupgrenze. Wenn ich z. B. das Auto in der Nacht angesteckt habe und es dann automatisch irgendwann geladen wird, dann ist ansonsten danach die Powerwall leer, wenn wir morgens wieder Strom brauchen und dann müssen wir den Strom teuer einkaufen und warten, bis wieder genug PV-Ertrag kommt.
Deswegen ist dein Tool für mich genau das richtige, vielen Dank dafür!

Die Token habe ich übrigens mit https://github.com/adriankumpf/tesla_auth unter Windows ausgelesen.

2 replies

andig Jan 31, 2023
Maintainer

Wenn ich z. B. das Auto in der Nacht angesteckt habe und es dann automatisch irgendwann geladen wird, dann ist ansonsten danach die Powerwall leer, wenn wir morgens wieder Strom brauchen und dann müssen wir den Strom teuer einkaufen und warten, bis wieder genug PV-Ertrag kommt.

Du hast einen flexiblen Tarif?

Wer will kann das natürlich heute schon ausprobieren. Entweder per Skripting (die start/stop Messages an ein Skript geben) oder extern Api/Mqtt beobachten und entsprechend die Batterie steuern.

Ich erwarte hier keine schnelle Lösung von uns:

Ich hab kein Testobjekt
Das Thema ist komplexer als an/aus bei Autoladen. Wie in anderem Thread festgestellt braucht es hier eine komplexere Prognosefunktion die entscheiden kann welcher Aktion für die Batterie sinnvoll wäre.

ThinkEV Feb 1, 2023

Ich werde in Kürze einen flexiblen Tarif haben und wollte dann die neue Ladeplanung #5639 einsetzen bzw. ausprobieren.

ThinkEV · 2023-02-01T22:18:46Z

ThinkEV
Feb 1, 2023

Mit gültigem Accesstoken klappt es. Wenn der aber abgelaufen ist, dann funktioniert der Refresh mit Refreshtoken leider nicht.

getTeslaIds() habe ich um die Zeilen ergänzt:
echo -n "SITE_NAME: "
echo $RESPONSE | jq -r .response[0].site_name
echo -n "TOTAL_PACK_ENERGY: "
echo $RESPONSE | jq -r .response[0].total_pack_energy

Das hat da zwar eigentlich nichts zu suchen, aber hilft mir, um einfach die Restkapazität der Powerwall jährlich prüfen und die Alterung des Akkus bestimmen zu können.

2 replies

andig Feb 2, 2023
Maintainer

Was klappt?

ThinkEV Feb 2, 2023

Okay, dann gerne noch einmal ausführlicher:

Ich habe das Skript von @GrimmiMeloni in /etc/evcc-scripts/ gelegt, die Token sind /etc/evcc-scripts/tokens/access_token und refresh_token. Beide Token habe ich besorgt und in diese Dateien gelegt. Der eventHandler.sh funktioniert mit den access_token einwandfrei, also schaltet die Backup-Grenze der Powerwall wie gewünscht beim Laden auf 100% und danach wieder zurück auf 30% (konfigurierbarer Wert). Der access_token hat jedoch nur eine begrenzte Gültigkeit von 8 Stunden und muss, sobald er abgelaufen ist, mit Hilfe des refresh_token erneuert werden. Und genau das klappt bei mir nicht. Vielleicht ist mein refresh_token nicht vollständig? Wieviele Zeichen lang muss der sein? Vielleicht hat Tesla die Länge angepasst und das Tool, dass ich benutzt habe, ist nicht dafür ausgelegt.

$ sudo ./eventHandler.sh charging_started
params: charging_started
Charging started - disabling battery self consumption
expire time of token:
current time: 1675322689
seconds remaining: -1675322689
access token expired or missing, refreshing...
sending refresh data: {"grant_type": "refresh_token", "client_id": "ownerapi", "refresh_token": "HIER STEHT MEIN REFRESH_TOKEN_(883 ZEICHEN LANG)", "scope": "openid email offline_access" }
refresh reply: (HTML-Tags entfernt)

    Access Denied
    You don't have permission to access http://auth.tesla.com/oauth2/v3/token on this server.
    Reference https://github.com/evcc-io/evcc/pull/18.8f1d1002.1675322690.5a1175c1

parse error: Invalid numeric literal at line 1, column 13
new access_token:

./eventHandler.sh: line 61: [: -ne: unary operator expected

./eventHandler.sh: line 67: [: -ne: unary operator expected
OK (new reserve reported by API: %)

GrimmiMeloni · 2023-02-02T08:16:56Z

GrimmiMeloni
Feb 2, 2023
Collaborator Author Sponsor

Das Skript benötigt kein Access Token als Input, da es die selbst fetched. Wenn Du manuell ein access token ablegst nutzt das Script dein refresh token zunächst nicht. Somit ist Deine Vermutung naheliegend das es daran liegt.

Ein JWT einhält zwei Base64 kodierte Blöcke und abschließend eine Signatur über die vorhergehenden Daten. Diese 3 Blöcke sind durch zwei Punkte voneinander abgegrenzt. Ganz grobe Schnitzer kannst du also erkennen wenn Du das Format deines Tokens anschaust.

Ferner kannst Du auch Dein RefreshToken mal in jwt.io einfügen, dort kannst Du hoffentlich Daten sehen, und wichtig ganz unten sollte "signature verified" stehen. Wenn das nicht der Fall ist, ist Dein Token ungültig.

1 reply

ThinkEV Feb 2, 2023

Ja, ich habe das Verhalten des Skripts schon gut verstanden. Danke für den Hinweis auf jwt.io - meine Token sind gültig.
Keine Ahnung, warum das trotzdem mit dem Refresh nicht klappt. Vielleicht hat Tesla mich geblockt? Ich habe auch die IP-Adresse gewechselt, aber keine Verbesserung.

GrimmiMeloni · 2023-02-10T17:24:00Z

GrimmiMeloni
Feb 10, 2023
Collaborator Author Sponsor

Da heute viel Sonne da war, habe ich tatsächlich mal tagsüber geladen und dabei auch mal mit den Modi rumgespielt.
Dabei ist mir aufgefallen das mein Eventhandler Script leider nichts von den Charge Mode wechseln mitbekommt.

@andig ich habe mich kurz im Code umgeschaut, und auch nicht gesehen dass es für ChargeMode Wechsel bereits einen Event gibt. So einen Event könnte aus lp.SetMode() via lp.pushEvent() relativ einfach gesendet werden. Ich könnte mich mal an meinem ersten PR versuchen, so fern die Idee Anklang findet.

4 replies

andig Feb 10, 2023
Maintainer

Alternativ von mqtt holen?

GrimmiMeloni Feb 10, 2023
Collaborator Author Sponsor

Interessante Idee, daran habe ich noch gar nicht gedacht. Danke dafür. Ich schaue mir das mal an.

GrimmiMeloni Feb 25, 2023
Collaborator Author Sponsor

@andig Danke für die Inspiration. Ich habe das mal letzte Woche umgesetzt und das gleiche Verhalten jetzt via MQTT Anbindung realisiert. Über MQTT waren jetzt auch die Chargemode Infos vorhanden, so daß entsprechend umgeschaltet werden kann. Falls sich jemand anderes auch für diesen Lösungsweg interessiert, findet er/sie die Quellen dazu hier: https://github.com/GrimmiMeloni/evcc-mqtt-listener

ThinkEV Feb 26, 2023

@andig wäre es möglich, die Chargemode-Änderungen auch über das normale Messaging zu übermitteln? Ich wollte jetzt nicht auch noch JavaScript auf meinen uralten Raspberry Pi packen. :)

ThinkEV · 2023-02-26T10:21:22Z

ThinkEV
Feb 26, 2023

Alternatively you can also log into the Tesla portal in your browser and extract the token from the cookies. #hackerman

Das funktioniert nicht mit den Token aus den Webbrowser-Cookies, denn diese verwenden Oauth v1 und sind für unsere Zwecke ausreichend berechtigt. Allerdings funktioniert die Erneuerung des Accesstoken v1 aus dem Refreshtoken v1 mit diesem Skript.

Du solltest diese Zeile aus der Readme entfernen.

Ich habe leider immer noch nicht herausgefunden, wieso ich es nicht schaffe, mit einem Refreshtoken v3 einen neuen Accesstoken v3 zu besorgen.

Ich versuche es jetzt nochmal mit https://github.com/Marky0/tesla_api_lite .
Die Python-Dateien müssen noch um "#!/usr/bin/python" in der ersten Zeile ergänz werden und mit dos2unix konvertiert werden.
Dann laufen sie...

Mit dem Refreshtoken von der tesla_api_lite schafft es dein Tool hier lieder nicht, einen neuen Accesstoken zu ziehen.
Die Tesla_api_lite schafft es. Ich weiß noch nicht, wo der entscheidende Unterschied liegt...

1 reply

ThinkEV Feb 26, 2023

Ich habe den eventHandler.sh umgeschrieben, so dass er refresh_token.py (aus der Tesla_api_lite) verwendet.

Die Dateien refresh_token.py und tesla_token.json müssen in das gleiche Verzeichnis gelegt werden wie der eventHandler.sh.
Das Unterverzeichnis tokens/ wird nicht mehr benötigt.

Und das Delta für den Accesstoken habe ich auf 15 erhöht, um etwas Reserve zu haben :-)

--- eventHandler.sh     2023-02-26 12:25:08.785398833 +0100
+++ eventHandler-neu.sh 2023-02-26 12:34:12.348574366 +0100
@@ -1,9 +1,8 @@
-#!/bin/sh
+#!/bin/bash

 ############## GLOBAL VARS ##############
 BASEDIR=`dirname $0`
-RT_FILE="$BASEDIR/tokens/refresh_token"
-AT_FILE="$BASEDIR/tokens/access_token"
+TESLA_TOKEN="$BASEDIR/tesla_token.json"
 DEBUG=false
 #########################################

@@ -20,7 +19,7 @@
 check_and_refresh_access_token() {

        if [ -f $AT_FILE ]; then
-               ACCESS_TOKEN=`cat $AT_FILE`
+               ACCESS_TOKEN=`cat $TESLA_TOKEN | jq -r .access_token`
                EXP=`echo $ACCESS_TOKEN | sed -e 's/^[^\.]*\.\(.*\)\..*$/\1/' | base64 -d | jq .exp`
                log expire time of token: $EXP

@@ -33,22 +32,20 @@
                DELTA=0
        fi

-       [ $DELTA -gt 0 ] && log access token still valid, reusing...
+       [ $DELTA -gt 15 ] && log access token still valid, reusing...

        [ $DELTA -le 0 ] && echo access token expired or missing, refreshing... && refresh_access_token
 }

 #use refresh token to update stored access token after expiry
 refresh_access_token() {
-       [ ! -f $RT_FILE ] && echo "refresh token file ($RT_FILE) missing. Aborting." && exit 1
+       [ ! -f $TESLA_TOKEN ] && echo "tesla token file ($TESLA_TOKEN) missing. Aborting." && exit 1

-       REFRESH_TOKEN=`cat $RT_FILE`
-       REFRESH_DATA="{\"grant_type\": \"refresh_token\", \"client_id\": \"ownerapi\", \"refresh_token\": \"$REFRESH_TOKEN\", \"scope\": \"openid email offline_access\" }"
-       log sending refresh data: $REFRESH_DATA
-       REFRESH_REPLY=`curl -s -X POST -H "content-type: application/json; charset=utf-8" -d "$REFRESH_DATA" https://auth.tesla.com/oauth2/v3/token`
-       ACCESS_TOKEN=`echo $REFRESH_REPLY | jq -r .access_token`
+       log refreshing access token...
+       # callinmg external utility
+       cd $BASEDIR
+       ./refresh_token.py
+       ACCESS_TOKEN=`cat $TESLA_TOKEN | jq -r .access_token`
        log new access_token: $ACCESS_TOKEN
-       echo $ACCESS_TOKEN > $AT_FILE
 }

 setBatteryTargetSoc() {

ThinkEV · 2023-07-23T18:15:27Z

ThinkEV
Jul 23, 2023

Ich habe das jetzt mit REST API umgesetzt, siehe: #9090

0 replies

GrimmiMeloni · 2023-10-22T14:53:18Z

GrimmiMeloni
Oct 22, 2023
Collaborator Author Sponsor

Ich habe das mal letzte Woche umgesetzt und das gleiche Verhalten jetzt via MQTT Anbindung realisiert. Über MQTT waren jetzt auch die Chargemode Infos vorhanden, so daß entsprechend umgeschaltet werden kann. Falls sich jemand anderes auch für diesen Lösungsweg interessiert, findet er/sie die Quellen dazu hier: https://github.com/GrimmiMeloni/evcc-mqtt-listener

Ich mußte da heute eh nochmal ran, und habe in dem Zuge auch einen docker build auf GitHub erzeugt. Das image ist jetzt verfügbar als ghcr.io/grimmimeloni/evcc-mqtt-listener:main. Es gibt im Repo oben jetzt auch ein Readme, das grob erklärt wie man das ganze einsetzt.

0 replies

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

Switch Tesla Powerwall to backup only while charging #5826

{{title}}

Replies: 8 comments 11 replies

{{title}}

{{editor}}'s edit

{{editor}}'s edit

{{title}}

{{title}}

{{title}}

{{title}}

{{title}}

{{title}}

{{title}}

{{title}}

{{editor}}'s edit

{{editor}}'s edit

{{title}}

{{title}}

{{editor}}'s edit

{{editor}}'s edit

{{title}}

{{title}}

{{title}}

{{title}}

{{title}}

{{editor}}'s edit

{{editor}}'s edit

{{title}}

{{editor}}'s edit

{{editor}}'s edit

{{title}}

{{editor}}'s edit

{{editor}}'s edit

{{title}}

Select a reply

Switch Tesla Powerwall to backup only while charging #5826

GrimmiMeloni Jan 17, 2023 Collaborator Sponsor

Replies: 8 comments · 11 replies

andig Jan 18, 2023 Maintainer

GrimmiMeloni Jan 18, 2023 Collaborator Author Sponsor

andig Jan 31, 2023 Maintainer

andig Feb 2, 2023 Maintainer

GrimmiMeloni Feb 2, 2023 Collaborator Author Sponsor

GrimmiMeloni Feb 10, 2023 Collaborator Author Sponsor

andig Feb 10, 2023 Maintainer

GrimmiMeloni Feb 10, 2023 Collaborator Author Sponsor

GrimmiMeloni Feb 25, 2023 Collaborator Author Sponsor

GrimmiMeloni Oct 22, 2023 Collaborator Author Sponsor

GrimmiMeloni
Jan 17, 2023
Collaborator Sponsor

Replies: 8 comments 11 replies

andig
Jan 18, 2023
Maintainer

GrimmiMeloni Jan 18, 2023
Collaborator Author Sponsor

andig Jan 31, 2023
Maintainer

andig Feb 2, 2023
Maintainer

GrimmiMeloni
Feb 2, 2023
Collaborator Author Sponsor

GrimmiMeloni
Feb 10, 2023
Collaborator Author Sponsor

andig Feb 10, 2023
Maintainer

GrimmiMeloni Feb 10, 2023
Collaborator Author Sponsor

GrimmiMeloni Feb 25, 2023
Collaborator Author Sponsor

GrimmiMeloni
Oct 22, 2023
Collaborator Author Sponsor