Skip to content
New issue

Have a question about this project? Sign up for a free GitHub account to open an issue and contact its maintainers and the community.

By clicking “Sign up for GitHub”, you agree to our terms of service and privacy statement. We’ll occasionally send you account related emails.

Already on GitHub? Sign in to your account

Data is not displayed #57995

Open
KES777 opened this issue Nov 1, 2022 · 16 comments
Open

Data is not displayed #57995

KES777 opened this issue Nov 1, 2022 · 16 comments
Labels
datasource/Prometheus effort/medium needs investigation for unconfirmed bugs. use type/bug for confirmed bugs, even if they "need" more investigating prio/medium Important over the long term, but may not be staffed and/or may need multiple releases to complete.

Comments

@KES777
Copy link

KES777 commented Nov 1, 2022

What happened:
Data is not displayed, when I select period for last 12hours.
But it is, when I select period for 24 hours

image

and for 12hours:
image

What you expected to happen:
From 6am till 11am there is gitlab data (we see it on 24hour interval).
I expect to see it on 12hours interval too.

How to reproduce it (as minimally and precisely as possible):
This is 15798 dashboard.

Anything else we need to know?:
Something similar was here: https://stackoverflow.com/q/74252408/4632019

Environment:

  • Grafana version: 9.2.2 (78a)
  • Data source type & version: Prometheus (do not know how to check version)
  • OS Grafana is installed on: Ubuntu
  • User OS & Browser: LinuxMint 20.3, FF105
  • Grafana plugins:
  • Others:
@usmangt
Copy link
Contributor

usmangt commented Nov 7, 2022

Hi @KES777,

Thanks for opening this issue.

What panel visualisation you are using?

@usmangt usmangt added the needs more info Issue needs more information, like query results, dashboard or panel json, grafana version etc label Nov 7, 2022
@KES777
Copy link
Author

KES777 commented Nov 7, 2022

@usmangt This is dashboard with ID 15798.
image

@leeoniya
Copy link
Contributor

leeoniya commented Nov 7, 2022

you probably have more null values in these ranges than you have actual data. you may want to set a threshold below which you want to connect the existing datapoints instead of drawing gaps (or just set it to Always)

https://grafana.com/docs/grafana/latest/panels-visualizations/visualizations/time-series/#connect-null-values

@KES777
Copy link
Author

KES777 commented Nov 7, 2022

@leeoniya No, there is many datapoints. Look at first post.

Also precise test:
image

image

image

Thanks for the link. I have checked it and still do not see points for pgdb:

image

So here is two datapoints, which are not displayed.

@leeoniya
Copy link
Contributor

leeoniya commented Nov 7, 2022

can you attach a debug snapshot for this panel (it will have the raw response data embedded in it so we can investigate further)

https://grafana.com/docs/grafana/latest/whatsnew/whats-new-in-v9-2/#panel-help-menu

image

@KES777
Copy link
Author

KES777 commented Nov 7, 2022

@leeoniya

Key Value
Panel timeseries @ 8.3.6
Grafana 9.2.2 (78a3e64) // Open Source
Panel debug snapshot dashboard
{
  "panels": [
    {
      "id": 2,
      "gridPos": {
        "h": 13,
        "w": 15,
        "x": 0,
        "y": 0
      },
      "type": "timeseries",
      "title": "Reproduced with embedded data",
      "datasource": {
        "type": "grafana",
        "uid": "grafana"
      },
      "pluginVersion": "8.3.6",
      "links": [],
      "fieldConfig": {
        "defaults": {
          "custom": {
            "drawStyle": "line",
            "lineInterpolation": "linear",
            "barAlignment": 0,
            "lineWidth": 2,
            "fillOpacity": 10,
            "gradientMode": "none",
            "spanNulls": 600000,
            "showPoints": "never",
            "pointSize": 5,
            "stacking": {
              "mode": "none",
              "group": "A"
            },
            "axisPlacement": "auto",
            "axisLabel": "",
            "axisColorMode": "text",
            "scaleDistribution": {
              "type": "linear"
            },
            "axisCenteredZero": false,
            "hideFrom": {
              "tooltip": false,
              "viz": false,
              "legend": false
            },
            "thresholdsStyle": {
              "mode": "off"
            }
          },
          "color": {
            "mode": "palette-classic"
          },
          "mappings": [],
          "thresholds": {
            "mode": "absolute",
            "steps": [
              {
                "color": "green",
                "value": null
              }
            ]
          },
          "decimals": 2,
          "unit": "percent"
        },
        "overrides": []
      },
      "options": {
        "tooltip": {
          "mode": "single",
          "sort": "none"
        },
        "legend": {
          "showLegend": true,
          "displayMode": "table",
          "placement": "right",
          "calcs": [
            "mean",
            "max",
            "last"
          ]
        }
      },
      "targets": [
        {
          "refId": "A",
          "datasource": {
            "type": "grafana",
            "uid": "grafana"
          },
          "queryType": "snapshot",
          "snapshot": [
            {
              "schema": {
                "refId": "A",
                "meta": {
                  "type": "timeseries-many",
                  "custom": {
                    "resultType": "matrix"
                  },
                  "executedQueryString": "Expr: sum by (name) (rate(container_cpu_user_seconds_total{instance=~\".*\",job=~\".*\",image!=\"\", name=~\".*\"}[1m0s]) ) * 100 \nStep: 30s",
                  "preferredVisualisationType": "graph"
                },
                "name": "otm-yopass-1",
                "fields": [
                  {
                    "name": "Time",
                    "type": "time",
                    "typeInfo": {
                      "frame": "time.Time"
                    },
                    "config": {
                      "interval": 30000
                    }
                  },
                  {
                    "name": "Value",
                    "type": "number",
                    "typeInfo": {
                      "frame": "float64"
                    },
                    "labels": {
                      "name": "otm-yopass-1"
                    },
                    "config": {
                      "displayNameFromDS": "otm-yopass-1"
                    }
                  }
                ]
              },
              "data": {
                "values": [
                  [
                    1667822040000,
                    1667822640000,
                    1667822760000,
                    1667822850000,
                    1667822880000,
                    1667823180000,
                    1667823300000
                  ],
                  [
                    0,
                    0,
                    0,
                    0,
                    0,
                    0,
                    0
                  ]
                ]
              }
            },
            {
              "schema": {
                "refId": "A",
                "meta": {
                  "type": "timeseries-many",
                  "custom": {
                    "resultType": "exemplar"
                  },
                  "executedQueryString": "Expr: sum by (name) (rate(container_cpu_user_seconds_total{instance=~\".*\",job=~\".*\",image!=\"\", name=~\".*\"}[1m0s]) ) * 100 \nStep: 30s",
                  "dataTopic": "annotations"
                },
                "name": "exemplar",
                "fields": [
                  {
                    "name": "Time",
                    "type": "time",
                    "typeInfo": {
                      "frame": "time.Time"
                    },
                    "config": {}
                  },
                  {
                    "name": "Value",
                    "type": "number",
                    "typeInfo": {
                      "frame": "float64"
                    },
                    "config": {}
                  }
                ]
              },
              "data": {
                "values": [
                  [],
                  []
                ]
              }
            }
          ]
        }
      ]
    },
    {
      "gridPos": {
        "h": 7,
        "w": 9,
        "x": 15,
        "y": 0
      },
      "id": 5,
      "options": {
        "content": "<table width=\"100%\">\n    <tr>\n      <th width=\"2%\">Panel</th>\n      <td >timeseries @ 8.3.6</td>\n    </tr>\n    <tr>\n      <th>Queries</th>\n      <td>A[prometheus], B[prometheus]</td>\n    </tr>\n    \n    <tr><th>Data</th><td> 1 frames, 2 fields, 7 rows </td></tr>\n    <tr>\n  <th>Annotations</th>\n  <td><span>0</span></td>\n</tr>\n    <tr>\n      <th>Grafana</th>\n      <td>9.2.2 (78a3e64e4f) // Open Source</td>\n    </tr>\n  </table>",
        "mode": "html"
      },
      "title": "Debug info",
      "type": "text"
    },
    {
      "id": 6,
      "title": "Original Panel JSON",
      "type": "text",
      "gridPos": {
        "h": 13,
        "w": 9,
        "x": 15,
        "y": 7
      },
      "options": {
        "content": "{\n  \"id\": 2,\n  \"gridPos\": {\n    \"h\": 7,\n    \"w\": 24,\n    \"x\": 0,\n    \"y\": 3\n  },\n  \"type\": \"timeseries\",\n  \"title\": \"CPU Usage\",\n  \"datasource\": {\n    \"type\": \"prometheus\",\n    \"uid\": \"7eEB2pNVz\"\n  },\n  \"pluginVersion\": \"8.3.6\",\n  \"links\": [],\n  \"fieldConfig\": {\n    \"defaults\": {\n      \"custom\": {\n        \"drawStyle\": \"line\",\n        \"lineInterpolation\": \"linear\",\n        \"barAlignment\": 0,\n        \"lineWidth\": 2,\n        \"fillOpacity\": 10,\n        \"gradientMode\": \"none\",\n        \"spanNulls\": 600000,\n        \"showPoints\": \"never\",\n        \"pointSize\": 5,\n        \"stacking\": {\n          \"mode\": \"none\",\n          \"group\": \"A\"\n        },\n        \"axisPlacement\": \"auto\",\n        \"axisLabel\": \"\",\n        \"axisColorMode\": \"text\",\n        \"scaleDistribution\": {\n          \"type\": \"linear\"\n        },\n        \"axisCenteredZero\": false,\n        \"hideFrom\": {\n          \"tooltip\": false,\n          \"viz\": false,\n          \"legend\": false\n        },\n        \"thresholdsStyle\": {\n          \"mode\": \"off\"\n        }\n      },\n      \"color\": {\n        \"mode\": \"palette-classic\"\n      },\n      \"mappings\": [],\n      \"thresholds\": {\n        \"mode\": \"absolute\",\n        \"steps\": [\n          {\n            \"color\": \"green\",\n            \"value\": null\n          }\n        ]\n      },\n      \"decimals\": 2,\n      \"unit\": \"percent\"\n    },\n    \"overrides\": []\n  },\n  \"options\": {\n    \"tooltip\": {\n      \"mode\": \"single\",\n      \"sort\": \"none\"\n    },\n    \"legend\": {\n      \"showLegend\": true,\n      \"displayMode\": \"table\",\n      \"placement\": \"right\",\n      \"calcs\": [\n        \"mean\",\n        \"max\",\n        \"last\"\n      ]\n    }\n  },\n  \"targets\": [\n    {\n      \"datasource\": {\n        \"type\": \"prometheus\",\n        \"uid\": \"7eEB2pNVz\"\n      },\n      \"exemplar\": true,\n      \"expr\": \"sum by (name) (rate(container_cpu_user_seconds_total{instance=~\\\"$node\\\",job=~\\\"$job\\\",image!=\\\"\\\", name=~\\\"$name\\\"}[$__rate_interval]) ) * 100 \",\n      \"interval\": \"\",\n      \"intervalFactor\": 2,\n      \"legendFormat\": \"{{name}}\",\n      \"metric\": \"cpu\",\n      \"refId\": \"A\",\n      \"step\": 10\n    },\n    {\n      \"datasource\": {\n        \"type\": \"prometheus\",\n        \"uid\": \"7eEB2pNVz\"\n      },\n      \"expr\": \" scalar(machine_cpu_cores{instance=~\\\"$node\\\",job=~\\\"$job\\\"})\",\n      \"hide\": true,\n      \"refId\": \"B\"\n    }\n  ]\n}",
        "mode": "code",
        "code": {
          "language": "json",
          "showLineNumbers": true,
          "showMiniMap": true
        }
      }
    },
    {
      "id": 3,
      "title": "Data from panel above",
      "type": "table",
      "datasource": {
        "type": "datasource",
        "uid": "-- Dashboard --"
      },
      "gridPos": {
        "h": 7,
        "w": 15,
        "x": 0,
        "y": 13
      },
      "options": {
        "showTypeIcons": true
      },
      "targets": [
        {
          "datasource": {
            "type": "datasource",
            "uid": "-- Dashboard --"
          },
          "panelId": 2,
          "withTransforms": true,
          "refId": "A"
        }
      ]
    },
    {
      "id": 7,
      "gridPos": {
        "h": 6,
        "w": 24,
        "x": 0,
        "y": 20
      },
      "type": "table",
      "title": "Annotations",
      "datasource": {
        "type": "datasource",
        "uid": "-- Dashboard --"
      },
      "options": {
        "showTypeIcons": true
      },
      "targets": [
        {
          "datasource": {
            "type": "datasource",
            "uid": "-- Dashboard --"
          },
          "panelId": 2,
          "withTransforms": true,
          "topic": "annotations",
          "refId": "A"
        }
      ]
    }
  ],
  "schemaVersion": 37,
  "title": "Debug: CPU Usage // 2022-11-07 20:12:41",
  "tags": [
    "debug",
    "debug-timeseries"
  ],
  "time": {
    "from": "2022-11-07T11:53:27.427Z",
    "to": "2022-11-07T12:15:26.609Z"
  }
}

@KES777
Copy link
Author

KES777 commented Nov 7, 2022

And when data was drawn.
debug-CPU Usage-2022-11-07 20 16 43.json.txt.zip

@KES777
Copy link
Author

KES777 commented Nov 7, 2022

image

If for this range I increase start time or decrease finish time by one second, then only one line is drawn.

image

image

@KES777
Copy link
Author

KES777 commented Nov 8, 2022

Another example:
image

Key Value
Panel timeseries @ 9.2.0
Grafana 9.2.2 (78a3e64) // Open Source
Panel debug snapshot dashboard
{
  "panels": [
    {
      "id": 2,
      "gridPos": {
        "h": 13,
        "w": 15,
        "x": 0,
        "y": 0
      },
      "type": "timeseries",
      "title": "Reproduced with embedded data",
      "datasource": {
        "type": "grafana",
        "uid": "grafana"
      },
      "pluginVersion": "9.2.0",
      "links": [],
      "description": "",
      "fieldConfig": {
        "defaults": {
          "custom": {
            "drawStyle": "line",
            "lineInterpolation": "linear",
            "barAlignment": 0,
            "lineWidth": 1,
            "fillOpacity": 40,
            "gradientMode": "none",
            "spanNulls": false,
            "showPoints": "never",
            "pointSize": 5,
            "stacking": {
              "mode": "none",
              "group": "A"
            },
            "axisPlacement": "auto",
            "axisLabel": "%util",
            "axisColorMode": "text",
            "scaleDistribution": {
              "type": "linear"
            },
            "axisCenteredZero": false,
            "hideFrom": {
              "tooltip": false,
              "viz": false,
              "legend": false
            },
            "thresholdsStyle": {
              "mode": "off"
            }
          },
          "color": {
            "mode": "palette-classic"
          },
          "mappings": [],
          "thresholds": {
            "mode": "absolute",
            "steps": [
              {
                "color": "green",
                "value": null
              },
              {
                "color": "red",
                "value": 80
              }
            ]
          },
          "links": [],
          "min": 0,
          "unit": "percentunit"
        },
        "overrides": [
          {
            "matcher": {
              "id": "byName",
              "options": "io time"
            },
            "properties": [
              {
                "id": "color",
                "value": {
                  "fixedColor": "#890F02",
                  "mode": "fixed"
                }
              }
            ]
          },
          {
            "matcher": {
              "id": "byType",
              "options": "time"
            },
            "properties": [
              {
                "id": "custom.axisPlacement",
                "value": "hidden"
              }
            ]
          }
        ]
      },
      "options": {
        "tooltip": {
          "mode": "multi",
          "sort": "none"
        },
        "legend": {
          "showLegend": true,
          "displayMode": "table",
          "placement": "bottom",
          "calcs": [
            "mean",
            "lastNotNull",
            "max",
            "min"
          ]
        }
      },
      "targets": [
        {
          "refId": "A",
          "datasource": {
            "type": "grafana",
            "uid": "grafana"
          },
          "queryType": "snapshot",
          "snapshot": [
            {
              "schema": {
                "refId": "A",
                "meta": {
                  "type": "timeseries-many",
                  "custom": {
                    "resultType": "matrix"
                  },
                  "executedQueryString": "Expr: rate(node_disk_io_time_seconds_total{instance=\"sysinfo-exporter:9100\",job=\"office-node\",device=~\"[a-z]+|nvme[0-9]+n[0-9]+|mmcblk[0-9]+\"} [2m15s])\nStep: 2m0s",
                  "preferredVisualisationType": "graph"
                },
                "name": "sda",
                "fields": [
                  {
                    "name": "Time",
                    "type": "time",
                    "typeInfo": {
                      "frame": "time.Time"
                    },
                    "config": {
                      "interval": 120000
                    }
                  },
                  {
                    "name": "Value",
                    "type": "number",
                    "typeInfo": {
                      "frame": "float64"
                    },
                    "labels": {
                      "alias": "sysinfo",
                      "device": "sda",
                      "instance": "sysinfo-exporter:9100",
                      "job": "office-node"
                    },
                    "config": {
                      "displayNameFromDS": "sda"
                    }
                  }
                ]
              },
              "data": {
                "values": [
                  [
                    1667855640000,
                    1667855760000,
                    1667855880000,
                    1667856000000,
                    1667856120000,
                    1667856240000,
                    1667856360000,
                    1667856480000,
                    1667856600000,
                    1667856720000,
                    1667856840000,
                    1667856960000,
                    1667857080000,
                    1667857200000,
                    1667857320000,
                    1667857440000,
                    1667857560000,
                    1667857680000,
                    1667857800000,
                    1667857920000,
                    1667858040000,
                    1667858160000,
                    1667858280000,
                    1667858400000,
                    1667858520000,
                    1667858640000,
                    1667858760000,
                    1667858880000,
                    1667859000000,
                    1667859120000,
                    1667859240000,
                    1667859360000,
                    1667859480000,
                    1667859600000,
                    1667859720000,
                    1667859840000,
                    1667859960000,
                    1667860080000,
                    1667860200000,
                    1667860320000,
                    1667860440000,
                    1667860560000,
                    1667860680000,
                    1667860800000,
                    1667860920000,
                    1667861040000,
                    1667861160000,
                    1667861280000,
                    1667861400000,
                    1667861520000,
                    1667861640000,
                    1667861760000,
                    1667861880000,
                    1667862000000,
                    1667862120000,
                    1667862240000,
                    1667862360000,
                    1667862480000,
                    1667862600000,
                    1667862720000,
                    1667862840000,
                    1667862960000,
                    1667863080000,
                    1667863200000,
                    1667863320000,
                    1667863440000,
                    1667863560000,
                    1667863680000,
                    1667863800000,
                    1667863920000,
                    1667864040000,
                    1667864160000,
                    1667864280000,
                    1667864400000,
                    1667864520000,
                    1667864640000,
                    1667864760000,
                    1667864880000,
                    1667865000000,
                    1667865120000,
                    1667865240000,
                    1667865360000,
                    1667865480000,
                    1667865600000,
                    1667865720000,
                    1667865840000,
                    1667865960000,
                    1667866080000,
                    1667866200000,
                    1667866320000,
                    1667866440000,
                    1667866560000,
                    1667866680000,
                    1667866800000,
                    1667866920000,
                    1667867040000,
                    1667867160000,
                    1667867280000,
                    1667867400000,
                    1667867520000,
                    1667867640000,
                    1667867760000,
                    1667867880000,
                    1667868000000,
                    1667868120000,
                    1667868240000,
                    1667868360000,
                    1667868480000,
                    1667868600000,
                    1667868720000,
                    1667868840000,
                    1667868960000,
                    1667869080000,
                    1667869200000,
                    1667869320000,
                    1667869440000,
                    1667869560000,
                    1667869680000,
                    1667869800000,
                    1667869920000,
                    1667870040000,
                    1667870160000,
                    1667870280000,
                    1667870400000,
                    1667870520000,
                    1667870640000,
                    1667870760000,
                    1667870880000,
                    1667871000000,
                    1667871120000,
                    1667871240000,
                    1667871360000,
                    1667871480000,
                    1667871600000,
                    1667871720000,
                    1667871840000,
                    1667871960000,
                    1667872080000,
                    1667872200000,
                    1667872320000,
                    1667872440000,
                    1667872560000,
                    1667872680000,
                    1667872800000,
                    1667872920000,
                    1667873040000,
                    1667873160000,
                    1667873280000,
                    1667873400000,
                    1667873520000,
                    1667873640000,
                    1667873760000,
                    1667873880000,
                    1667874000000,
                    1667874120000,
                    1667874240000,
                    1667874360000,
                    1667874480000,
                    1667874600000,
                    1667874720000,
                    1667874840000,
                    1667874960000,
                    1667875080000,
                    1667875200000,
                    1667875320000,
                    1667875440000,
                    1667875560000,
                    1667875680000,
                    1667875800000,
                    1667875920000,
                    1667876040000,
                    1667876160000,
                    1667876280000,
                    1667876400000,
                    1667876520000,
                    1667876640000,
                    1667876760000,
                    1667876880000,
                    1667877000000,
                    1667877120000,
                    1667877240000,
                    1667877360000,
                    1667877480000,
                    1667877600000,
                    1667877720000,
                    1667877840000,
                    1667877960000,
                    1667878080000,
                    1667878200000,
                    1667878320000,
                    1667878440000,
                    1667878560000,
                    1667878680000,
                    1667878800000,
                    1667878920000,
                    1667879040000,
                    1667879160000,
                    1667879280000,
                    1667879400000,
                    1667879520000,
                    1667879640000,
                    1667879760000,
                    1667879880000,
                    1667880000000,
                    1667880120000,
                    1667880240000,
                    1667880360000,
                    1667880480000,
                    1667880600000,
                    1667880720000,
                    1667880840000,
                    1667880960000,
                    1667881080000,
                    1667881200000,
                    1667881320000,
                    1667881440000,
                    1667881560000,
                    1667881680000,
                    1667881800000,
                    1667881920000,
                    1667882040000,
                    1667882160000,
                    1667882280000,
                    1667882400000,
                    1667882520000,
                    1667882640000,
                    1667882760000,
                    1667882880000,
                    1667883000000,
                    1667883120000,
                    1667883240000,
                    1667883360000,
                    1667883480000,
                    1667883600000,
                    1667883720000,
                    1667883840000,
                    1667883960000,
                    1667884080000,
                    1667884200000,
                    1667884320000,
                    1667884440000,
                    1667884560000,
                    1667884680000,
                    1667884800000,
                    1667884920000,
                    1667885040000,
                    1667885160000,
                    1667885280000,
                    1667885400000,
                    1667885520000,
                    1667885640000,
                    1667885760000,
                    1667885880000,
                    1667886000000,
                    1667886120000,
                    1667886240000,
                    1667886360000,
                    1667886480000,
                    1667886600000,
                    1667886720000,
                    1667886840000,
                    1667886960000,
                    1667887080000,
                    1667887200000,
                    1667887320000,
                    1667887440000,
                    1667887560000,
                    1667887680000,
                    1667887800000,
                    1667887920000,
                    1667888040000,
                    1667888160000,
                    1667888280000,
                    1667888400000,
                    1667888520000,
                    1667888640000,
                    1667888760000,
                    1667888880000,
                    1667889000000,
                    1667889120000,
                    1667889240000,
                    1667889360000,
                    1667889480000,
                    1667889600000,
                    1667889720000,
                    1667889840000,
                    1667889960000,
                    1667890080000,
                    1667890200000,
                    1667890320000,
                    1667890440000,
                    1667890560000,
                    1667890680000,
                    1667890800000,
                    1667890920000,
                    1667891040000,
                    1667891160000,
                    1667891280000,
                    1667891400000,
                    1667891520000,
                    1667891640000,
                    1667891760000,
                    1667891880000,
                    1667892000000,
                    1667892120000,
                    1667892240000,
                    1667892360000,
                    1667892480000,
                    1667892960000,
                    1667894280000,
                    1667894400000,
                    1667894760000,
                    1667895720000,
                    1667895840000,
                    1667895960000,
                    1667896080000,
                    1667896200000,
                    1667896320000,
                    1667896440000,
                    1667896560000,
                    1667896680000,
                    1667896800000,
                    1667896920000,
                    1667897040000,
                    1667897160000,
                    1667897280000,
                    1667897400000,
                    1667897520000,
                    1667897640000,
                    1667897760000,
                    1667897880000,
                    1667898000000,
                    1667898120000,
                    1667898240000,
                    1667898360000,
                    1667898480000,
                    1667898600000,
                    1667898720000,
                    1667898840000,
                    1667898960000,
                    1667899080000,
                    1667899200000,
                    1667899320000,
                    1667899440000,
                    1667899560000,
                    1667899680000,
                    1667899800000,
                    1667899920000,
                    1667900040000,
                    1667900160000,
                    1667900280000,
                    1667900400000,
                    1667900520000,
                    1667900640000,
                    1667900760000,
                    1667900880000,
                    1667901000000,
                    1667901120000,
                    1667901240000,
                    1667901360000,
                    1667901480000,
                    1667901600000,
                    1667901720000,
                    1667901840000,
                    1667901960000,
                    1667902080000,
                    1667902200000,
                    1667902320000,
                    1667902440000,
                    1667902560000,
                    1667902680000,
                    1667902800000,
                    1667902920000,
                    1667903040000,
                    1667903160000,
                    1667903280000,
                    1667903400000,
                    1667903520000,
                    1667903640000,
                    1667903760000,
                    1667903880000,
                    1667904000000,
                    1667904120000,
                    1667904240000,
                    1667904360000,
                    1667904480000,
                    1667904600000,
                    1667904720000,
                    1667904840000,
                    1667904960000,
                    1667905080000,
                    1667905200000,
                    1667905320000,
                    1667905440000,
                    1667905560000,
                    1667905680000,
                    1667905800000,
                    1667905920000,
                    1667906040000,
                    1667906160000,
                    1667906280000,
                    1667906400000,
                    1667906520000,
                    1667906640000,
                    1667906760000,
                    1667906880000,
                    1667907000000,
                    1667907120000,
                    1667907240000,
                    1667907360000,
                    1667907480000,
                    1667907600000,
                    1667907720000,
                    1667907840000,
                    1667907960000,
                    1667908080000,
                    1667908200000,
                    1667908320000,
                    1667908440000,
                    1667908560000,
                    1667908680000,
                    1667908800000,
                    1667908920000,
                    1667909040000,
                    1667909160000,
                    1667909280000,
                    1667909400000,
                    1667909520000,
                    1667909640000,
                    1667909760000,
                    1667909880000,
                    1667910000000,
                    1667910120000,
                    1667910240000,
                    1667910360000,
                    1667910480000,
                    1667910600000,
                    1667910720000,
                    1667910840000,
                    1667910960000,
                    1667911080000,
                    1667911200000,
                    1667911320000,
                    1667911440000,
                    1667911560000,
                    1667911680000,
                    1667911800000,
                    1667911920000,
                    1667912040000,
                    1667912160000,
                    1667912280000,
                    1667912400000,
                    1667912520000,
                    1667912640000,
                    1667912760000,
                    1667912880000,
                    1667913000000,
                    1667913120000,
                    1667913240000,
                    1667913360000,
                    1667913480000,
                    1667913600000,
                    1667913720000,
                    1667913840000,
                    1667913960000,
                    1667914080000,
                    1667914200000,
                    1667914320000,
                    1667914440000,
                    1667914560000,
                    1667914680000,
                    1667914800000,
                    1667914920000,
                    1667915040000,
                    1667915160000,
                    1667915280000,
                    1667915400000,
                    1667915520000,
                    1667915640000,
                    1667915760000,
                    1667915880000,
                    1667916000000,
                    1667916120000,
                    1667916240000,
                    1667916360000,
                    1667916480000,
                    1667916600000,
                    1667916720000,
                    1667916840000,
                    1667916960000,
                    1667917080000,
                    1667917200000,
                    1667917320000,
                    1667917440000,
                    1667917560000,
                    1667917680000,
                    1667917800000,
                    1667917920000,
                    1667918040000,
                    1667918160000,
                    1667918280000,
                    1667918400000,
                    1667918520000,
                    1667918640000,
                    1667918760000,
                    1667918880000,
                    1667919000000,
                    1667919120000,
                    1667919240000,
                    1667919360000,
                    1667919480000,
                    1667919600000,
                    1667919720000,
                    1667919840000,
                    1667919960000,
                    1667920080000,
                    1667920200000,
                    1667920320000,
                    1667920440000,
                    1667920560000,
                    1667920680000,
                    1667920800000,
                    1667920920000,
                    1667921040000,
                    1667921160000,
                    1667921280000,
                    1667921400000,
                    1667921520000,
                    1667921640000,
                    1667921760000,
                    1667921880000,
                    1667922000000,
                    1667922120000,
                    1667922240000,
                    1667922360000,
                    1667922480000,
                    1667922600000,
                    1667922720000,
                    1667922840000,
                    1667922960000,
                    1667923080000,
                    1667923200000,
                    1667923320000,
                    1667923440000,
                    1667923560000,
                    1667923680000,
                    1667923800000,
                    1667923920000,
                    1667924040000,
                    1667924160000,
                    1667924280000,
                    1667924400000,
                    1667924520000,
                    1667924640000,
                    1667924760000,
                    1667924880000,
                    1667925000000,
                    1667925120000,
                    1667925240000,
                    1667925360000,
                    1667925480000,
                    1667925600000,
                    1667925720000,
                    1667925840000,
                    1667925960000,
                    1667926080000,
                    1667926200000,
                    1667926320000,
                    1667926440000,
                    1667926560000,
                    1667926680000,
                    1667926800000,
                    1667926920000,
                    1667927040000,
                    1667927160000,
                    1667927280000,
                    1667927400000,
                    1667927520000,
                    1667927640000,
                    1667927760000,
                    1667927880000,
                    1667928000000,
                    1667928120000,
                    1667928240000,
                    1667928360000,
                    1667928720000,
                    1667928840000,
                    1667928960000,
                    1667929920000,
                    1667930040000,
                    1667930160000,
                    1667930280000,
                    1667930400000,
                    1667930520000,
                    1667930760000,
                    1667930880000,
                    1667931000000,
                    1667931120000,
                    1667931240000,
                    1667931360000,
                    1667931480000,
                    1667931600000,
                    1667931720000,
                    1667931840000,
                    1667931960000,
                    1667932080000,
                    1667932200000,
                    1667932320000,
                    1667932440000,
                    1667932560000,
                    1667932680000,
                    1667932800000,
                    1667932920000,
                    1667933040000,
                    1667933160000,
                    1667933280000,
                    1667933400000,
                    1667933520000,
                    1667933640000,
                    1667933760000,
                    1667933880000,
                    1667934000000,
                    1667934120000,
                    1667934240000,
                    1667934360000,
                    1667934480000,
                    1667934600000,
                    1667934720000,
                    1667934840000,
                    1667934960000,
                    1667935080000,
                    1667935200000,
                    1667935320000,
                    1667935440000,
                    1667935560000,
                    1667935680000,
                    1667935800000,
                    1667935920000,
                    1667936040000,
                    1667936160000,
                    1667936280000,
                    1667936400000,
                    1667936520000,
                    1667936640000,
                    1667936760000,
                    1667936880000,
                    1667937000000,
                    1667937120000,
                    1667937240000,
                    1667937360000,
                    1667937480000,
                    1667937600000,
                    1667937720000,
                    1667937840000,
                    1667937960000,
                    1667938080000,
                    1667938200000,
                    1667938320000,
                    1667938440000,
                    1667938560000,
                    1667938680000,
                    1667938800000,
                    1667938920000,
                    1667939040000,
                    1667939160000,
                    1667939280000,
                    1667939400000,
                    1667939520000,
                    1667939640000,
                    1667939760000,
                    1667939880000,
                    1667940000000,
                    1667940120000,
                    1667940240000,
                    1667940360000,
                    1667940480000,
                    1667940600000,
                    1667940720000,
                    1667940840000,
                    1667940960000,
                    1667941080000,
                    1667941200000,
                    1667941320000,
                    1667941440000,
                    1667941560000,
                    1667941680000,
                    1667941800000,
                    1667941920000,
                    1667942040000
                  ],
                  [
                    0.03893333333335249,
                    0.0335999999999937,
                    0.030666666666669094,
                    0.032000000000001215,
                    0.032333333333341825,
                    0.03693333333330884,
                    0.03133333333335031,
                    0.03659999999999854,
                    0.03293333333334279,
                    0.032399999999991755,
                    0.035999999999997576,
                    0.057933333333342794,
                    0.030399999999978413,
                    0.03846666666665139,
                    0.03266666666668243,
                    0.03966666666668364,
                    0.09520000000002256,
                    0.05406666666664629,
                    0.03566666666668728,
                    0.033466666666663515,
                    0.03693333333330884,
                    0.034533333333335275,
                    0.03486666666664557,
                    0.036866666666689224,
                    0.04506666666669237,
                    0.038999999999972106,
                    0.07753333333333406,
                    0.032733333333332365,
                    0.038466666666681706,
                    0.03326666666665309,
                    0.03733333333336001,
                    0.03106666666668995,
                    0.032466666666641684,
                    0.030666666666669094,
                    0.03306666666664266,
                    0.039533333333323144,
                    0.03286666666669286,
                    0.03186666666667103,
                    0.03693333333330884,
                    0.03293333333334279,
                    0.038000000000010914,
                    0.03400000000001455,
                    0.03253333333335225,
                    0.039866666666663754,
                    0.03479999999999563,
                    0.037800000000000486,
                    0.032399999999991755,
                    0.032799999999982295,
                    0.03293333333334279,
                    0.030666666666669094,
                    0.03579999999998715,
                    0.03160000000001067,
                    0.030333333333328483,
                    0.029733333333327512,
                    0.03366666666664363,
                    0.04046666666666473,
                    0.031199999999989812,
                    0.033866666666654055,
                    0.08380000000000412,
                    0.05640000000000024,
                    0.0439999999999903,
                    0.03073333333334934,
                    0.033800000000004125,
                    0.0323333333333115,
                    0.032000000000001215,
                    0.03846666666665139,
                    0.032133333333361706,
                    0.029866666666657694,
                    0.029999999999987873,
                    0.030466666666658662,
                    0.039466666666673214,
                    0.03353333333334376,
                    0.03353333333334376,
                    0.04140000000000631,
                    0.031333333333319995,
                    0.03886666666664193,
                    0.030799999999999272,
                    0.030400000000008733,
                    0.03226666666666157,
                    0.0323333333333115,
                    0.03586666666666739,
                    0.03253333333332194,
                    0.03226666666666157,
                    0.029799999999977445,
                    0.03213333333333139,
                    0.04119999999999588,
                    0.03193333333335128,
                    0.03186666666667103,
                    0.04186666666667709,
                    0.03633333333330787,
                    0.0454666666666526,
                    0.033066666666672975,
                    0.0339333333333343,
                    0.033133333333322905,
                    0.030799999999999272,
                    0.038000000000010914,
                    0.03226666666666157,
                    0.03220000000001164,
                    0.03300000000002304,
                    0.02980000000000776,
                    0.04086666666665527,
                    0.03373333333332387,
                    0.030799999999999272,
                    0.038466666666681706,
                    0.03220000000001164,
                    0.038666666666692134,
                    0.033066666666672975,
                    0.03146666666665018,
                    0.030799999999999272,
                    0.032799999999982295,
                    0.03900000000000243,
                    0.03360000000002401,
                    0.03160000000001067,
                    0.030666666666638774,
                    0.03406666666666448,
                    0.038133333333341096,
                    0.03260000000000218,
                    0.030666666666638774,
                    0.03846666666665139,
                    0.03313333333335322,
                    0.03893333333335249,
                    0.03346666666669383,
                    0.03153333333333042,
                    0.030666666666669094,
                    0.03299999999999272,
                    0.038333333333351524,
                    0.030333333333328483,
                    0.03093333333335977,
                    0.031200000000020132,
                    0.03153333333333042,
                    0.039133333333332604,
                    0.03280000000001261,
                    0.03213333333333139,
                    0.039600000000003396,
                    0.03240000000002207,
                    0.038199999999991026,
                    0.03060000000001916,
                    0.03226666666669189,
                    0.03173333333334085,
                    0.032000000000001215,
                    0.037133333333319266,
                    0.03226666666666157,
                    0.03266666666665211,
                    0.03373333333332387,
                    0.03426666666667491,
                    0.037866666666650416,
                    0.03533333333334667,
                    0.03213333333333139,
                    0.03826666666667127,
                    0.0310000000000097,
                    0.0410666666666657,
                    0.031266666666670065,
                    0.034333333333355164,
                    0.03179999999999079,
                    0.032000000000001215,
                    0.03979999999998351,
                    0.0310000000000097,
                    0.030399999999978413,
                    0.02993333333333794,
                    0.032000000000001215,
                    0.03839999999997114,
                    0.03173333333334085,
                    0.03966666666668364,
                    0.03619999999997769,
                    0.03060000000001916,
                    0.03893333333335249,
                    0.03206666666668146,
                    0.03299999999999272,
                    0.031666666666660605,
                    0.034533333333335275,
                    0.038733333333342064,
                    0.03193333333332096,
                    0.03220000000001164,
                    0.03320000000000315,
                    0.03466666666666545,
                    0.038000000000010914,
                    0.030799999999999272,
                    0.03086666666667952,
                    0.041600000000016735,
                    0.03313333333335322,
                    0.03646666666666836,
                    0.03366666666667394,
                    0.033800000000004125,
                    0.03219999999998133,
                    0.03386666666668437,
                    0.037400000000009946,
                    0.03340000000001358,
                    0.0335999999999937,
                    0.03153333333333042,
                    0.031199999999989812,
                    0.038066666666660844,
                    0.034133333333344736,
                    0.03186666666667103,
                    0.038000000000010914,
                    0.03193333333335128,
                    0.03886666666664193,
                    0.033066666666672975,
                    0.03220000000001164,
                    0.03186507341300038,
                    0.03220000000001164,
                    0.03693333333330884,
                    0.03299999999999272,
                    0.03206666666668146,
                    0.032000000000001215,
                    0.03186666666667103,
                    0.03613333333332776,
                    0.03173333333334085,
                    0.031733333333310534,
                    0.04000000000002425,
                    0.03253333333335225,
                    0.038599999999981566,
                    0.03426666666667491,
                    0.03260000000000218,
                    0.03333333333333333,
                    0.03313333333335322,
                    0.03753333333334012,
                    0.032066666666651145,
                    0.0310000000000097,
                    0.030866666666649206,
                    0.029266666666656723,
                    0.03680000000000897,
                    0.03193333333335128,
                    0.03586666666666739,
                    0.03993333333334401,
                    0.032000000000001215,
                    0.038466666666681706,
                    0.03266666666665211,
                    0.031066666666659633,
                    0.03086666666667952,
                    0.031066666666659633,
                    0.03786666666668073,
                    0.032000000000001215,
                    0.03140000000000024,
                    0.030666666666669094,
                    0.03186666666667103,
                    0.03826666666667127,
                    0.03153333333333042,
                    0.0454666666666526,
                    0.039266666666662786,
                    0.03193333333335128,
                    0.03846666666665139,
                    0.03373333333332387,
                    0.03253333333332194,
                    0.03253333333335225,
                    0.032066666666651145,
                    0.03866666666666182,
                    0.035466666666676853,
                    0.03160000000001067,
                    0.030733333333319023,
                    0.03153333333333042,
                    0.039333333333312716,
                    0.03093333333332945,
                    0.05586666666667952,
                    0.039133333333332604,
                    0.03340000000001358,
                    0.038000000000010914,
                    0.03153333333333042,
                    0.03266666666665211,
                    0.0339333333333343,
                    0.03306666666664266,
                    0.038466666666681706,
                    0.03280000000001261,
                    0.02966666666667758,
                    0.03373333333332387,
                    0.03413333333331441,
                    0.03886666666664193,
                    0.0335999999999937,
                    0.059866666666645564,
                    0.03939999999999297,
                    0.033133333333322905,
                    0.039400000000023284,
                    0.03280000000001261,
                    0.03173333333334085,
                    0.031998400079997213,
                    0.032466666666672,
                    0.037800000000000486,
                    0.03533333333334667,
                    0.03093333333332945,
                    0.03226666666666157,
                    0.03186666666667103,
                    0.039266666666662786,
                    0.0335999999999937,
                    0.07553333333332073,
                    0.038799999999991994,
                    0.03299999999999272,
                    0.04726666666668582,
                    0.03333333333333333,
                    0.03160000000001067,
                    0.0301999999999983,
                    0.03153333333333042,
                    0.040533333333344974,
                    0.03219999999998133,
                    0.030133333333318055,
                    0.034199999999994665,
                    0.07486666666666981,
                    0.03626666666665793,
                    0.033466666666663515,
                    0.058866666666654056,
                    0.03933333333334303,
                    0.030599999999988844,
                    0.039200000000012857,
                    0.03266666666668243,
                    0.05253333333333406,
                    0.0355333333333571,
                    0.18073333333334934,
                    0.16533333333333455,
                    0.11320754716980234,
                    0.11019999999998617,
                    1.0411515777548266,
                    0.3546208649967539,
                    0.8392395994735073,
                    0.8459430144271827,
                    0.7133049153118022,
                    0.09473333333335177,
                    0.12826666666666522,
                    0.15719999999995102,
                    0.08079999999996895,
                    0.2251999999999801,
                    0.061266666666657935,
                    0.05926666666661428,
                    0.0394666666666429,
                    0.26746666666664776,
                    0.040066666666643866,
                    0.03186666666667103,
                    0.03586666666669771,
                    0.03073333333334934,
                    0.04733333333333576,
                    0.03326666666671372,
                    0.03293333333331248,
                    0.03733333333329938,
                    0.035066666666656,
                    0.03939999999996265,
                    0.037800000000000486,
                    0.032466666666672,
                    0.036466666666698684,
                    0.0310000000000097,
                    0.033533333333313445,
                    0.0334666666666332,
                    0.03160000000001067,
                    0.03413333333331441,
                    0.03213333333333139,
                    0.03299999999999272,
                    0.03493333333335613,
                    0.03080000000002959,
                    0.03366666666667394,
                    0.03160000000001067,
                    0.0409333333333052,
                    0.03293333333331248,
                    0.03266666666665211,
                    0.035666666666656965,
                    0.030533333333369227,
                    0.033199999999972835,
                    0.03259999999997187,
                    0.0310000000000097,
                    0.033866666666654055,
                    0.03373333333329356,
                    0.0323333333333115,
                    0.033533333333313445,
                    0.03313333333335322,
                    0.039266666666662786,
                    0.03279999999995198,
                    0.04233333333328725,
                    0.035800000000017464,
                    0.03519999999995586,
                    0.03500000000003638,
                    0.03186666666667103,
                    0.032399999999991755,
                    0.03440000000003541,
                    0.05499999999998787,
                    0.032733333333332365,
                    0.030333333333328483,
                    0.03133333333335031,
                    0.18560000000003735,
                    0.03280000000001261,
                    0.03440000000003541,
                    0.03080000000002959,
                    0.037266666666679764,
                    0.03326666666665309,
                    0.03253333333335225,
                    0.03533333333337699,
                    0.03146666666665018,
                    0.03093333333332945,
                    0.0339333333333343,
                    0.031199999999989812,
                    0.03479999999999563,
                    0.030599999999988844,
                    0.03106666666668995,
                    0.03526666666669674,
                    0.031733333333371166,
                    0.03326666666665309,
                    0.03286666666669286,
                    0.054933333333307625,
                    0.0363999999999578,
                    0.0342000000000553,
                    0.038466666666681706,
                    0.03280000000001261,
                    0.04119999999996556,
                    0.0365333333333183,
                    0.03146666666665018,
                    0.03353333333337408,
                    0.03259999999997187,
                    0.03333333333333333,
                    0.04619999999995343,
                    0.031399999999969924,
                    0.035333333333316355,
                    0.030199999999967985,
                    0.07146666666667442,
                    0.04413333333329016,
                    0.03299999999999272,
                    0.03606666666667782,
                    0.03220000000001164,
                    0.03366666666667394,
                    0.03526666666663611,
                    0.03220000000001164,
                    0.034533333333335275,
                    0.030399999999948097,
                    0.03280000000001261,
                    0.034533333333335275,
                    0.031266666666670065,
                    0.03426666666667491,
                    0.031266666666670065,
                    0.07220000000003589,
                    0.0386000000000422,
                    0.03426666666661428,
                    0.037800000000000486,
                    0.03160000000001067,
                    0.03473333333331539,
                    0.03586666666663708,
                    0.03179099255210102,
                    0.0335999999999937,
                    0.03459999999995489,
                    0.03326666666671372,
                    0.03379999999997381,
                    0.03340000000001358,
                    0.03313333333335322,
                    0.031733333333310534,
                    0.06793333333334886,
                    0.038400000000001454,
                    0.03186666666667103,
                    0.035333333333316355,
                    0.032066666666651145,
                    0.030333333333328483,
                    0.036333333333338186,
                    0.032466666666672,
                    0.03579999999995683,
                    0.03253333333335225,
                    0.032399999999991755,
                    0.034866666666675886,
                    0.03166666666669092,
                    0.03586666666669771,
                    0.03153333333333042,
                    0.0694666666666914,
                    0.038133333333341096,
                    0.034199999999994665,
                    0.038400000000001454,
                    0.03459999999995489,
                    0.0363999999999578,
                    0.03706666666669965,
                    0.0365333333333183,
                    0.034999999999975745,
                    0.0323333333333115,
                    0.0311333333333702,
                    0.03353333333337408,
                    0.03153333333333042,
                    0.03406666666663417,
                    0.031199999999989812,
                    0.08206666666665115,
                    0.03606666666667782,
                    0.03080000000002959,
                    0.0365333333333183,
                    0.030866666666709838,
                    0.03180000000005142,
                    0.03226666666669189,
                    0.031599999999950036,
                    0.032733333333332365,
                    0.030666666666669094,
                    0.03266666666665211,
                    0.033066666666672975,
                    0.029866666666627375,
                    0.03313333333329259,
                    0.03093333333332945,
                    0.06886666666669043,
                    0.03719999999999952,
                    0.03533333333337699,
                    0.036933333333339154,
                    0.03193333333335128,
                    0.03286666666669286,
                    0.03299999999999272,
                    0.032399999999991755,
                    0.03586666666669771,
                    0.0318666666666104,
                    0.03313333333335322,
                    0.03526666666663611,
                    0.031133333333309567,
                    0.0335999999999937,
                    0.03220000000001164,
                    0.07133333333331393,
                    0.03626666666665793,
                    0.3903333333333042,
                    0.04193333333332703,
                    0.049333333333379414,
                    0.03400000000001455,
                    0.034533333333335275,
                    0.03253333333335225,
                    0.035066666666656,
                    0.033866666666654055,
                    0.08320000000003347,
                    0.059999999999975746,
                    0.033533333333313445,
                    0.03853333333336195,
                    0.03360000000005433,
                    0.07593333333334158,
                    0.04373333333332994,
                    0.043133333333328965,
                    0.038266666666701595,
                    0.034333333333355164,
                    0.034533333333335275,
                    0.03619999999997769,
                    0.03326666666671372,
                    0.035999999999997576,
                    0.030599999999988844,
                    0.03513333333333624,
                    0.034866666666675886,
                    0.031266666666670065,
                    0.037600000000020374,
                    0.03366666666667394,
                    0.0733999999999772,
                    0.037600000000020374,
                    0.032866666666632224,
                    0.0363999999999578,
                    0.031199999999989812,
                    0.03213333333333139,
                    0.03400000000001455,
                    0.031733333333310534,
                    0.03446666666665502,
                    0.03280000000001261,
                    0.032733333333332365,
                    0.03400000000001455,
                    0.03153333333333042,
                    0.03493333333335613,
                    0.0339333333333343,
                    0.07279999999997623,
                    0.037466666666659876,
                    0.0349333333332955,
                    0.03706666666663902,
                    0.03220000000001164,
                    0.034999999999975745,
                    0.03586666666663708,
                    0.03213333333333139,
                    0.0439999999999903,
                    0.0323333333333115,
                    0.03426666666667491,
                    0.03533333333337699,
                    0.03733333333329938,
                    0.035466666666676853,
                    0.03259999999997187,
                    0.06246666666665988,
                    0.035066666666656,
                    0.03373333333335419,
                    0.03426666666667491,
                    0.03659999999999854,
                    0.0319999999999709,
                    0.034333333333355164,
                    0.03106666666668995,
                    0.03346666666669383,
                    0.03333333333333333,
                    0.03586666666669771,
                    0.034533333333335275,
                    0.03073333333334934,
                    0.03413333333331441,
                    0.032399999999991755,
                    0.07993333333336826,
                    0.044800000000032016,
                    0.03513333333333624,
                    0.039266666666662786,
                    0.03160000000001067,
                    0.03866666666666182,
                    0.03619999999997769,
                    0.03093333333332945,
                    0.03520000000001649,
                    0.11613333333334594,
                    0.04086666666662495,
                    0.03606666666661719,
                    0.035066666666656,
                    0.03880000000002231,
                    0.6729105802469136,
                    0.037733333333333265,
                    0.03280000000000006,
                    0.21006666666666643,
                    0.02900000000000015,
                    0.027066666666666114,
                    0.017533333333333682,
                    0.026200000000000046,
                    0.03599999999999947,
                    0.47206666666666675,
                    0.00613333333333325,
                    0.007266666666666547,
                    0.007533333333333303,
                    0.018266666666666726,
                    0.007399999999999807,
                    0.010066666666666653,
                    0.00693333333333328,
                    0.007266666666666547,
                    0.008066666666666578,
                    0.014400000000000072,
                    0.007333333333333295,
                    0.007400000000000044,
                    0.007933333333333318,
                    0.007666666666666562,
                    0.007333333333333295,
                    0.007666666666666562,
                    0.007000000000000029,
                    0.00853333333333334,
                    0.009066666666666853,
                    0.007666666666666562,
                    0.00879999999999986,
                    0.00946666666666663,
                    0.006666666666666762,
                    0.007333333333333295,
                    0.006533333333333265,
                    0.007133927827318898,
                    0.007866666666666806,
                    0.007733333333333311,
                    0.007533333333333303,
                    0.008200000000000074,
                    0.008000000000000066,
                    0.007333333333333533,
                    0.008733333333333348,
                    0.00786666666666657,
                    0.007133333333333288,
                    0.008066666666666578,
                    0.008133333333333326,
                    0.006600000000000013,
                    0.007733333333333311,
                    0.007866666666666806,
                    0.007333333333333533,
                    0.0068000000000000204,
                    0.0071999999999997994,
                    0.007333333333333295,
                    0.008200000000000074,
                    0.007933333333333318,
                    0.00693333333333328,
                    0.007733333333333311,
                    0.008666666666666838,
                    0.0071999999999997994,
                    0.008000000000000304,
                    0.006866666666666769,
                    0.006466666666666754,
                    0.007799999999999822,
                    0.007599999999999814,
                    0.007666666666666325,
                    0.009000000000000341,
                    0.007799999999999822,
                    0.007399999999999807,
                    0.007866666666666333,
                    0.007866666666666806,
                    0.007333333333333295,
                    0.0081333333333338,
                    0.008333333333333333,
                    0.007799999999999822,
                    0.0070666666666667766,
                    0.007399999999999807,
                    0.007600000000000288,
                    0.008066666666666814,
                    0.007533333333333303,
                    0.0074000000000002805,
                    0.007333333333333295,
                    0.0074666666666667915,
                    0.007133333333333288,
                    0.006999999999999792,
                    0.008600000000000326,
                    0.006333333333333258,
                    0.007799999999999822,
                    0.008199999999999838,
                    0.006666666666666762,
                    0.006733333333333273,
                    0.007733333333333311,
                    0.008000000000000304,
                    0.006599999999999776,
                    0.006999999999999792,
                    0.0070000000000002656,
                    0.008333333333333333,
                    0.006533333333333265,
                    0.00693333333333328,
                    0.006799999999999784,
                    0.0074666666666667915,
                    0.0074666666666667915,
                    0.01186666666666696,
                    0.007733333333333311
                  ]
                ]
              }
            },
            {
              "schema": {
                "refId": "A",
                "meta": {
                  "type": "timeseries-many",
                  "custom": {
                    "resultType": "matrix"
                  },
                  "executedQueryString": "Expr: rate(node_disk_io_time_seconds_total{instance=\"sysinfo-exporter:9100\",job=\"office-node\",device=~\"[a-z]+|nvme[0-9]+n[0-9]+|mmcblk[0-9]+\"} [2m15s])\nStep: 2m0s",
                  "preferredVisualisationType": "graph"
                },
                "name": "sdb",
                "fields": [
                  {
                    "name": "Time",
                    "type": "time",
                    "typeInfo": {
                      "frame": "time.Time"
                    },
                    "config": {
                      "interval": 120000
                    }
                  },
                  {
                    "name": "Value",
                    "type": "number",
                    "typeInfo": {
                      "frame": "float64"
                    },
                    "labels": {
                      "alias": "sysinfo",
                      "device": "sdb",
                      "instance": "sysinfo-exporter:9100",
                      "job": "office-node"
                    },
                    "config": {
                      "displayNameFromDS": "sdb"
                    }
                  }
                ]
              },
              "data": {
                "values": [
                  [
                    1667928000000,
                    1667928120000,
                    1667928240000,
                    1667928360000,
                    1667928720000,
                    1667928840000,
                    1667928960000,
                    1667929920000,
                    1667930040000,
                    1667930160000,
                    1667930280000,
                    1667930400000,
                    1667930520000,
                    1667930760000,
                    1667930880000,
                    1667931000000,
                    1667931120000,
                    1667931240000,
                    1667931360000,
                    1667931480000,
                    1667931600000,
                    1667931720000,
                    1667931840000,
                    1667931960000,
                    1667932080000,
                    1667932200000,
                    1667932320000,
                    1667932440000,
                    1667932560000,
                    1667932680000,
                    1667932800000,
                    1667932920000,
                    1667933040000,
                    1667933160000,
                    1667933280000,
                    1667933400000,
                    1667933520000,
                    1667933640000,
                    1667933760000,
                    1667933880000,
                    1667934000000,
                    1667934120000,
                    1667934240000,
                    1667934360000,
                    1667934480000,
                    1667934600000,
                    1667934720000,
                    1667934840000,
                    1667934960000,
                    1667935080000,
                    1667935200000,
                    1667935320000,
                    1667935440000,
                    1667935560000,
                    1667935680000,
                    1667935800000,
                    1667935920000,
                    1667936040000,
                    1667936160000,
                    1667936280000,
                    1667936400000,
                    1667936520000,
                    1667936640000,
                    1667936760000,
                    1667936880000,
                    1667937000000,
                    1667937120000,
                    1667937240000,
                    1667937360000,
                    1667937480000,
                    1667937600000,
                    1667937720000,
                    1667937840000,
                    1667937960000,
                    1667938080000,
                    1667938200000,
                    1667938320000,
                    1667938440000,
                    1667938560000,
                    1667938680000,
                    1667938800000,
                    1667938920000,
                    1667939040000,
                    1667939160000,
                    1667939280000,
                    1667939400000,
                    1667939520000,
                    1667939640000,
                    1667939760000,
                    1667939880000,
                    1667940000000,
                    1667940120000,
                    1667940240000,
                    1667940360000,
                    1667940480000,
                    1667940600000,
                    1667940720000,
                    1667940840000,
                    1667940960000,
                    1667941080000,
                    1667941200000,
                    1667941320000,
                    1667941440000,
                    1667941560000,
                    1667941680000,
                    1667941800000,
                    1667941920000,
                    1667942040000
                  ],
                  [
                    0.00013333333333333345,
                    0,
                    0,
                    0,
                    0.00006666666666666672,
                    0,
                    0,
                    0.02173333333333337,
                    0.006199999999999998,
                    0.0064000000000000055,
                    0.00686666666666665,
                    0.005466666666666657,
                    0.006199999999999998,
                    0.17683805629629626,
                    0.05773333333333331,
                    0.04993333333333325,
                    0.07279999999999992,
                    0.09606666666666659,
                    0.06326666666666654,
                    0.07146666666666661,
                    0.0799333333333332,
                    0.07013333333333355,
                    0.06400000000000006,
                    0.05693333333333328,
                    0.061666666666666474,
                    0.07573333333333351,
                    0.06300000000000001,
                    0.062666666666667,
                    0.15746666666666678,
                    0.06000000000000038,
                    0.07800000000000011,
                    0.06313333333333351,
                    0.06540000000000011,
                    0.07960000000000017,
                    0.06099999999999994,
                    0.07606666666666655,
                    0.06280000000000001,
                    0.06026666666666643,
                    0.05633333333333373,
                    0.05807150595883053,
                    0.07486666666666603,
                    0.06193333333333347,
                    0.06066666666666644,
                    0.17393333333333297,
                    0.05746666666666632,
                    0.07860000000000014,
                    0.06266666666666747,
                    0.06766666666666671,
                    0.056200000000000236,
                    0.061800000000000445,
                    0.08393333333333336,
                    0.054733333333333196,
                    0.059133333333333364,
                    0.055266666666666235,
                    0.05706666666666725,
                    0.07353333333333296,
                    0.058600000000000325,
                    0.05566666666666625,
                    0.12580000000000002,
                    0.05746666666666632,
                    0.0771333333333331,
                    0.05840000000000032,
                    0.06093333333333343,
                    0.056733333333333275,
                    0.06106666666666646,
                    0.07399999999999997,
                    0.06280000000000048,
                    0.057133333333333286,
                    0.05373333333333316,
                    0.058733333333333346,
                    0.07953333333333319,
                    0.06573333333333267,
                    0.06313333333333351,
                    0.06986666666666679,
                    0.05866666666666636,
                    0.0796666666666662,
                    0.06093333333333438,
                    0.05813333333333427,
                    0.057933333333333316,
                    0.05373333333333221,
                    0.07433333333333204,
                    0.060466666666667376,
                    0.06286666666666557,
                    0.05799999999999841,
                    0.056133333333334194,
                    0.07673333333333403,
                    0.057733333333332366,
                    0.057933333333333316,
                    0.05340000000000108,
                    0.06059999999999945,
                    0.07139999999999987,
                    0.06266666666666651,
                    0.058333333333333334,
                    0.055799999999999274,
                    0.0627333333333335,
                    0.07540000000000001,
                    0.06280000000000048,
                    0.056999999999999315,
                    0.05526666666666718,
                    0.0561333333333323,
                    0.07440000000000092,
                    0.07493333333333302,
                    0.06733333333333273,
                    0.06306666666666653,
                    0.06333333333333448,
                    0.07466666666666508,
                    0.08039999999999926,
                    0.05720000000000027
                  ]
                ]
              }
            }
          ]
        }
      ]
    },
    {
      "gridPos": {
        "h": 7,
        "w": 9,
        "x": 15,
        "y": 0
      },
      "id": 5,
      "options": {
        "content": "<table width=\"100%\">\n    <tr>\n      <th width=\"2%\">Panel</th>\n      <td >timeseries @ 9.2.0</td>\n    </tr>\n    <tr>\n      <th>Queries</th>\n      <td>A[prometheus]</td>\n    </tr>\n    \n    <tr><th>Data</th><td> 2 frames, 4 fields, 797 rows </td></tr>\n    \n    <tr>\n      <th>Grafana</th>\n      <td>9.2.2 (78a3e64e4f) // Open Source</td>\n    </tr>\n  </table>",
        "mode": "html"
      },
      "title": "Debug info",
      "type": "text"
    },
    {
      "id": 6,
      "title": "Original Panel JSON",
      "type": "text",
      "gridPos": {
        "h": 13,
        "w": 9,
        "x": 15,
        "y": 7
      },
      "options": {
        "content": "{\n  \"id\": 127,\n  \"gridPos\": {\n    \"h\": 12,\n    \"w\": 12,\n    \"x\": 0,\n    \"y\": 57\n  },\n  \"type\": \"timeseries\",\n  \"title\": \"I/O Utilization\",\n  \"datasource\": {\n    \"type\": \"prometheus\",\n    \"uid\": \"7eEB2pNVz\"\n  },\n  \"pluginVersion\": \"9.2.0\",\n  \"links\": [],\n  \"description\": \"\",\n  \"fieldConfig\": {\n    \"defaults\": {\n      \"custom\": {\n        \"drawStyle\": \"line\",\n        \"lineInterpolation\": \"linear\",\n        \"barAlignment\": 0,\n        \"lineWidth\": 1,\n        \"fillOpacity\": 40,\n        \"gradientMode\": \"none\",\n        \"spanNulls\": false,\n        \"showPoints\": \"never\",\n        \"pointSize\": 5,\n        \"stacking\": {\n          \"mode\": \"none\",\n          \"group\": \"A\"\n        },\n        \"axisPlacement\": \"auto\",\n        \"axisLabel\": \"%util\",\n        \"axisColorMode\": \"text\",\n        \"scaleDistribution\": {\n          \"type\": \"linear\"\n        },\n        \"axisCenteredZero\": false,\n        \"hideFrom\": {\n          \"tooltip\": false,\n          \"viz\": false,\n          \"legend\": false\n        },\n        \"thresholdsStyle\": {\n          \"mode\": \"off\"\n        }\n      },\n      \"color\": {\n        \"mode\": \"palette-classic\"\n      },\n      \"mappings\": [],\n      \"thresholds\": {\n        \"mode\": \"absolute\",\n        \"steps\": [\n          {\n            \"color\": \"green\",\n            \"value\": null\n          },\n          {\n            \"color\": \"red\",\n            \"value\": 80\n          }\n        ]\n      },\n      \"links\": [],\n      \"min\": 0,\n      \"unit\": \"percentunit\"\n    },\n    \"overrides\": [\n      {\n        \"matcher\": {\n          \"id\": \"byName\",\n          \"options\": \"io time\"\n        },\n        \"properties\": [\n          {\n            \"id\": \"color\",\n            \"value\": {\n              \"fixedColor\": \"#890F02\",\n              \"mode\": \"fixed\"\n            }\n          }\n        ]\n      },\n      {\n        \"matcher\": {\n          \"id\": \"byType\",\n          \"options\": \"time\"\n        },\n        \"properties\": [\n          {\n            \"id\": \"custom.axisPlacement\",\n            \"value\": \"hidden\"\n          }\n        ]\n      }\n    ]\n  },\n  \"options\": {\n    \"tooltip\": {\n      \"mode\": \"multi\",\n      \"sort\": \"none\"\n    },\n    \"legend\": {\n      \"showLegend\": true,\n      \"displayMode\": \"table\",\n      \"placement\": \"bottom\",\n      \"calcs\": [\n        \"mean\",\n        \"lastNotNull\",\n        \"max\",\n        \"min\"\n      ]\n    }\n  },\n  \"targets\": [\n    {\n      \"datasource\": {\n        \"type\": \"prometheus\",\n        \"uid\": \"7eEB2pNVz\"\n      },\n      \"expr\": \"rate(node_disk_io_time_seconds_total{instance=\\\"$node\\\",job=\\\"$job\\\",device=~\\\"$diskdevices\\\"} [$__rate_interval])\",\n      \"format\": \"time_series\",\n      \"hide\": false,\n      \"interval\": \"\",\n      \"intervalFactor\": 1,\n      \"legendFormat\": \"{{device}}\",\n      \"refId\": \"A\",\n      \"step\": 240\n    }\n  ]\n}",
        "mode": "code",
        "code": {
          "language": "json",
          "showLineNumbers": true,
          "showMiniMap": true
        }
      }
    },
    {
      "id": 3,
      "title": "Data from panel above",
      "type": "table",
      "datasource": {
        "type": "datasource",
        "uid": "-- Dashboard --"
      },
      "gridPos": {
        "h": 7,
        "w": 15,
        "x": 0,
        "y": 13
      },
      "options": {
        "showTypeIcons": true
      },
      "targets": [
        {
          "datasource": {
            "type": "datasource",
            "uid": "-- Dashboard --"
          },
          "panelId": 2,
          "withTransforms": true,
          "refId": "A"
        }
      ]
    }
  ],
  "schemaVersion": 37,
  "title": "Debug: I/O Utilization // 2022-11-08 22:15:35",
  "tags": [
    "debug",
    "debug-timeseries"
  ],
  "time": {
    "from": "2022-11-07T21:15:35.839Z",
    "to": "2022-11-08T21:15:35.840Z"
  }
}

image

Key Value
Panel timeseries @ 9.2.0
Grafana 9.2.2 (78a3e64) // Open Source
Panel debug snapshot dashboard
{
  "panels": [
    {
      "id": 2,
      "gridPos": {
        "h": 13,
        "w": 15,
        "x": 0,
        "y": 0
      },
      "type": "timeseries",
      "title": "Reproduced with embedded data",
      "datasource": {
        "type": "grafana",
        "uid": "grafana"
      },
      "pluginVersion": "9.2.0",
      "links": [],
      "description": "",
      "fieldConfig": {
        "defaults": {
          "custom": {
            "drawStyle": "line",
            "lineInterpolation": "linear",
            "barAlignment": 0,
            "lineWidth": 1,
            "fillOpacity": 40,
            "gradientMode": "none",
            "spanNulls": false,
            "showPoints": "never",
            "pointSize": 5,
            "stacking": {
              "mode": "none",
              "group": "A"
            },
            "axisPlacement": "auto",
            "axisLabel": "%util",
            "axisColorMode": "text",
            "scaleDistribution": {
              "type": "linear"
            },
            "axisCenteredZero": false,
            "hideFrom": {
              "tooltip": false,
              "viz": false,
              "legend": false
            },
            "thresholdsStyle": {
              "mode": "off"
            }
          },
          "color": {
            "mode": "palette-classic"
          },
          "mappings": [],
          "thresholds": {
            "mode": "absolute",
            "steps": [
              {
                "color": "green",
                "value": null
              },
              {
                "color": "red",
                "value": 80
              }
            ]
          },
          "links": [],
          "min": 0,
          "unit": "percentunit"
        },
        "overrides": [
          {
            "matcher": {
              "id": "byName",
              "options": "io time"
            },
            "properties": [
              {
                "id": "color",
                "value": {
                  "fixedColor": "#890F02",
                  "mode": "fixed"
                }
              }
            ]
          },
          {
            "matcher": {
              "id": "byType",
              "options": "time"
            },
            "properties": [
              {
                "id": "custom.axisPlacement",
                "value": "hidden"
              }
            ]
          }
        ]
      },
      "options": {
        "tooltip": {
          "mode": "multi",
          "sort": "none"
        },
        "legend": {
          "showLegend": true,
          "displayMode": "table",
          "placement": "bottom",
          "calcs": [
            "mean",
            "lastNotNull",
            "max",
            "min"
          ]
        }
      },
      "targets": [
        {
          "refId": "A",
          "datasource": {
            "type": "grafana",
            "uid": "grafana"
          },
          "queryType": "snapshot",
          "snapshot": []
        }
      ]
    },
    {
      "gridPos": {
        "h": 7,
        "w": 9,
        "x": 15,
        "y": 0
      },
      "id": 5,
      "options": {
        "content": "<table width=\"100%\">\n    <tr>\n      <th width=\"2%\">Panel</th>\n      <td >timeseries @ 9.2.0</td>\n    </tr>\n    <tr>\n      <th>Queries</th>\n      <td>A[prometheus]</td>\n    </tr>\n    \n    <tr><th>Data</th><td> 0 frames, 0 fields, 0 rows </td></tr>\n    \n    <tr>\n      <th>Grafana</th>\n      <td>9.2.2 (78a3e64e4f) // Open Source</td>\n    </tr>\n  </table>",
        "mode": "html"
      },
      "title": "Debug info",
      "type": "text"
    },
    {
      "id": 6,
      "title": "Original Panel JSON",
      "type": "text",
      "gridPos": {
        "h": 13,
        "w": 9,
        "x": 15,
        "y": 7
      },
      "options": {
        "content": "{\n  \"id\": 127,\n  \"gridPos\": {\n    \"h\": 12,\n    \"w\": 12,\n    \"x\": 0,\n    \"y\": 57\n  },\n  \"type\": \"timeseries\",\n  \"title\": \"I/O Utilization\",\n  \"datasource\": {\n    \"type\": \"prometheus\",\n    \"uid\": \"7eEB2pNVz\"\n  },\n  \"pluginVersion\": \"9.2.0\",\n  \"links\": [],\n  \"description\": \"\",\n  \"fieldConfig\": {\n    \"defaults\": {\n      \"custom\": {\n        \"drawStyle\": \"line\",\n        \"lineInterpolation\": \"linear\",\n        \"barAlignment\": 0,\n        \"lineWidth\": 1,\n        \"fillOpacity\": 40,\n        \"gradientMode\": \"none\",\n        \"spanNulls\": false,\n        \"showPoints\": \"never\",\n        \"pointSize\": 5,\n        \"stacking\": {\n          \"mode\": \"none\",\n          \"group\": \"A\"\n        },\n        \"axisPlacement\": \"auto\",\n        \"axisLabel\": \"%util\",\n        \"axisColorMode\": \"text\",\n        \"scaleDistribution\": {\n          \"type\": \"linear\"\n        },\n        \"axisCenteredZero\": false,\n        \"hideFrom\": {\n          \"tooltip\": false,\n          \"viz\": false,\n          \"legend\": false\n        },\n        \"thresholdsStyle\": {\n          \"mode\": \"off\"\n        }\n      },\n      \"color\": {\n        \"mode\": \"palette-classic\"\n      },\n      \"mappings\": [],\n      \"thresholds\": {\n        \"mode\": \"absolute\",\n        \"steps\": [\n          {\n            \"color\": \"green\",\n            \"value\": null\n          },\n          {\n            \"color\": \"red\",\n            \"value\": 80\n          }\n        ]\n      },\n      \"links\": [],\n      \"min\": 0,\n      \"unit\": \"percentunit\"\n    },\n    \"overrides\": [\n      {\n        \"matcher\": {\n          \"id\": \"byName\",\n          \"options\": \"io time\"\n        },\n        \"properties\": [\n          {\n            \"id\": \"color\",\n            \"value\": {\n              \"fixedColor\": \"#890F02\",\n              \"mode\": \"fixed\"\n            }\n          }\n        ]\n      },\n      {\n        \"matcher\": {\n          \"id\": \"byType\",\n          \"options\": \"time\"\n        },\n        \"properties\": [\n          {\n            \"id\": \"custom.axisPlacement\",\n            \"value\": \"hidden\"\n          }\n        ]\n      }\n    ]\n  },\n  \"options\": {\n    \"tooltip\": {\n      \"mode\": \"multi\",\n      \"sort\": \"none\"\n    },\n    \"legend\": {\n      \"showLegend\": true,\n      \"displayMode\": \"table\",\n      \"placement\": \"bottom\",\n      \"calcs\": [\n        \"mean\",\n        \"lastNotNull\",\n        \"max\",\n        \"min\"\n      ]\n    }\n  },\n  \"targets\": [\n    {\n      \"datasource\": {\n        \"type\": \"prometheus\",\n        \"uid\": \"7eEB2pNVz\"\n      },\n      \"expr\": \"rate(node_disk_io_time_seconds_total{instance=\\\"$node\\\",job=\\\"$job\\\",device=~\\\"$diskdevices\\\"} [$__rate_interval])\",\n      \"format\": \"time_series\",\n      \"hide\": false,\n      \"interval\": \"\",\n      \"intervalFactor\": 1,\n      \"legendFormat\": \"{{device}}\",\n      \"refId\": \"A\",\n      \"step\": 240\n    }\n  ]\n}",
        "mode": "code",
        "code": {
          "language": "json",
          "showLineNumbers": true,
          "showMiniMap": true
        }
      }
    },
    {
      "id": 3,
      "title": "Data from panel above",
      "type": "table",
      "datasource": {
        "type": "datasource",
        "uid": "-- Dashboard --"
      },
      "gridPos": {
        "h": 7,
        "w": 15,
        "x": 0,
        "y": 13
      },
      "options": {
        "showTypeIcons": true
      },
      "targets": [
        {
          "datasource": {
            "type": "datasource",
            "uid": "-- Dashboard --"
          },
          "panelId": 2,
          "withTransforms": true,
          "refId": "A"
        }
      ]
    }
  ],
  "schemaVersion": 37,
  "title": "Debug: I/O Utilization // 2022-11-08 22:14:43",
  "tags": [
    "debug",
    "debug-timeseries"
  ],
  "time": {
    "from": "2022-11-08T13:36:40.374Z",
    "to": "2022-11-08T21:14:03.536Z"
  }
}

@leeoniya leeoniya removed the needs more info Issue needs more information, like query results, dashboard or panel json, grafana version etc label Nov 9, 2022
@leeoniya
Copy link
Contributor

leeoniya commented Nov 9, 2022

thank you, i'll try to investigate in the next few days, but may be early next week (currently out of office).

@leeoniya leeoniya added the needs investigation for unconfirmed bugs. use type/bug for confirmed bugs, even if they "need" more investigating label Nov 9, 2022
@leeoniya leeoniya self-assigned this Nov 9, 2022
@leeoniya
Copy link
Contributor

leeoniya commented Nov 22, 2022

i see all the data in your snapshot from #57995 (comment) (i set Show points: Always and increased the point size):

image

the gap you see above is because you have set a threshold for connecting nulls to < 10m ("spanNulls": 600000) and those two datapoints are exactly 10m apart:

image

if you set it to 11m or Always, then they will connect:

image

another thing to keep in mind is that when your datasource returns a field.config.interval on the Time field, we insert null values into time gaps greater than this interval. so if you have timestamps 1,2,3,6 and data 0,0,0,0, with interval: 1, we will treat it as 1,2,3,4,5,6 + data 0,0,0,null,null,0 and render a gap between 3 and 6. currently your datasource returns "interval": 30000, which means there are gaps inserted into every 30s time span without data.

            "fields": [
              {
                "config": {
                  "interval": 30000
                },

when i import your snapshots from #57995 (comment) i get:

image

and this, because there is actually no data to show:

image

it seems like the datasource is returning no data or partial data when you zoom in? can you verify in the chrome DevTools Network tab that you are actually getting back the data you expect?

@KES777
Copy link
Author

KES777 commented Dec 6, 2022

Chrome:
image

image

image

image

image

image

image

Seems no data returned at all.

@leeoniya leeoniya removed their assignment Dec 6, 2022
@KES777
Copy link
Author

KES777 commented Dec 25, 2022

One important note: I used TimescaleDB. It looks its query rewriter has some bugs.
Today I switched to VictoriaMetrics and data looks like next:
TimescaleDB
image

VictoriaMetrics:
image

Copy link
Contributor

This issue has been automatically marked as stale because it has not had activity in the last year. It will be closed in 30 days if no further activity occurs. Please feel free to leave a comment if you believe the issue is still relevant. Thank you for your contributions!

@github-actions github-actions bot added the stale Issue with no recent activity label Mar 15, 2024
@KES777
Copy link
Author

KES777 commented Mar 15, 2024

ping

@leeoniya
Copy link
Contributor

i think we've excluded the panels/viz as the source of the issue.

im not sure where we are with this now, since it involves three different datasources (prom, victoriametrics, and timescale (pg)). we have different teams that work on prometheus and timescale/pg datadources, so we gotta narrow down where to route this.

@leeoniya leeoniya removed the stale Issue with no recent activity label Mar 15, 2024
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment
Labels
datasource/Prometheus effort/medium needs investigation for unconfirmed bugs. use type/bug for confirmed bugs, even if they "need" more investigating prio/medium Important over the long term, but may not be staffed and/or may need multiple releases to complete.
Projects
None yet
Development

No branches or pull requests

5 participants