Project

General

Profile

Actions
Copy link

Issue #1011

open

Export data naar Azure tbv PBI

Added by Richard ten Cate 3 months ago. Updated 18 days ago.

Status:
Testing
Priority:
High
Assignee:
Richard ten Cate
Start date:
09/26/2025
Due date:
% Done:

0%

Estimated time:

Description

Naast de huidige export van alleen nieuwe records ook een full export per klant met mogelijkheid om iedere 15 minuten of 30 minuten de export te laten lopen

Files

Download all files
clipboard-202511241435-syv5k.png (13.7 KB) clipboard-202511241435-syv5k.png Bart Nijbroek, 11/24/2025 01:35 PM
clipboard-202511241442-ihyja.png (5.36 KB) clipboard-202511241442-ihyja.png Bart Nijbroek, 11/24/2025 01:42 PM
clipboard-202511241443-n9qew.png (3.94 KB) clipboard-202511241443-n9qew.png Bart Nijbroek, 11/24/2025 01:43 PM
Actions
Copy link
 #1

Updated by Richard ten Cate about 1 month ago

  • Status changed from New to Assigned
  • Priority changed from Normal to High

Export van csv naar BLOB van de huidige tabellen (niet de incrementele data maar de hele tabel), met optie om ieder kwartier dit te doen

Actions
Copy link
 #2

Updated by Richard ten Cate about 1 month ago

  • Assignee set to Aaltines Kruise
Actions
Copy link
 #3

Updated by Aaltines Kruise about 1 month ago

  • Status changed from Assigned to In Progress

Ik heb PasReform locaal niet meer draaien. Dit kost me op dit moment wat te veel tijd en probeer dat uit te stellen.

Volgens mij kan je gewoon de query's ook aanmaken zonder de between in pqm_dwh_file_exports. In java wordt wel elke keer de last run gezet maar doordat het between stuk er niet bij zit wordt alles geexporteerrd.

Let op dat je de queries aanmaakt in pqm_dwh_file_exports zonder id in de insert op te nemen. Deze wordt automatisch gevuld via een sequence.

Ik heb ook de export frequentie aangepast. De taak wordt elk kwartier aangeroepen en je moet nu i.p.v. uren minuten opgeven in het veld interval_hours.

Actions
Copy link
 #4

Updated by Aaltines Kruise about 1 month ago

  • Status changed from In Progress to Testing

Zie opmerkingen.

Actions
Copy link Download all files
 #5

Updated by Bart Nijbroek 18 days ago

Getest met:

pqm_datawarehouse_jobs:

pqm_dwh_file_exports:

Export van tabellen gaat goed. Bedoeling is dat het bestand wordt geupdate/vervangen voor het nieuwe bestand.
Momenteel wordt de datum-tijd van uploaden achter de bestandsnaam gevoegd (zie foto). Hierdoor worden er steeds nieuwe bestanden gecreëerd in de blob. We moeten richting èèn bestand in de blob dat ieder kwartier wordt vervangen door het nieuwe bestand zoals dat ook in OPS gebeurd.

Actions
Copy link

Also available in: Atom PDF