Telefonszámunk: 1-472-0679

PQ 50 mill. sor

Kezdőlap Fórumok Excel témák PQ 50 mill. sor

Ennek a témakörnek tartalma 2 hozzászólás, 2 résztvevő. Utolsó frissítés:  delila 3 hete telt el a bejegyzés óta.

3 bejegyzés megtekintése - 1-3 / 3
  • Szerző
    Bejegyzés
  • #5306

    delila
    Résztvevő

    Remélem, jó helyre írok.
    Egy ismerősömnek kb. 50 db *.csv és *.txt fájlban (azonos mappában) van cca. 1.000.000 sora. Ezeknek a fele magyar mondatok és kifejezések, másik fele angol. 1-1 fájlban 1 nyelvű mondatok vannak.
    Rendezni szeretné PQ-ben úgy, hogy a két nyelv mondatai egymás mellett legyenek láthatóak.

    Talált egy linket, https://www.masterdataanalysis.com/ms-excel/analyzing-50-million-records-excel/, de ez nem az igazi.

    Meg lehet egyáltalán oldani?

    Köszi. 🙂

    #5307

    horvimi
    Kulcsmester

    Szia!

    Ha jól értem, akkor az eredmény egy kb. 25 millió soros, két oszlopos tábla lenne?
    Hát, megnézném, hogy az Excel PQ mit lép erre.

    A Power Query a lekérdezés szerkesztésekor csak 1000 sort mutat, az összes rekordot a betöltés után lehet látni.
    Excel sheet-re nyilván nem tölthető be, csak az adatmodellbe, de onnan kiszedni… De hová is?

    Ha elég a látvány, akkor a fenti linken lévő dolog egy kis módosítással működhet:
    1. Egyik mappába a magyar csv-k, másik mappába az angol CSV-k
    2. A darabszám és a sorrend ugyanaz, legjobb besorszámozni őket.
    3 Mindkettőhöz csinálni egy összefűző lekérdezést (Mappából, ahogy a fenti linken), csak kapcsolattal
    4. A lekérdezések adjanak egyedi kulcsot a beolvasott rekordokhoz (Proktikusan növekvő számsor)
    5. A Egyesítő (Merge) lekérdezéssel a kettőből a kulcs alapján lehet csinálni egyet
    6. Az eredményt betölteni az adatmodellbe, ahogy a fenti linken.

    Lesz 25M rekord.
    És mihez kezd vele?

    Ezt kiszedni csv-be vagy bármibe nem nagyon lehet, legalább is az Excel PQ tudtommal nem szolgáltat ilyet.

    Mintha a Power BI Desktop tudná az adatmodell exportot.

    Technikai kérdés:
    A magyar és angol fájlokban a sorrend ugyanaz ugye? tehát hogy melyik angol mondatbak melyik a magyar megfelelője.
    mert csak így lehetne őket párba rakni.

    Imre

    #5308

    delila
    Résztvevő

    Szia Imi!

    Nagyon köszönöm, holnap kipróbáljuk. “Csak” 1.000.000 sor lesz (talán), a témakör címét a csatolt link után adtam.
    Igen, a két nyelv sorai megegyeznek – ha igaz.

    Üdv,
    Kati

3 bejegyzés megtekintése - 1-3 / 3

Be kell jelentkezni a hozzászóláshoz.