[H] textovy editor na velmi velke subory
[H] textovy editor na velmi velke subory
hladam obdobu Notepad, alebo Notepad++ pre pracu s textovymi subormi, kde je niekolko milionov riadkov.
mate s tym skusnenosti?
mate s tym skusnenosti?
Re: [H] textovy editor na velmi velke subory
Mozes skusit Sublime Text, ale ak by si napisal, co konkretne potrebujes, snad by sa naslo aj lepsie riesenie.
-
Michaelo
Hardcore addict
- Príspevky: 6177
- Registrovaný: 16 júl 2008, 20:29
- Bydlisko: Pri PC
- Kontaktovať používateľa:
Re: [H] textovy editor na velmi velke subory
Sublime pouzivam, ale na toto az tak dobry nieje... V praci kolega potreboval nacitat niekolko GB velky dump DB a NuSphere proste chcipla, podobne aj Notepad a Notepad++, Sublime to sice nacitaval ale trvalo mu to asi 20 minut a extremne lagoval.
Ak mozes, skus to otvarat na serveri, kde mozes citat len x bajtov od bajtu X po bajt X atd.
Ak mozes, skus to otvarat na serveri, kde mozes citat len x bajtov od bajtu X po bajt X atd.
Re: [H] textovy editor na velmi velke subory
ide o subor dat, ktore vysiela kazde plavidlo pri brehoch celej UK kazdych 5s zo systemu AIS. mesacne aj 38GB dat.
Re: [H] textovy editor na velmi velke subory
tak v tom pripade prestan hladat textovy editor, ale zamysli sa nad tym ako tie data spracovat.
prva hlupost, ukladat take mnozstvo dat do textaku. druha hlupost, snazit sa take mnozstvo surovych dat editovat v textaku. poznas toho cloveka ktoreho to napadlo, ze surove data takto ukladat do textaku? este k tomu jedneho velkeho?
take mnozstvo dat patri do databazy, potom sa s nimi bude dat pracovat.
prva hlupost, ukladat take mnozstvo dat do textaku. druha hlupost, snazit sa take mnozstvo surovych dat editovat v textaku. poznas toho cloveka ktoreho to napadlo, ze surove data takto ukladat do textaku? este k tomu jedneho velkeho?
take mnozstvo dat patri do databazy, potom sa s nimi bude dat pracovat.
Re: [H] textovy editor na velmi velke subory
pozri, ja som to dostal a musim si s tym poradit ASAP.
aj tu vlada robi nelogicke kraviny. keby boli v surovych datach aspon suradnice formou CSV, tak si to v gisoch po kusoch obhospodarim ako v online DBcke... no takto neviem
aj tu vlada robi nelogicke kraviny. keby boli v surovych datach aspon suradnice formou CSV, tak si to v gisoch po kusoch obhospodarim ako v online DBcke... no takto neviem
Re: [H] textovy editor na velmi velke subory
nejaky format to musi mat, sprav si parser co to natlaci do databazy.
popripade nech ten skript spravi rovno to co potrebujes. problem vidim v tom ze bezny textovy editor nerata s takym velkym suborom, snazi sa vsetko nacitat do pamate a ked mu pamat dojde (ak teda nemas 64GB RAM alebo vacsiu) tak padne.
cez skript to nemusis nacitavat vsetko naraz, ale po riadkoch alebo bo nejakych chunkoch a pojde to bez problemov.
popripade nech ten skript spravi rovno to co potrebujes. problem vidim v tom ze bezny textovy editor nerata s takym velkym suborom, snazi sa vsetko nacitat do pamate a ked mu pamat dojde (ak teda nemas 64GB RAM alebo vacsiu) tak padne.
cez skript to nemusis nacitavat vsetko naraz, ale po riadkoch alebo bo nejakych chunkoch a pojde to bez problemov.
Re: [H] textovy editor na velmi velke subory
vdaka. pokusim sa oprasit Python
-
Michaelo
Hardcore addict
- Príspevky: 6177
- Registrovaný: 16 júl 2008, 20:29
- Bydlisko: Pri PC
- Kontaktovať používateľa:
Re: [H] textovy editor na velmi velke subory
Proste skus pouzit ten linux server a konzolovy editor v nom... Ten velky subor co sa v nom hrabal kolega bol dump DB a mal cez 50GB...
Samozrejme je lepsie si nieco napisat co ti to spracuje, ale ak to nevies, alebo nemas na to tolko casu, pouzit nejaky editor ktory vie citat len X riadkov je idealne riesenie.
Samozrejme je lepsie si nieco napisat co ti to spracuje, ale ak to nevies, alebo nemas na to tolko casu, pouzit nejaky editor ktory vie citat len X riadkov je idealne riesenie.
Re: [H] textovy editor na velmi velke subory
S tym serverom asi bude problem.
Ale dakujem za rady a napady.
Ale dakujem za rady a napady.
-
Michaelo
Hardcore addict
- Príspevky: 6177
- Registrovaný: 16 júl 2008, 20:29
- Bydlisko: Pri PC
- Kontaktovať používateľa:
Re: [H] textovy editor na velmi velke subory
Tak pod serverom myslim akykolvek Linux, Ubuntu, Debian, kludne aj live distro.
Re: [H] textovy editor na velmi velke subory
s Linuxom som nerobil od kedy bolo dake disto na CD v PC Reuve. nie je to totiz platforma, pre ktoru sa pisu GISy.
Spixy, dakujem. pozriem sa co ponuka free verzia
Spixy, dakujem. pozriem sa co ponuka free verzia