[H] textovy editor na velmi velke subory

Ak potrebujete pomoc alebo poradiť, píšte sem (len PC, elektronika atď.)...
jackb
Redeemer
Redeemer
Používateľov profilový obrázok
Príspevky: 20037
Registrovaný: 09 sep 2005, 19:40
Bydlisko: UK

[H] textovy editor na velmi velke subory

Príspevok od používateľa jackb »

hladam obdobu Notepad, alebo Notepad++ pre pracu s textovymi subormi, kde je niekolko milionov riadkov.
mate s tym skusnenosti?
Aiden
Darca
Darca
Používateľov profilový obrázok
Príspevky: 2213
Registrovaný: 06 apr 2007, 14:28

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa Aiden »

Mozes skusit Sublime Text, ale ak by si napisal, co konkretne potrebujes, snad by sa naslo aj lepsie riesenie.
Michaelo
Hardcore addict
Hardcore addict
Používateľov profilový obrázok
Príspevky: 6177
Registrovaný: 16 júl 2008, 20:29
Bydlisko: Pri PC
Kontaktovať používateľa:

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa Michaelo »

Sublime pouzivam, ale na toto az tak dobry nieje... V praci kolega potreboval nacitat niekolko GB velky dump DB a NuSphere proste chcipla, podobne aj Notepad a Notepad++, Sublime to sice nacitaval ale trvalo mu to asi 20 minut a extremne lagoval.

Ak mozes, skus to otvarat na serveri, kde mozes citat len x bajtov od bajtu X po bajt X atd.
jackb
Redeemer
Redeemer
Používateľov profilový obrázok
Príspevky: 20037
Registrovaný: 09 sep 2005, 19:40
Bydlisko: UK

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa jackb »

ide o subor dat, ktore vysiela kazde plavidlo pri brehoch celej UK kazdych 5s zo systemu AIS. mesacne aj 38GB dat.
aacid
Hardcore addict
Hardcore addict
Príspevky: 8137
Registrovaný: 22 nov 2006, 21:55
Bydlisko: BA

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa aacid »

tak v tom pripade prestan hladat textovy editor, ale zamysli sa nad tym ako tie data spracovat.

prva hlupost, ukladat take mnozstvo dat do textaku. druha hlupost, snazit sa take mnozstvo surovych dat editovat v textaku. poznas toho cloveka ktoreho to napadlo, ze surove data takto ukladat do textaku? este k tomu jedneho velkeho?

take mnozstvo dat patri do databazy, potom sa s nimi bude dat pracovat.
jackb
Redeemer
Redeemer
Používateľov profilový obrázok
Príspevky: 20037
Registrovaný: 09 sep 2005, 19:40
Bydlisko: UK

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa jackb »

pozri, ja som to dostal a musim si s tym poradit ASAP.
aj tu vlada robi nelogicke kraviny. keby boli v surovych datach aspon suradnice formou CSV, tak si to v gisoch po kusoch obhospodarim ako v online DBcke... no takto neviem
aacid
Hardcore addict
Hardcore addict
Príspevky: 8137
Registrovaný: 22 nov 2006, 21:55
Bydlisko: BA

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa aacid »

nejaky format to musi mat, sprav si parser co to natlaci do databazy.
popripade nech ten skript spravi rovno to co potrebujes. problem vidim v tom ze bezny textovy editor nerata s takym velkym suborom, snazi sa vsetko nacitat do pamate a ked mu pamat dojde (ak teda nemas 64GB RAM alebo vacsiu) tak padne.
cez skript to nemusis nacitavat vsetko naraz, ale po riadkoch alebo bo nejakych chunkoch a pojde to bez problemov.
jackb
Redeemer
Redeemer
Používateľov profilový obrázok
Príspevky: 20037
Registrovaný: 09 sep 2005, 19:40
Bydlisko: UK

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa jackb »

vdaka. pokusim sa oprasit Python
Michaelo
Hardcore addict
Hardcore addict
Používateľov profilový obrázok
Príspevky: 6177
Registrovaný: 16 júl 2008, 20:29
Bydlisko: Pri PC
Kontaktovať používateľa:

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa Michaelo »

Proste skus pouzit ten linux server a konzolovy editor v nom... Ten velky subor co sa v nom hrabal kolega bol dump DB a mal cez 50GB...

Samozrejme je lepsie si nieco napisat co ti to spracuje, ale ak to nevies, alebo nemas na to tolko casu, pouzit nejaky editor ktory vie citat len X riadkov je idealne riesenie.
jackb
Redeemer
Redeemer
Používateľov profilový obrázok
Príspevky: 20037
Registrovaný: 09 sep 2005, 19:40
Bydlisko: UK

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa jackb »

S tym serverom asi bude problem.
Ale dakujem za rady a napady.
Michaelo
Hardcore addict
Hardcore addict
Používateľov profilový obrázok
Príspevky: 6177
Registrovaný: 16 júl 2008, 20:29
Bydlisko: Pri PC
Kontaktovať používateľa:

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa Michaelo »

Tak pod serverom myslim akykolvek Linux, Ubuntu, Debian, kludne aj live distro.
Spixy
Professional
Professional
Používateľov profilový obrázok
Príspevky: 1334
Registrovaný: 24 okt 2010, 12:52

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa Spixy »

jackb
Redeemer
Redeemer
Používateľov profilový obrázok
Príspevky: 20037
Registrovaný: 09 sep 2005, 19:40
Bydlisko: UK

Re: [H] textovy editor na velmi velke subory

Príspevok od používateľa jackb »

s Linuxom som nerobil od kedy bolo dake disto na CD v PC Reuve. nie je to totiz platforma, pre ktoru sa pisu GISy.

Spixy, dakujem. pozriem sa co ponuka free verzia
Napísať odpoveď