MS Excel može prikazati 1.048.576 redaka. Iako se to može činiti kao jako velik broj u normalnoj upotrebi, postoji mnogo scenarija u kojima to nije sasvim dovoljno.

Bilo da gledate datoteke dnevnika ili velike skupove podataka, lako je naići na CSV datoteke s milijunima redaka ili goleme tekstualne datoteke. Budući da Excel ne može podržati datoteke ovako velike, kako ih točno otvoriti? Hajde da vidimo.

Zašto normalni uređivači teksta^{(Normal Text Editors)} ne mogu otvoriti stvarno velike datoteke^{(Open Really Large Files)} ?

Računalo ima gigabajte prostora za pohranu, pa zašto uređivači teksta ne mogu otvoriti velike datoteke?

Ovdje su u igri dva faktora. Neke aplikacije imaju tvrdo kodirano ograničenje koliko podataka mogu prikazati. Nije važno koliko memorije ima vaše računalo, oni ga jednostavno neće koristiti.

Drugi problem je RAM . Mnogi uređivači teksta nemaju čvrsto ograničenje broja redaka, ali ne mogu prikazati velike datoteke zbog ograničenja memorije. Oni učitavaju cijelu datoteku u RAM sustava , pa ako ova memorija nije dovoljno velika, proces ne uspijeva.

Metoda #1: Korištenje besplatnih uređivača

Najbolji način za pregled iznimno velikih tekstualnih datoteka je korištenje… uređivača teksta. Ne bilo koji uređivač teksta, već alati namijenjeni pisanju koda. Takve aplikacije obično mogu bez problema rukovati velikim datotekama i besplatne su.

Large Text File Viewer vjerojatno je najjednostavniji od ovih aplikacija. Doista je jednostavan za korištenje, radi brzo i ima vrlo mali otisak resursa. Jedina mana? Ne može uređivati ​​datoteke. Ali ako želite vidjeti samo velike CSV datoteke, ovo je najbolji alat za taj posao.

Za uređivanje velikih tekstualnih datoteka, trebali biste isprobati Emacs . Izvorno stvoren za Unix sustave, savršeno dobro radi i na Windowsima^(Windows) i može rukovati velikim datotekama. Slično, Neovim i Sublime Text su dva lagana IDE -a koja se mogu koristiti za otvaranje ^(IDEs)CSV tekstualnih datoteka veličine gigabajta .

Ako sve što tražite je traženje podataka kroz velike datoteke dnevnika, onda je klogg samo alat za vas. Ažurirajuća vilica popularnog glogg-a^(glogg) , ova aplikacija vam omogućuje da s lakoćom izvodite složene operacije pretraživanja kroz ogromne tekstualne datoteke. Budući da računalno generirane datoteke dnevnika često mogu imati milijune redaka, klogg je dizajniran za rad s takvim veličinama datoteka bez problema.

Metoda^(Method) #2: Podijelite na više dijelova^{(Into Multiple Parts)}

Cijeli problem s pokušajem otvaranja velikih CSV datoteka je u tome što su prevelike. Ali što ako ih podijelite u više manjih datoteka?

Ovo je popularno rješenje jer općenito ne uključuje učenje sučelja novog uređivača teksta. Umjesto toga, možete upotrijebiti jedan od mnogih CSV razdjelnika dostupnih na mreži^{(one of the many CSV splitters available online)} kako biste veliku datoteku razdvojili u niz datoteka koje se lako otvaraju. Svakoj od ovih datoteka tada se može normalno pristupiti.

Međutim, ovo nije najbolji način za to. Dijeljenje velike datoteke često može dovesti do čudnih pogrešaka pri upisu ili nepravilno konfiguriranih datoteka. Štoviše, otvaranje svakog dijela zasebno sprječava vas da filtrirate cijele podatke odjednom.

Metoda #3: Uvoz u bazu podataka

Tekstualne i .csv datoteke koje se protežu na više gigabajta općenito su veliki skupovi podataka. Pa zašto ih jednostavno ne uvesti u bazu podataka?

SQL je najčešći jezik za označavanje baze podataka koji se danas koristi. U upotrebi su mnoge verzije SQL^{(many versions of SQL)} -a, ali najlakša je vjerojatno MySQL . I na sreću, moguće je pretvoriti CSV datoteku u MySQL tablicu^{(convert a CSV file into a MySQL table)} .

Ovo nipošto nije najjednostavniji način rada s velikim CSV datotekama, stoga ga preporučujemo samo ako želite redovito raditi s velikim skupovima podataka. Ako MySQL zvuči preteško, uvijek možete uvesti svoje .csv datoteke u MS Access .

Metoda^(Method) #4: Analizirajte s Python knjižnicama

Kada radite s .csv datotekom s milijunima redaka podataka, očito nećete moći ručno shvatiti puno smisla. Vjerojatno želite filtrirati podatke i pokrenuti određene upite kako biste razumjeli trendove.

Pa zašto onda ne napisati Python kod^{(write Python code)} za to?

Još jednom, ovo nije najprikladnija metoda. Iako Python nije najteži programski jezik za naučiti^{(Python isn’t the hardest programming language to learn)} , on je kodiranje, tako da možda nije najbolji pristup za vas. Ipak, ako morate svakodnevno analizirati stvarno velike CSV datoteke, možda biste željeli ^(CSV)automatizirati zadatak s nekim Python kodom^{(automate the task with some Python code)} .

Metoda #5: s vrhunskim alatima

Uređivači teksta koje smo vidjeli u prvoj metodi nisu bili namjenski alati namijenjeni za obradu CSV -a. ^(CSV)Bili su to alati opće namjene koji su se mogli koristiti i za rad s velikim .csv datotekama.

Ali što je sa specijaliziranim aplikacijama? Ne postoje li aplikacije koje su stvorene za rješavanje ovog problema?

Postoje, zapravo. CSV Explorer , na primjer, temelji se na samom procesu koji smo opisali u posljednje dvije metode ( SQL baza podataka i Python kod) za stvaranje aplikacije sposobne za pregledavanje i uređivanje CSV datoteka bilo koje veličine. Možete učiniti sve što očekujete od alata za proračunske tablice kao što je stvaranje grafikona ili filtriranje podataka u CSV Exploreru^{(CSV Explorer)} .

Druga opcija je UltraEdit . Za razliku od prethodnog alata, ovo nije namijenjeno samo za .csv datoteke već za bilo koju vrstu tekstualne datoteke. Lako može rukovati tekstualnim i CSV datotekama u rasponu od nekoliko gigabajta, sa sučeljem sličnim mnogim besplatnim uređivačima o kojima smo ranije raspravljali. 

Jedini nedostatak ovih alata je to što su premium aplikacije, koje zahtijevaju da dobijete plaćenu licencu da biste ih mogli koristiti. Uvijek možete isprobati njihove besplatne probne verzije kako biste provjerili njihove značajke ili ako imate samo jednokratnu upotrebu.

Koji je najbolji način za otvaranje velikih tekstualnih^{(Large Text)} i CSV datoteka^{(CSV Files)} ?

U ovo doba velikih podataka^{(Big Data)} nije neuobičajeno naletjeti na tekstualne datoteke koje se kreću u gigabajtima, što može biti teško čak i pregledati pomoću ugrađenih alata kao što su Notepad ili MS Excel . Da biste mogli otvoriti tako velike CSV datoteke, morate preuzeti i koristiti aplikaciju treće strane.

Ako je sve što želite vidjeti takve datoteke, onda je Large Text File Viewer najbolji izbor za vas. Za njihovo stvarno uređivanje, možete isprobati uređivač teksta bogat značajkama kao što je Emacs ili odabrati vrhunski alat kao što je CSV Explorer .

Tehnike poput dijeljenja CSV datoteke ili uvoza u bazu podataka uključuju previše koraka. Bolje vam je da dobijete plaćenu licencu namjenskog premium alata ako često radite s ogromnim tekstualnim datotekama.

How to Open Really Large Text and CSV Files

MS Excel can display 1,048,576 rows. While that may seem like a really large number in normal usage, there are plenty of scenarios where that isn’t quite enough.

Whether you’re looking at log files or large data sets, it’s easy to come across CSV files with millions of rows or enormous text files. Since Excel cannot support files this large, how exactly do you open them? Let’s find out.

Why Can Normal Text Editors Not Open Really Large Files?

A computer has gigabytes of storage, so why can’t text editors open large files?

There are two factors at play here. Some applications have a hardcoded limit on how much data they can display. It doesn’t matter how much memory your PC has, they just won’t use it.

The second issue is RAM. Many text editors do not have a hard limit on the number of rows, but cannot display large files due to memory limitations. They load the entire file into the system RAM, so if this memory isn’t large enough, the process fails.

Method #1: Using Free Editors

The best way to view extremely large text files is to use… a text editor. Not just any text editor, but the tools meant for writing code. Such apps can usually handle large files without a hitch and are free.

Large Text File Viewer is probably the simplest of these applications. It’s really easy to use, works fast and has a very low resource footprint. The only downside? It cannot edit the files. But if you only want to view large CSV files, this is hands down the best tool for the job.

For editing large text files as well, you should try Emacs. Originally created for Unix systems, it works perfectly well on Windows as well, and can handle large files. Similarly, Neovim and Sublime Text are two lightweight IDEs that can be used to open gigabyte-sized CSV text files.

If all you’re looking for is to search for data through large log files, then klogg is just the tool for you. An updating fork of the popular glogg, this application allows you to perform complex search operations through enormous text files with ease. Since computer-generated log files can often have millions of rows, klogg is designed to work with such file sizes without an issue.

Method #2: Split Into Multiple Parts

The whole problem with trying to open large CSV files is that they are too large. But what if you were to split these into multiple smaller files?

This is a popular solution, as it generally doesn’t involve having to learn the interface of a new text editor. Instead, you can use one of the many CSV splitters available online to break up the large file into a number of easy-to-open files. Each of these files can then be accessed normally.

However, this isn’t the best way to go about this. Splitting a large file can often lead to weird typos or improperly configured files. Moreover, opening each chunk separately prevents you from filtering through the whole data at once.

Method #3: Import Into a Database

Text and .csv files extending to multiple gigabytes are generally large datasets. So why not just import them into a database?

SQL is the most common database markup language used these days. There are many versions of SQL in use, but the easiest is probably MySQL. And as luck would have it, it is possible to convert a CSV file into a MySQL table.

This is by no means the easiest method of dealing with large CSV files, so we only recommend this if you want to deal with large datasets on a regular basis. If MySQL sounds too tough, you can always import your .csv files to MS Access instead.

Method #4: Analyze With Python Libraries

When you’re working with a .csv file with millions of rows of data, you’re obviously not going to be able to make much sense of it manually. You probably want to filter the data and run specific queries to understand trends.

So why not write Python code to do just that?

Once again, this is not the most user-friendly method. While Python isn’t the hardest programming language to learn, it is coding, so it might not be the best approach for you. Still, if you find yourself having to parse through really large CSV files on a daily basis, you might want to automate the task with some Python code.

Method #5:  With Premium Tools

The text editors we saw in the first method weren’t dedicated tools meant for CSV processing. They were general-purpose tools that could be used to work with large .csv files as well.

But what about specialized applications? Are there no apps out there that are created to solve this problem?

There are, actually. CSV Explorer, for example, builds on the very process we described in the last two methods (SQL database and Python code) to create an app capable of viewing and editing CSV files of any size. You can do everything you expect from a spreadsheet tool like create graphs or filter the data in CSV Explorer.

Another option is UltraEdit. Unlike the previous tool, this is meant not just for .csv files but for any type of text file. It can easily handle text and CSV files ranging to a few gigabytes, with an interface similar to many of the free editors we discussed earlier. 

The only drawback with these tools is that they are premium applications, requiring you to get a paid license to be able to use them. You can always try out their free trial versions to check out their features, or if you only have a one-time use.

What Is the Best Way To Open Large Text and CSV Files?

In this age of Big Data, it’s not uncommon to run into text files running into gigabytes, which can be hard to even view with built-in tools like Notepad or MS Excel. To be able to open such large CSV files, you need to download and use a third-party application.

If all you want is to view such files, then Large Text File Viewer is the best choice for you. For actually editing them, you can try a feature-rich text editor like Emacs, or go for a premium tool like CSV Explorer.

Techniques like splitting the CSV file or importing it into a database involve just too many steps. You’re better off getting a paid license of a dedicated premium tool if you find yourself working with huge text files a lot.

Related posts

• Kako tražiti tekst unutar više PDF datoteka odjednom

• Kako poslati anonimnu tekstualnu poruku kojoj se ne može ući u trag

• Kako oblikovati tekst u Discordu: font, podebljan, kurziv, precrtan i još mnogo toga

• Kako pretvoriti više slika u PDF datoteke

• Kako automatski premjestiti ili kopirati datoteke u sustavu Windows

• Kako pretraživati ​​Facebook prijatelje po lokaciji, poslu ili školi

• Kako uključiti ili isključiti Caps Lock na Chromebooku

• Kako pristupiti Mac datotekama s računala sa sustavom Windows

• Kako se riješiti Yahoo pretraživanja u Chromeu

• 3 načina za snimanje fotografije ili videozapisa na Chromebooku

• Kako čitati i otvarati datoteke proširenja POT .PO .MO

• Ne možete reproducirati AVI datoteke u Window Media Playeru?

• Kako isključiti nekoga u Discordu

• Kako sakriti tekstualne poruke na iPhoneu (Isključi pregled)

• Kako ispisati popis datoteka u Windows imeniku

• What Is the Uber Passenger Rating and How to Check It

• Kako grupno promijeniti proširenja datoteka za Windows datoteke

• 7 brzih popravaka kada se Minecraft stalno ruši

• Alternativna metoda za skrivanje datoteka i mapa u sustavu Windows

• 6 načina slanja velikih datoteka kao privitaka e-pošte