Το MS Excel^{(MS Excel)} μπορεί να εμφανίσει 1.048.576 σειρές. Αν και μπορεί να φαίνεται σαν ένας πολύ μεγάλος αριθμός σε κανονική χρήση, υπάρχουν πολλά σενάρια όπου αυτό δεν είναι αρκετά.

Είτε κοιτάτε αρχεία καταγραφής είτε μεγάλα σύνολα δεδομένων, είναι εύκολο να συναντήσετε αρχεία CSV με εκατομμύρια σειρές ή τεράστια αρχεία κειμένου. Εφόσον το Excel^(Excel) δεν μπορεί να υποστηρίξει τόσο μεγάλα αρχεία, πώς ακριβώς τα ανοίγετε; Ας ανακαλύψουμε.

Γιατί οι κανονικοί επεξεργαστές κειμένου^{(Normal Text Editors)} δεν μπορούν να ανοίξουν πραγματικά μεγάλα αρχεία^{(Open Really Large Files)} ;

Ένας υπολογιστής έχει gigabytes αποθηκευτικού χώρου, οπότε γιατί οι επεξεργαστές κειμένου δεν μπορούν να ανοίξουν μεγάλα αρχεία;

Εδώ παίζουν δύο παράγοντες. Ορισμένες εφαρμογές έχουν ένα σκληρό όριο για το πόσα δεδομένα μπορούν να εμφανίσουν. Δεν έχει σημασία πόση μνήμη έχει ο υπολογιστής σας, απλώς δεν θα τη χρησιμοποιήσει.

Το δεύτερο θέμα είναι η RAM . Πολλά προγράμματα επεξεργασίας κειμένου δεν έχουν αυστηρό όριο στον αριθμό των σειρών, αλλά δεν μπορούν να εμφανίσουν μεγάλα αρχεία λόγω περιορισμών μνήμης. Φορτώνουν ολόκληρο το αρχείο στη μνήμη RAM^(RAM) του συστήματος , οπότε αν αυτή η μνήμη δεν είναι αρκετά μεγάλη, η διαδικασία αποτυγχάνει.

Μέθοδος #1: Χρήση δωρεάν προγραμμάτων επεξεργασίας

Ο καλύτερος τρόπος για να δείτε εξαιρετικά μεγάλα αρχεία κειμένου είναι να χρησιμοποιήσετε… ένα πρόγραμμα επεξεργασίας κειμένου. Όχι οποιοδήποτε πρόγραμμα επεξεργασίας κειμένου, αλλά τα εργαλεία που προορίζονται για τη σύνταξη κώδικα. Τέτοιες εφαρμογές μπορούν συνήθως να χειριστούν μεγάλα αρχεία χωρίς προβλήματα και είναι δωρεάν.

Το Large Text File Viewer^{(Large Text File Viewer)} είναι ίσως η απλούστερη από αυτές τις εφαρμογές. Είναι πραγματικά εύκολο στη χρήση, λειτουργεί γρήγορα και έχει πολύ χαμηλό αποτύπωμα πόρων. Το μόνο μειονέκτημα; Δεν μπορεί να επεξεργαστεί τα αρχεία. Αλλά αν θέλετε να προβάλετε μόνο μεγάλα αρχεία CSV , αυτό είναι το καλύτερο εργαλείο για τη δουλειά.

Για την επεξεργασία μεγάλων αρχείων κειμένου επίσης, θα πρέπει να δοκιμάσετε το Emacs . Αρχικά δημιουργήθηκε για συστήματα Unix , λειτουργεί τέλεια και στα Windows και μπορεί να χειριστεί μεγάλα αρχεία. Ομοίως, το Neovim^(Neovim) και το Sublime Text είναι δύο ελαφριά IDE^(IDEs) που μπορούν να χρησιμοποιηθούν για το άνοιγμα αρχείων κειμένου CSV μεγέθους gigabyte .

Εάν το μόνο που ψάχνετε είναι να αναζητήσετε δεδομένα μέσα από μεγάλα αρχεία καταγραφής, τότε το klogg^(klogg) είναι απλώς το εργαλείο για εσάς. Ένα πιρούνι ενημέρωσης του δημοφιλούς glogg , αυτή η εφαρμογή σας επιτρέπει να εκτελείτε πολύπλοκες λειτουργίες αναζήτησης μέσω τεράστιων αρχείων κειμένου με ευκολία. Δεδομένου ότι τα αρχεία καταγραφής που δημιουργούνται από υπολογιστή μπορεί συχνά να έχουν εκατομμύρια σειρές, το klogg έχει σχεδιαστεί για να λειτουργεί με τέτοια μεγέθη αρχείων χωρίς πρόβλημα.

Μέθοδος^(Method) #2: Χωρισμός σε πολλά μέρη^{(Into Multiple Parts)}

Το όλο πρόβλημα με την προσπάθεια ανοίγματος μεγάλων αρχείων CSV είναι ότι είναι πολύ μεγάλα. Τι θα γινόταν όμως αν τα χωρίζατε σε πολλά μικρότερα αρχεία;

Αυτή είναι μια δημοφιλής λύση, καθώς γενικά δεν χρειάζεται να μάθετε τη διεπαφή ενός νέου επεξεργαστή κειμένου. Αντίθετα, μπορείτε να χρησιμοποιήσετε έναν από τους πολλούς διαχωριστές CSV που είναι διαθέσιμοι στο διαδίκτυο^{(one of the many CSV splitters available online)} για να χωρίσετε το μεγάλο αρχείο σε έναν αριθμό αρχείων που ανοίγουν εύκολα. Στη συνέχεια, καθένα από αυτά τα αρχεία μπορεί να προσπελαστεί κανονικά.

Ωστόσο, αυτός δεν είναι ο καλύτερος τρόπος για να το κάνετε αυτό. Ο διαχωρισμός ενός μεγάλου αρχείου μπορεί συχνά να οδηγήσει σε περίεργα τυπογραφικά λάθη ή αρχεία που δεν έχουν ρυθμιστεί σωστά. Επιπλέον, το άνοιγμα κάθε κομματιού ξεχωριστά σας εμποδίζει να φιλτράρετε όλα τα δεδομένα ταυτόχρονα.

Μέθοδος #3: Εισαγωγή σε μια βάση δεδομένων

Τα αρχεία κειμένου και .csv που εκτείνονται σε πολλά gigabyte είναι γενικά μεγάλα σύνολα δεδομένων. Γιατί λοιπόν να μην τα εισάγετε απλώς σε μια βάση δεδομένων;

Η SQL^(SQL) είναι η πιο κοινή γλώσσα σήμανσης βάσης δεδομένων που χρησιμοποιείται σήμερα. Υπάρχουν πολλές εκδόσεις της SQL^{(many versions of SQL)} σε χρήση, αλλά η πιο εύκολη είναι πιθανώς η MySQL . Και όπως θα το είχε η τύχη, είναι δυνατή η μετατροπή ενός αρχείου CSV σε πίνακα MySQL^{(convert a CSV file into a MySQL table)} .

Αυτή δεν είναι σε καμία περίπτωση η ευκολότερη μέθοδος αντιμετώπισης μεγάλων αρχείων CSV , επομένως τη συνιστούμε μόνο εάν θέλετε να αντιμετωπίζετε μεγάλα σύνολα δεδομένων σε τακτική βάση. Εάν η MySQL ακούγεται πολύ σκληρή, μπορείτε πάντα να εισάγετε τα αρχεία σας .csv στο MS Access .

Μέθοδος^(Method) #4: Ανάλυση με βιβλιοθήκες Python

Όταν εργάζεστε με ένα αρχείο .csv με εκατομμύρια σειρές δεδομένων, προφανώς δεν θα είστε σε θέση να το κατανοήσετε με μη αυτόματο τρόπο. Πιθανότατα θέλετε να φιλτράρετε τα δεδομένα και να εκτελέσετε συγκεκριμένα ερωτήματα για να κατανοήσετε τις τάσεις.

Γιατί λοιπόν να μην γράψετε κώδικα Python^{(write Python code)} για να το κάνετε αυτό;

Για άλλη μια φορά, αυτή δεν είναι η πιο φιλική προς τον χρήστη μέθοδο. Αν και η Python δεν είναι η πιο δύσκολη γλώσσα προγραμματισμού για εκμάθηση^{(Python isn’t the hardest programming language to learn)} , είναι η κωδικοποίηση, επομένως μπορεί να μην είναι η καλύτερη προσέγγιση για εσάς. Ωστόσο, εάν πρέπει να αναλύετε τα πραγματικά μεγάλα αρχεία CSV σε καθημερινή βάση, ίσως θελήσετε να αυτοματοποιήσετε την εργασία με κάποιο κώδικα Python^{(automate the task with some Python code)} .

Μέθοδος #5: Με εργαλεία Premium

Τα προγράμματα επεξεργασίας κειμένου που είδαμε στην πρώτη μέθοδο δεν ήταν ειδικά εργαλεία που προορίζονταν για επεξεργασία CSV . Ήταν εργαλεία γενικής χρήσης που μπορούσαν να χρησιμοποιηθούν για να δουλέψουν και με μεγάλα αρχεία .csv.

Τι γίνεται όμως με τις εξειδικευμένες εφαρμογές; Δεν υπάρχουν εφαρμογές εκεί έξω που έχουν δημιουργηθεί για να λύσουν αυτό το πρόβλημα;

Υπάρχουν, στην πραγματικότητα. Ο CSV Explorer^{(CSV Explorer)} , για παράδειγμα, βασίζεται στην ίδια τη διαδικασία που περιγράψαμε στις δύο τελευταίες μεθόδους ( βάση δεδομένων SQL και κώδικας Python ) για να δημιουργήσει μια εφαρμογή ικανή να προβάλλει και να επεξεργάζεται αρχεία CSV οποιουδήποτε μεγέθους. Μπορείτε να κάνετε ό,τι περιμένετε από ένα εργαλείο υπολογιστικών φύλλων, όπως να δημιουργήσετε γραφήματα ή να φιλτράρετε τα δεδομένα στην Εξερεύνηση CSV^{(CSV Explorer)} .

Μια άλλη επιλογή είναι το UltraEdit . Σε αντίθεση με το προηγούμενο εργαλείο, αυτό δεν προορίζεται μόνο για αρχεία .csv αλλά για κάθε τύπο αρχείου κειμένου. Μπορεί εύκολα να χειριστεί αρχεία κειμένου και CSV που κυμαίνονται σε λίγα gigabyte, με μια διεπαφή παρόμοια με πολλούς από τους δωρεάν επεξεργαστές που συζητήσαμε νωρίτερα. 

Το μόνο μειονέκτημα αυτών των εργαλείων είναι ότι είναι εφαρμογές premium, που απαιτούν να λάβετε άδεια επί πληρωμή για να μπορείτε να τα χρησιμοποιήσετε. Μπορείτε πάντα να δοκιμάσετε τις δωρεάν δοκιμαστικές εκδόσεις τους για να ελέγξετε τις δυνατότητές τους ή εάν χρησιμοποιείτε μόνο μία φορά.

Ποιος είναι ο καλύτερος τρόπος για να ανοίξετε μεγάλα αρχεία κειμένου^{(Large Text)} και CSV^{(CSV Files)} ;

Σε αυτήν την εποχή των Μεγάλων Δεδομένων^{(Big Data)} , δεν είναι ασυνήθιστο να αντιμετωπίζετε αρχεία κειμένου που εκτείνονται σε gigabyte, τα οποία μπορεί να είναι δύσκολο να προβληθούν ακόμη και με ενσωματωμένα εργαλεία όπως το Σημειωματάριο^(Notepad) ή το MS Excel^{(MS Excel)} . Για να μπορέσετε να ανοίξετε τόσο μεγάλα αρχεία CSV , πρέπει να κάνετε λήψη και να χρησιμοποιήσετε μια εφαρμογή τρίτου κατασκευαστή.

Εάν το μόνο που θέλετε είναι να προβάλετε τέτοια αρχεία, τότε το Large Text File Viewer είναι η καλύτερη επιλογή για εσάς. Για να τα επεξεργαστείτε πραγματικά, μπορείτε να δοκιμάσετε ένα πρόγραμμα επεξεργασίας κειμένου πλούσιου σε δυνατότητες όπως το Emacs ή να χρησιμοποιήσετε ένα εργαλείο premium όπως το CSV Explorer .

Τεχνικές όπως ο διαχωρισμός του αρχείου CSV ή η εισαγωγή του σε μια βάση δεδομένων περιλαμβάνουν πάρα πολλά βήματα. Καλύτερα να λάβετε μια επί πληρωμή άδεια χρήσης ενός αποκλειστικού εργαλείου premium, εάν εργάζεστε πολύ με τεράστια αρχεία κειμένου.

How to Open Really Large Text and CSV Files

MS Excel can displaу 1,048,576 rows. While that may seem like a reallу large number in normal usage, there are plenty of scenarios where that іsn’t quite еnough.

Whether you’re looking at log files or large data sets, it’s easy to come across CSV files with millions of rows or enormous text files. Since Excel cannot support files this large, how exactly do you open them? Let’s find out.

Why Can Normal Text Editors Not Open Really Large Files?

A computer has gigabytes of storage, so why can’t text editors open large files?

There are two factors at play here. Some applications have a hardcoded limit on how much data they can display. It doesn’t matter how much memory your PC has, they just won’t use it.

The second issue is RAM. Many text editors do not have a hard limit on the number of rows, but cannot display large files due to memory limitations. They load the entire file into the system RAM, so if this memory isn’t large enough, the process fails.

Method #1: Using Free Editors

The best way to view extremely large text files is to use… a text editor. Not just any text editor, but the tools meant for writing code. Such apps can usually handle large files without a hitch and are free.

Large Text File Viewer is probably the simplest of these applications. It’s really easy to use, works fast and has a very low resource footprint. The only downside? It cannot edit the files. But if you only want to view large CSV files, this is hands down the best tool for the job.

For editing large text files as well, you should try Emacs. Originally created for Unix systems, it works perfectly well on Windows as well, and can handle large files. Similarly, Neovim and Sublime Text are two lightweight IDEs that can be used to open gigabyte-sized CSV text files.

If all you’re looking for is to search for data through large log files, then klogg is just the tool for you. An updating fork of the popular glogg, this application allows you to perform complex search operations through enormous text files with ease. Since computer-generated log files can often have millions of rows, klogg is designed to work with such file sizes without an issue.

Method #2: Split Into Multiple Parts

The whole problem with trying to open large CSV files is that they are too large. But what if you were to split these into multiple smaller files?

This is a popular solution, as it generally doesn’t involve having to learn the interface of a new text editor. Instead, you can use one of the many CSV splitters available online to break up the large file into a number of easy-to-open files. Each of these files can then be accessed normally.

However, this isn’t the best way to go about this. Splitting a large file can often lead to weird typos or improperly configured files. Moreover, opening each chunk separately prevents you from filtering through the whole data at once.

Method #3: Import Into a Database

Text and .csv files extending to multiple gigabytes are generally large datasets. So why not just import them into a database?

SQL is the most common database markup language used these days. There are many versions of SQL in use, but the easiest is probably MySQL. And as luck would have it, it is possible to convert a CSV file into a MySQL table.

This is by no means the easiest method of dealing with large CSV files, so we only recommend this if you want to deal with large datasets on a regular basis. If MySQL sounds too tough, you can always import your .csv files to MS Access instead.

Method #4: Analyze With Python Libraries

When you’re working with a .csv file with millions of rows of data, you’re obviously not going to be able to make much sense of it manually. You probably want to filter the data and run specific queries to understand trends.

So why not write Python code to do just that?

Once again, this is not the most user-friendly method. While Python isn’t the hardest programming language to learn, it is coding, so it might not be the best approach for you. Still, if you find yourself having to parse through really large CSV files on a daily basis, you might want to automate the task with some Python code.

Method #5:  With Premium Tools

The text editors we saw in the first method weren’t dedicated tools meant for CSV processing. They were general-purpose tools that could be used to work with large .csv files as well.

But what about specialized applications? Are there no apps out there that are created to solve this problem?

There are, actually. CSV Explorer, for example, builds on the very process we described in the last two methods (SQL database and Python code) to create an app capable of viewing and editing CSV files of any size. You can do everything you expect from a spreadsheet tool like create graphs or filter the data in CSV Explorer.

Another option is UltraEdit. Unlike the previous tool, this is meant not just for .csv files but for any type of text file. It can easily handle text and CSV files ranging to a few gigabytes, with an interface similar to many of the free editors we discussed earlier. 

The only drawback with these tools is that they are premium applications, requiring you to get a paid license to be able to use them. You can always try out their free trial versions to check out their features, or if you only have a one-time use.

What Is the Best Way To Open Large Text and CSV Files?

In this age of Big Data, it’s not uncommon to run into text files running into gigabytes, which can be hard to even view with built-in tools like Notepad or MS Excel. To be able to open such large CSV files, you need to download and use a third-party application.

If all you want is to view such files, then Large Text File Viewer is the best choice for you. For actually editing them, you can try a feature-rich text editor like Emacs, or go for a premium tool like CSV Explorer.

Techniques like splitting the CSV file or importing it into a database involve just too many steps. You’re better off getting a paid license of a dedicated premium tool if you find yourself working with huge text files a lot.

Related posts

• Πώς να αναζητήσετε κείμενο σε πολλά αρχεία PDF ταυτόχρονα

• Πώς να στείλετε ένα ανώνυμο μήνυμα κειμένου που δεν μπορεί να εντοπιστεί σε εσάς

• Πώς να μορφοποιήσετε κείμενο στο Discord: Γραμματοσειρά, Έντονη, Πλάγια, Διαγραφή και άλλα

• Πώς να μετατρέψετε πολλές εικόνες σε αρχεία PDF

• Πώς να μετακινήσετε ή να αντιγράψετε αυτόματα αρχεία στα Windows

• Πώς να απαλλαγείτε από την Αναζήτηση Yahoo στο Chrome

• Πώς να αναζητήσετε μια λέξη ή ένα κείμενο σε μια ιστοσελίδα σε οποιοδήποτε πρόγραμμα περιήγησης Ιστού

• Δεν μπορείτε να παίξετε αρχεία AVI στο Window Media Player;

• Πώς να εκτυπώσετε μια λίστα αρχείων σε έναν κατάλογο των Windows

• Πώς να προβάλετε αρχεία Mac σε υπολογιστή με Windows

• Πώς να μεταφέρετε αρχεία μέσω Bluetooth στον υπολογιστή σας

• 3 τρόποι για να τραβήξετε μια φωτογραφία ή ένα βίντεο σε ένα Chromebook

• 10 καλύτεροι τρόποι για να αποδείξετε τα παιδιά στον υπολογιστή σας

• Πώς να εντοπίσετε λογισμικό παρακολούθησης ή κατασκοπείας υπολογιστή και email

• Απόκρυψη αρχείων και φακέλων στα Windows (Εύκολα παραβιάζονται)

• Δεν μπορείτε να αναπαράγετε αρχεία MP4 στο XBox 360;

• 4 τρόποι για να βρείτε τις καλύτερες επιλογές Internet (ISP) στην περιοχή σας

• 6 τρόποι για να στείλετε μεγάλα αρχεία ως συνημμένα email

• Πώς να διαβάζετε και να ανοίγετε αρχεία .DAT στα Windows

• Εναλλακτική μέθοδος απόκρυψης αρχείων και φακέλων στα Windows