МС Екцел^{(MS Excel)} може приказати 1.048.576 редова. Иако то може изгледати као заиста велики број у нормалној употреби, постоји много сценарија у којима то није сасвим довољно.

Без обзира да ли гледате датотеке евиденције или велике скупове података, лако је наићи на ЦСВ^(CSV) датотеке са милионима редова или огромним текстуалним датотекама. Пошто Екцел^(Excel) не може да подржи датотеке овако велике, како их тачно отворити? Хајде да сазнамо.

Зашто нормални уређивачи текста^{(Normal Text Editors)} не могу да отворе заиста велике датотеке^{(Open Really Large Files)} ?

Рачунар има гигабајте складишног простора, па зашто уређивачи текста не могу да отворе велике датотеке?

Овде су у игри два фактора. Неке апликације имају чврсто кодирано ограничење колико података могу да прикажу. Није важно колико меморије ваш рачунар има, они је једноставно неће користити.

Друго питање је РАМ^(RAM) . Многи уређивачи текста немају строго ограничење броја редова, али не могу да прикажу велике датотеке због ограничења меморије. Они учитавају целу датотеку у системску РАМ меморију^(RAM) , тако да ако ова меморија није довољно велика, процес неће успети.

Метод #1: Коришћење бесплатних уређивача

Најбољи начин да видите изузетно велике текстуалне датотеке је да користите... уређивач текста. Не било који уређивач текста, већ алати за писање кода. Такве апликације обично могу да обрађују велике датотеке без проблема и бесплатне су.

Ларге Тект Филе Виевер^{(Large Text File Viewer)} је вероватно најједноставнији од ових апликација. Заиста је једноставан за коришћење, ради брзо и има веома мали отисак ресурса. Једина мана? Не може да уређује датотеке. Али ако желите да видите само велике ЦСВ^(CSV) датотеке, ово је најбољи алат за посао.

За уређивање великих текстуалних датотека такође, требало би да испробате Емацс^(Emacs) . Првобитно креиран за Уник^(Unix) системе, савршено добро функционише и на Виндовс^(Windows) -у и може да обрађује велике датотеке. Слично томе, Неовим^(Neovim) и Сублиме Тект^{(Sublime Text)} су два лагана ИДЕ -а која се могу користити за отварање ^(IDEs)ЦСВ^(CSV) текстуалних датотека величине гигабајта .

Ако је све што тражите да тражите податке кроз велике датотеке евиденције, онда је клогг^(klogg) само алат за вас. Ажурирајућа виљушка популарног глогг-а^(glogg) , ова апликација вам омогућава да са лакоћом обављате сложене операције претраживања кроз огромне текстуалне датотеке. Пошто компјутерски генерисане датотеке дневника често могу да имају милионе редова, клогг је дизајниран да ради са таквим величинама датотека без проблема.

Метод^(Method) #2: Поделити на више делова^{(Into Multiple Parts)}

Читав проблем са покушајем отварања великих ЦСВ^(CSV) датотека је у томе што су превелике. Али шта ако бисте их поделили на више мањих датотека?

Ово је популарно решење, јер углавном не укључује учење интерфејса новог уређивача текста. Уместо тога, можете да користите један од многих ЦСВ разделника доступних на мрежи^{(one of the many CSV splitters available online)} да бисте поделили велику датотеку на бројне датотеке које се лако отварају. Свакој од ових датотека се тада може нормално приступити.

Међутим, ово није најбољи начин да се ово уради. Раздвајање велике датотеке често може довести до чудних грешака у куцању или неправилно конфигурисаних датотека. Штавише, отварање сваког дела засебно спречава вас да филтрирате читаве податке одједном.

Метод #3: Увоз у базу података

Текстуалне и .цсв датотеке које се протежу на више гигабајта су углавном велики скупови података. Па зашто их једноставно не увезете у базу података?

СКЛ^(SQL) је најчешћи језик за означавање базе података који се користи ових дана. Постоји много верзија СКЛ-^{(many versions of SQL)} а у употреби, али најлакша је вероватно МиСКЛ^(MySQL) . И на срећу, могуће је претворити ЦСВ датотеку у МиСКЛ табелу^{(convert a CSV file into a MySQL table)} .

Ово никако није најлакши метод за рад са великим ЦСВ^(CSV) датотекама, па ово препоручујемо само ако желите да редовно радите са великим скуповима података. Ако МиСКЛ^(MySQL) звучи превише тешко, увек можете да увезете своје .цсв датотеке у МС Аццесс^{(MS Access)} .

Метод^(Method) #4: Анализирајте помоћу Питхон^(Python) библиотека

Када радите са .цсв датотеком са милионима редова података, очигледно нећете моћи да је схватите ручно. Вероватно желите да филтрирате податке и покренете одређене упите да бисте разумели трендове.

Па зашто не бисте написали Питхон код^{(write Python code)} да бисте управо то урадили?

Још једном, ово није метод који је најприкладнији за употребу. Иако Питхон није најтежи програмски језик за учење^{(Python isn’t the hardest programming language to learn)} , он је кодирање, тако да можда није најбољи приступ за вас. Ипак, ако приметите да морате свакодневно да анализирате заиста велике ЦСВ датотеке, можда бисте желели да ^(CSV)аутоматизујете задатак помоћу неког Питхон кода^{(automate the task with some Python code)} .

Метод #5: Са премиум алатима

Уређивачи текста које смо видели у првој методи нису били наменски алати намењени за ЦСВ^(CSV) обраду. Били су то алати опште намене који су се могли користити и за рад са великим .цсв датотекама.

Али шта је са специјализованим апликацијама? Зар не постоје апликације које су креиране да реше овај проблем?

Постоје, заправо. ЦСВ Екплорер^{(CSV Explorer)} , на пример, гради на самом процесу који смо описали у последње две методе ( СКЛ^(SQL) база података и Питхон^(Python) код) за креирање апликације која може да прегледа и уређује ЦСВ^(CSV) датотеке било које величине. Можете да урадите све што очекујете од алатке за прорачунске табеле, као што је прављење графикона или филтрирање података у ЦСВ Екплорер^{(CSV Explorer)} -у .

Друга опција је УлтраЕдит^(UltraEdit) . За разлику од претходног алата, ово није намењено само за .цсв датотеке већ за било коју врсту текстуалне датотеке. Може лако да обрађује текстуалне и ЦСВ^(CSV) датотеке у распону од неколико гигабајта, са интерфејсом сличним многим бесплатним уређивачима о којима смо раније говорили. 

Једини недостатак ових алата је то што су то премиум апликације, које захтевају да добијете плаћену лиценцу да бисте могли да их користите. Увек можете испробати њихове бесплатне пробне верзије да бисте проверили њихове карактеристике или ако имате само једнократну употребу.

Који је најбољи начин за отварање великих текстуалних^{(Large Text)} и ЦСВ датотека^{(CSV Files)} ?

У овом добу великих података^{(Big Data)} , није неуобичајено да налетите на текстуалне датотеке које се крећу у гигабајтима, што може бити тешко чак и прегледати помоћу уграђених алата као што су Нотепад^(Notepad) или МС Екцел^{(MS Excel)} . Да бисте могли да отворите тако велике ЦСВ^(CSV) датотеке, морате да преузмете и користите апликацију треће стране.

Ако је све што желите да видите такве датотеке, онда је Ларге Тект Филе Виевер^{(Large Text File Viewer)} најбољи избор за вас. Да бисте их стварно уређивали, можете испробати уређивач текста богат функцијама као што је Емацс^(Emacs) или изабрати премиум алат као што је ЦСВ Екплорер^{(CSV Explorer)} .

Технике попут раздвајања ЦСВ^(CSV) датотеке или увоза у базу података укључују превише корака. Боље вам је да набавите плаћену лиценцу наменског премиум алата ако често радите са огромним текстуалним датотекама.

How to Open Really Large Text and CSV Files

MS Excel can displау 1,048,576 rows. While that may seem like a really large number in normal usage, there are plenty of scenarios where thаt isn’t quitе еnough.

Whether you’re looking at log files or large data sets, it’s easy to come across CSV files with millions of rows or enormous text files. Since Excel cannot support files this large, how exactly do you open them? Let’s find out.

Why Can Normal Text Editors Not Open Really Large Files?

A computer has gigabytes of storage, so why can’t text editors open large files?

There are two factors at play here. Some applications have a hardcoded limit on how much data they can display. It doesn’t matter how much memory your PC has, they just won’t use it.

The second issue is RAM. Many text editors do not have a hard limit on the number of rows, but cannot display large files due to memory limitations. They load the entire file into the system RAM, so if this memory isn’t large enough, the process fails.

Method #1: Using Free Editors

The best way to view extremely large text files is to use… a text editor. Not just any text editor, but the tools meant for writing code. Such apps can usually handle large files without a hitch and are free.

Large Text File Viewer is probably the simplest of these applications. It’s really easy to use, works fast and has a very low resource footprint. The only downside? It cannot edit the files. But if you only want to view large CSV files, this is hands down the best tool for the job.

For editing large text files as well, you should try Emacs. Originally created for Unix systems, it works perfectly well on Windows as well, and can handle large files. Similarly, Neovim and Sublime Text are two lightweight IDEs that can be used to open gigabyte-sized CSV text files.

If all you’re looking for is to search for data through large log files, then klogg is just the tool for you. An updating fork of the popular glogg, this application allows you to perform complex search operations through enormous text files with ease. Since computer-generated log files can often have millions of rows, klogg is designed to work with such file sizes without an issue.

Method #2: Split Into Multiple Parts

The whole problem with trying to open large CSV files is that they are too large. But what if you were to split these into multiple smaller files?

This is a popular solution, as it generally doesn’t involve having to learn the interface of a new text editor. Instead, you can use one of the many CSV splitters available online to break up the large file into a number of easy-to-open files. Each of these files can then be accessed normally.

However, this isn’t the best way to go about this. Splitting a large file can often lead to weird typos or improperly configured files. Moreover, opening each chunk separately prevents you from filtering through the whole data at once.

Method #3: Import Into a Database

Text and .csv files extending to multiple gigabytes are generally large datasets. So why not just import them into a database?

SQL is the most common database markup language used these days. There are many versions of SQL in use, but the easiest is probably MySQL. And as luck would have it, it is possible to convert a CSV file into a MySQL table.

This is by no means the easiest method of dealing with large CSV files, so we only recommend this if you want to deal with large datasets on a regular basis. If MySQL sounds too tough, you can always import your .csv files to MS Access instead.

Method #4: Analyze With Python Libraries

When you’re working with a .csv file with millions of rows of data, you’re obviously not going to be able to make much sense of it manually. You probably want to filter the data and run specific queries to understand trends.

So why not write Python code to do just that?

Once again, this is not the most user-friendly method. While Python isn’t the hardest programming language to learn, it is coding, so it might not be the best approach for you. Still, if you find yourself having to parse through really large CSV files on a daily basis, you might want to automate the task with some Python code.

Method #5:  With Premium Tools

The text editors we saw in the first method weren’t dedicated tools meant for CSV processing. They were general-purpose tools that could be used to work with large .csv files as well.

But what about specialized applications? Are there no apps out there that are created to solve this problem?

There are, actually. CSV Explorer, for example, builds on the very process we described in the last two methods (SQL database and Python code) to create an app capable of viewing and editing CSV files of any size. You can do everything you expect from a spreadsheet tool like create graphs or filter the data in CSV Explorer.

Another option is UltraEdit. Unlike the previous tool, this is meant not just for .csv files but for any type of text file. It can easily handle text and CSV files ranging to a few gigabytes, with an interface similar to many of the free editors we discussed earlier. 

The only drawback with these tools is that they are premium applications, requiring you to get a paid license to be able to use them. You can always try out their free trial versions to check out their features, or if you only have a one-time use.

What Is the Best Way To Open Large Text and CSV Files?

In this age of Big Data, it’s not uncommon to run into text files running into gigabytes, which can be hard to even view with built-in tools like Notepad or MS Excel. To be able to open such large CSV files, you need to download and use a third-party application.

If all you want is to view such files, then Large Text File Viewer is the best choice for you. For actually editing them, you can try a feature-rich text editor like Emacs, or go for a premium tool like CSV Explorer.

Techniques like splitting the CSV file or importing it into a database involve just too many steps. You’re better off getting a paid license of a dedicated premium tool if you find yourself working with huge text files a lot.

Related posts

• Како тражити текст унутар више ПДФ датотека одједном

• Како послати анонимну текстуалну поруку којој се не може ући у траг

• Како форматирати текст у Дисцорд-у: фонт, подебљан, курзив, прецртан и још много тога

• Како претворити више слика у ПДФ датотеке

• Како аутоматски преместити или копирати датотеке у Виндовс-у

• Како читати и отварати ПОТ .ПО .МО датотеке екстензије

• Како открити софтвер за праћење рачунара и е-поште или шпијунирање

• Како тражити реч или текст на веб страници у било ком веб претраживачу

• Како отворити датотеке у Виндовс-у са различитим екстензијама датотека

• Сакриј датотеке и фасцикле у Виндовс-у (лако хаковано)

• Не можете да репродукујете АВИ датотеке у Виндовс Медиа Плаиер-у?

• Демистификована технологија равног екрана: ТН, ИПС, ВА, ОЛЕД и још много тога

• Како закривити текст у ИнДесигн-у

• Како прегледати Мац датотеке на Виндовс рачунару

• Како променити датум последње измене, датум креирања и датум последњег приступа за датотеке и фасцикле

• 4 начина да претворите ИоуТубе видео у текст или транскрипт

• Како пронаћи најбоље Дисцорд сервере

• Како слати велике видео записе

• Како искључити некога на Дисцорд-у

• Како дешифровати шифроване Виндовс датотеке