4
ответа

Парсинг огромных XML-файлов в PHP

Я пытаюсь проанализировать XML-файлы содержания/структур DMOZ в MySQL, но все существующие сценарии, чтобы сделать это очень старо и не работает хорошо. Как я могу пойти об открытии большого (+1GB) XML-файла в PHP...
вопрос задан: 1 October 2014 08:19
4
ответа

Как считать файл крупного текста на окнах? [закрытый]

У меня есть большой файл журнала сервера (~750 МБ), которых я не могу открыть или с Блокнотом или с Блокнотом ++ (они оба говорят, что файл является слишком большим). Может любой предлагать программу (для Windows), который будет только читать...
вопрос задан: 30 August 2012 02:39
4
ответа

Загрузите разделение на блоки использования файлов на 1 ГБ в PHP

У меня есть веб-приложение, которое принимает загрузки файла до 4 МБ. Серверный сценарий является PHP, и веб-сервер является NGINX. Многие пользователи запросили увеличить этот предел решительно для разрешения загрузки...
вопрос задан: 27 July 2012 22:49
4
ответа

Написание очень больших файлов на HDF в R [дубликат]

Я пытаюсь вычислить матрицу подобия 300 000 X 300 000, так как она не может поместиться в память, я вычисляю каждую строку со всеми другими строками, преобразуя ее в кадр данных и записывая в HDF-файл. ...
вопрос задан: 8 May 2012 21:27
4
ответа

Чтение из большого, непрерывно рост файла с BufferedReader

Задача, которую я имею, к (несколько эффективно) чтение линию за линией через очень большое, непрерывно выращивая файл. Вот в основном, что я делаю теперь: BufferedReader rd =//инициализирует BufferedReader...
вопрос задан: 8 July 2010 17:54
4
ответа

Чтение большого файла Excel с PHP

Я пытаюсь читать, 17 МБ превосходят файл (2003) с PHPExcel1.7.3c, но он уже сокрушает при загрузке файла после превышения предела этих 120 секунд, который я имею. Есть ли другая библиотека, которая может сделать это...
вопрос задан: 3 June 2010 13:36
4
ответа

Существует ли распределенный VCS, который может управлять большими файлами?

Существует ли распределенная система управления версиями (мерзавец, базар, подвижный, darcs и т.д.), который может обработать файлы, больше, чем доступная RAM? Я должен смочь фиксировать большие двоичные файлы (т.е. наборы данных...
вопрос задан: 29 March 2010 03:05
4
ответа

java.util.zip. ZipException: слишком много записей в zip-файле

Я пытаюсь записать класс Java для извлечения большого zip-файла, содержащего ~74000 XML-файлов. Я получаю следующее исключение при попытке разархивировать его использующий библиотеку zip Java: java.util.zip....
вопрос задан: 19 March 2010 19:02
4
ответа

Уничтожение огромного файла в репозитории SVN

Как локальный царь подверсии я объясняю всем для хранения только исходного кода и неогромных текстовых файлов в репозитории, не огромных файлов двоичных данных. Меньшие двоичные файлы, которые являются частями тестов, возможно...
вопрос задан: 14 March 2010 20:26
4
ответа

Сжимать большой файл в ZIP с Java

У меня есть потребность сжать один Большой файл (~450 мегабайтов) через класс Java ZipOutputStream. Этот большой размер вызывает проблему ошибки "OutOfMemory" моего Пространства "кучи" JVM. Это происходит потому что...
вопрос задан: 14 March 2010 20:14
4
ответа

Ценность мерзавца для управления многими файлами, больше, чем 500 МБ

Я подверг бы управлению версиями большой объем данных, т.е. структуру каталогов (с глубиной <=5) с сотнями файлов с размером приблизительно 500 МБ). Вещами, в которых я нуждаюсь, является система, которые помогают мне: - к...
вопрос задан: 14 March 2010 20:14
3
ответа

Управление большими двоичными файлами с помощью Git

Я ищу мнения о том, как обрабатывать большие двоичные файлы, от которых зависит мой исходный код (веб-приложение). В настоящее время мы обсуждаем несколько альтернатив: Скопируйте двоичные файлы вручную. ...
вопрос задан: 31 December 2017 13:32
3
ответа

Работа с огромными файлами в VIM

Я пытался открыть огромный (~2GB) файл в VIM, но он дросселировал. Я не должен на самом деле редактировать файл, просто переходить вокруг эффективно. Как я могу пойти о работе с очень большими файлами в VIM?
вопрос задан: 21 January 2017 23:33
3
ответа

Контакт с большими файлами в Haskell

У меня есть большой файл (4 + концерты), позволяет, просто говорят, 4-байтовые плавания. Я хотел бы рассматривать его как Список, в том смысле, что я хотел бы смочь использовать карту, фильтр, foldl, и т.д. Однако вместо...
вопрос задан: 22 November 2015 15:09
3
ответа

Как я могу прокрутить с энергией в большой файл?

У меня есть большой файл с тысячами строк тысяч символов. Я перемещаю курсор в 3000-й символ. Если я буду использовать PageDown или Ctrl+D, то файл прокрутит, но курсор возвратится к...
вопрос задан: 18 September 2015 08:13
3
ответа

Почему бы не использовать git для больших файлов? [Дубликат]

У меня просто был проект, в котором я должен был хранить CSV-файл вместе с git (используя LFS). Поэтому я задаюсь вопросом, почему Git LFS следует использовать в этих случаях. Не git отслеживать только изменения между версиями?
вопрос задан: 1 April 2015 14:45
3
ответа

Как программно загрузить большой файл в C#

Я должен программно загрузить большой файл прежде, чем обработать его. Что лучший способ состоит в том, чтобы сделать это? Поскольку файл является большим, я хочу к определенному времени ожидать так, чтобы я мог сильно выйти. Я знаю о...
вопрос задан: 19 February 2014 22:14
3
ответа

Произвольный доступ gzip поток

Я хотел бы смочь сделать произвольный доступ в gzipped файл. Я могу позволить себе сделать некоторую предварительную обработку на нем (скажите, создайте некоторый индекс), при условии, что результат предварительной обработки намного меньше...
вопрос задан: 10 May 2011 06:23
3
ответа

Обслуживание больших защищенных файлов в PHP/Apache

Я должен подать большие файлы (> 2 ГБ) от веб-сервера Apache. Файлы защищены загрузки, таким образом, мне нужен некоторый способ для авторизации пользователя. CMS я использую cookie использования, проверенные по...
вопрос задан: 6 July 2010 15:07
3
ответа

Отклонение больших файлов в мерзавце

Мы недавно начали использовать мерзавца и имели противную проблему, когда кто-то фиксировал большое (~1.5GB файл), который затем заставил мерзавца отказывать на различных Ose на 32 бита. Это, кажется, известная ошибка (мерзавец mmaps...
вопрос задан: 19 March 2010 19:10
3
ответа

Просмотр больших XML-файлов в затмении?

Я работаю над проектом, включающим некоторые большие XML-файлы (от 50 МБ до более чем 1 ГБ), и было бы хорошо, если я мог бы просмотреть их в затмении (простое текстовое представление прекрасно) без Java, исчерпывающего пространство "кучи"...
вопрос задан: 19 March 2010 16:09
2
ответа

O_LARGEFILE необходим только для записи большого файла?

Флаг O_LARGEFILE необходим, если все, что я хочу сделать действительно ли запись, является большим файлом (O_WRONLY), или добавьте в большой файл (O_APPEND | O_WRONLY)? От потока, который я считал названный, "Не может записать> индекс на 2 ГБ...
вопрос задан: 26 June 2018 10:18
2
ответа

iostream и большая поддержка файла

Я пытаюсь найти категорический ответ, и не может, таким образом, я надеюсь, что кто-то мог бы знать. Я разрабатываю приложение C++ с помощью GCC 4.x на Linux (32-разрядная ОС). Это приложение должно смочь считать файлы> 2 ГБ в размере....
вопрос задан: 26 June 2018 10:17
2
ответа

Как отправить большой файл от клиента к серверу Используя WCF?

Как Отправить Большой Файл От Клиента К Серверу Используя WCF в C#? Ниже кода конфигурации. <system.serviceModel> <привязка> <basicHttpBinding> <привязка...
вопрос задан: 24 August 2011 10:19
2
ответа

Отредактируйте очень большой sql дамп/текстовый файл (на Linux)

Я должен импортировать большой дамп mysql (до 10G). Однако sql уже выводят предопределенный со структурой базы данных с индексным определением. Я хочу убыстриться, дб вставляют путем удаления индекса и...
вопрос задан: 19 March 2010 19:09
2
ответа

Система управления версиями для огромных файлов?

Я ищу быстрый, но not-so-dirty способ сделать снимки набора файлов всего приблизительно 80 концертов. Проблема здесь - то, что многие файлы приблизительно 1 ГБ шириной. Какова лучшая бесплатная версия...
вопрос задан: 14 March 2010 20:27
2
ответа

Текстовый редактор для открытия больших (гигантских, огромных, больших) текстовых файлов [закрыто]

Я имею в виду более 100 МБ; такие текстовые файлы могут раздвинуть редакторы. Мне нужно просмотреть большой файл XML, но не могу, если редактор глючит. Какие-либо предложения?
вопрос задан: 14 March 2010 20:24
2
ответа

Как прочитать большой XML-файл, не загружая его в памяти и с помощью XElement

Я хочу прочитать большой XML-файл (100+M). Из-за его размера, я не хочу загружать его в памяти с помощью XElement. Я использую запросы linq-xml, чтобы проанализировать и считать его. Что лучший способ состоит в том, чтобы сделать это? Любой...
вопрос задан: 14 March 2010 19:59
1
ответ

Обновление вложенных массивов в mongodb

У меня есть документ в mongodb с двухуровневым вложенным массивом объектов, которые мне нужно обновить, примерно так: {id: 1, items: [ {id: 2, блоки: [... Прочитать последние n строк ОГРОМНОГО файла Я хочу прочитать последние n строк оче
вопрос задан: 3 March 2015 08:46
1
ответ

База данных более чем 2 ГБ в MongoDB

У нас есть основанная на файле программа, которую мы хотим преобразовать для использования документной базы данных, конкретно MongoDB. Проблема, MongoDB ограничен 2 ГБ на 32-разрядных машинах (согласно http://www.mongodb.org/...
вопрос задан: 7 June 2010 10:49