1
ответ
Вычисления MD5SUM больших файлов в C#
Я использую следующий код для вычислений MD5SUM файла - байт [] b = Система. IO.File. ReadAllBytes (файл); представьте сумму в виде строки = BitConverter. ToString (новый MD5CryptoServiceProvider ().ComputeHash (b)); Это работает...
вопрос задан: 19 March 2010 19:10
1
ответ
Может кто-то обеспечивать пример поиска, чтения и записи a> файл на 4 ГБ с помощью повышения iostreams
Я читал, то повышение iostreams, предположительно, поддерживает доступ на 64 бита к большим файлам полупереносной путь. Их FAQ упоминает функции смещения на 64 бита, но нет никаких примеров о том, как использовать их. Имеет...
вопрос задан: 19 March 2010 15:48
1
ответ
Python: разрезание очень большого двоичного файла
Скажите, что у меня есть двоичный файл 12 ГБ, и я хочу нарезать 8 ГБ из середины его. Я знаю индексы положения, между которыми я хочу сократить. Как я делаю это? Очевидно, 12 ГБ не впишутся в память, это...
вопрос задан: 19 March 2010 15:47
0
ответов
Есть ли хорошие хостинговые услуги для больших репозиториев Subversion?
Небольшая команда, частью которой я являюсь, работает над игрой, и мы столкнулись с препятствием, когда дело доходит до контроля версий. Исходный код в настоящее время размещается на Github как временное решение, ...
вопрос задан: 18 March 2019 14:59
0
ответов
Как правильно обрабатывать большие файлы (4 ГБ) и переносить их на C ++?
В моей карьере мне никогда не приходилось иметь дело с такими большими файлами, как центральный аспект моего приложения, и я немного озадачен. Мое приложение будет записывать много вещей в файл, и оно может вырасти до ...
вопрос задан: 16 January 2019 13:09
0
ответов
Расширение больших файлов для git [закрыто]
Mercurial недавно добавил официальное расширение больших файлов. Он решает проблемы, связанные с хранением файла, который по сути не является версионируемым, типичным примером этого являются ресурсы видеоигры). ...
вопрос задан: 5 March 2018 11:56
0
ответов
Как определить поддержку X-Accel-Redirect (Nginx) / X-Sendfile (Apache) в PHP?
О приложении Я работаю над приложением электронной коммерции в PHP. Для обеспечения безопасности URL-адреса ссылки для скачивания продуктов хранятся за PHP. Есть файл, скажем, download.php, который принимает несколько параметров ...
вопрос задан: 23 May 2017 12:17
0
ответов
Оценка количества слов в файле без чтения полного файл
У меня есть программа для обработки очень больших файлов. Теперь мне нужно показать индикатор выполнения, чтобы показать ход обработки. Программа работает на уровне слов, читает по одной строке за раз, разбивая ее на ...
вопрос задан: 23 May 2017 12:11
0
ответов
Чтение и обработка большого текстового файла размером 25 ГБ
Мне нужно прочитать большой текстовый файл, скажем, 25 ГБ, и мне нужно обработать этот файл в течение 15-20 минут. Этот файл будет иметь несколько разделов верхнего и нижнего колонтитула. Я попробовал CSplit разделить этот файл на основе ...
вопрос задан: 23 May 2017 12:08
0
ответов
PHP x86 Как получить размер файла размером> 2 ГБ без внешней программы?
Мне нужно получить размер файла размером более 2 ГБ. (тестирование на файле размером 4,6 Гб). Есть ли способ сделать это без внешней программы? Текущий статус: Ошибка файла (), stat () и fseek ()
...
вопрос задан: 23 May 2017 11:54
0
ответов
HTML5 -Как транслировать большие файлы.mp4?
Я пытаюсь настроить очень простую страницу html5, которая загружает видео.mp4 размером 20 МБ. Похоже, что браузеру нужно загрузить все, а не просто воспроизвести первую часть видео...
вопрос задан: 23 May 2017 11:33
0
ответов
Python Random Access File
Есть ли тип файла Python для доступа к случайным строкам без обхода всего файла? Мне нужно искать в большом файле, прочитать все это в памяти было бы невозможно. Любые типы или ...
вопрос задан: 10 April 2017 18:46
0
ответов
Чтение строк по номерам из большого файла
У меня есть файл с 15 миллионами строк (не помещается в памяти). У меня также есть небольшой вектор номеров строк - строк, которые я хочу извлечь. Как я могу прочитать строки за один проход? Я надеялся ...
вопрос задан: 9 October 2016 13:47
0
ответов
Как я могу предотвратить сбой загрузки больших файлов Apache/PHP?
Недавно я установил портал загрузки PHP на один из наших серверов. Все работает нормально, но пользователи не могут загружать большие файлы (~20 МБ ). Я установил следующие настройки на чрезвычайно большие значения или...
вопрос задан: 15 September 2016 09:16
0
ответов
Эффективно передать большой файл (до 2 ГБ) на GPU CUDA?
Я работаю над программой с ускорением на графическом процессоре, которая требует чтения всего файла переменного размера. Мой вопрос, каково оптимальное количество байтов для чтения из файла и передачи в ...
вопрос задан: 21 January 2016 14:51
0
ответов
Использование Python Iterparse для больших файлов XML
Мне нужно напишите парсер на Python, который может обрабатывать некоторые очень большие файлы (> 2 ГБ) на компьютере без большой памяти (всего 2 ГБ). Я хотел использовать iterparse в lxml для этого. Мой файл ...
вопрос задан: 19 November 2015 22:14
0
ответов
Есть ли способ получить имена рабочих листов из файлов Excel размером 20 МБ + с помощью PHPExcel?
Я использую PHPExcel для чтения данных из файлов Excel. С помощью следующего кода я могу прочитать один конкретный лист из файла Excel размером 3 МБ всего за пару секунд. Прекрасно работает. Однако я ...
вопрос задан: 4 September 2015 03:45
0
ответов
Как избежать OutOfMemoryError при загрузке большого файла с помощью клиента Джерси
Я использую клиент Джерси для запроса на основе http -. Это хорошо работает, если файл небольшой, но возникает ошибка, когда я публикую файл размером 700 МБ :Исключение в потоке «основной» java.lang.OutOfMemoryError :...
вопрос задан: 1 May 2015 22:04
0
ответов
gitignore по размеру файла?
Я пытаюсь реализовать Git для управления творческими ресурсами (Photoshop, Illustrator, Maya и т. Д.) ), и я хотел бы исключить файлы из Git на основе размера файла, а не расширения, местоположения и т. д. Например, ...
вопрос задан: 16 September 2014 21:06
0
ответов
обрабатывать большой файл с помощью многопоточности
На диске есть довольно большой файл (>10G ), каждая строка внутри файла состоит из номера строки -и имени человека, вот так :1 Джейн 2 перка 3 Симе 4 перка.... Я должен прочитать этот большой файл,...
вопрос задан: 3 February 2014 14:04
0
ответов
Удалить первые X строк из файла PHP
Мне интересно, знает ли кто-нибудь, как это можно сделать в PHP. Я запускаю сценарий, который включает в себя открытие файла, получение первых 1000 строк, некоторые действия с этими строками, затем php...
вопрос задан: 20 September 2012 17:14
0
ответов
Загрузка текстовых данных объемом 12 МБ с URL-адреса и сохранение на SD-карту … Проблема с памятью кучи. любое решение?
Я использую оба следующих , но не работаю с огромными данными .. из 12 МБ char[] chars = new char[1024];
внутр. лен;
while((len=buffer.read(chars))>0) { data.append(chars,0,len);
} и в то время как ((строка = ...
вопрос задан: 27 July 2012 07:49
0
ответов
Импортировать большой необычный файл в R
Плакат впервые здесь, поэтому я постараюсь как можно яснее объяснить, какая помощь мне нужна. Я новичок в R, и это мой первый реальный опыт независимого программирования. У меня есть биржевые тиковые данные...
вопрос задан: 26 July 2012 12:23
0
ответов
Получить большой размер файла в C
Прежде чем кто-то пожалуется на "дубликат", я проверил SO довольно тщательно, но, похоже, пока нет чистого ответа, хотя вопрос выглядит довольно простым. Я ищу переносимый код на C, ...
вопрос задан: 26 July 2012 00:14
0
ответов
C #Сохранение огромных изображений
У меня возникают трудности при попытке сохранить огромные изображения с помощью C#(Я говорю о более чем одном гигабайте ). В основном я пытаюсь сделать это по частям -У меня есть около 200 исходников растровых изображений, и мне нужен способ...
вопрос задан: 24 June 2012 15:51
0
ответов
Удаление символов, отличных от UTF-8, из большого текстового файла.
Я работаю над текстовым файлом JSON объемом 1 гигабайт, который пытаюсь разобрать с помощью Java. Однако синтаксический анализатор выдает исключение, потому что он сталкивается с символом 'ñ', генерирующим это исключение: Exception ...
вопрос задан: 19 June 2012 16:40
0
ответов
Загрузка больших файлов с помощью WebSocket
Я пытаюсь загрузить большие файлы (размером не менее 500 МБ, предпочтительно до нескольких ГБ ), используя API WebSocket. Проблема в том, что я не могу понять, как написать "отправить этот фрагмент файла, освободить...
вопрос задан: 18 June 2012 09:27
0
ответов
python: читать строки из сжатых текстовых файлов
Это легко прочитать строку из текстового файла, сжатого gz, с помощью python без полного извлечения файла? У меня есть файл text.gz размером около 200 МБ. Когда я извлекаю его, он становится 7,4 ГБ. А это...
вопрос задан: 12 May 2012 19:02
0
ответов
Java: InputStream слишком медленный для чтения огромных файлов.
Мне нужно прочитать посимвольно файл размером 53 МБ. Когда я делаю это на С++ с помощью ifstream, это выполняется за миллисекунды, но с использованием Java InputStream это занимает несколько минут. Нормально ли, что Java...
вопрос задан: 6 May 2012 20:23
0
ответов
Почему Perl без потоков -не использует тип off64 _t по сравнению с типом с поддержкой потоков -?
Моей первоначальной задачей было установить мод _perl 2.0.6 + Apache 2.2.22. Процесс остановился с кучей ошибок связанных с off64_t при компиляции мода_perl. Итак, я начал копать глубже. Во-первых, у меня есть...
вопрос задан: 6 May 2012 12:29