bigdata

4зной

4ответ

Пути Pythonic для отправки содержимого файла в канал и подсчета # строк за один шаг

с данным файлом> 4gb myfile.gz, мне нужно загрузить его в трубу для загрузки с помощью быстрой загрузки Teradata. Мне также нужно подсчитать количество строк в файле. В идеале, я хочу сделать только о

5зной

1ответ

Лучший хранилище данных для огромных данных с большим количеством чтений и записей

Мне нужно хранить около 100 миллионов записей в базе данных. Около 60-70% из них будут удаляться ежедневно, и такое же количество записей вносится ежедневно. Я чувствую, что такая документальная база

1зной

2ответ

Какое приблизительное количество полуструктурированных данных достаточно для настройки кластера Hadoop?

Я знаю, Hadoop - это не только альтернатива для обработки полуструктурированных данных в целом - я могу многое сделать с помощью простых разделенных разделом данных и набора инструментов unix (cut, gr

4зной

2ответ

Регистрация больших объемов действий в производственном приложении MVC/SQL

Мы счастливы пользователям инфраструктуры ASP.NET MVC и SQL Server, в настоящее время использующим LINQ-to-SQL. Он удовлетворяет наши потребности с помощью приложения, ориентированного на потребителя,

40зной

2ответ

С чего начать с анализа больших данных

Я давно пользовался R и недавно начал работать с Python. Используя обычные системы РСУБД для хранилищ данных и R/Python для хрустания числа, я чувствую, что теперь нужно замалчивать руки с помощью ана

3зной

1ответ

Bigglm in R: Ограничения и улучшения исходного кода (например, вызов в Fortran)

Я недавно использовал R для запуска обобщенной линейной модели (GLM) в 100-мегабайтном csv-файле (9 миллионов строк по 5 столбцов). Содержимое этого файла включает в себя 5 столбцов, называемых depvar