csv- все статьи тега ➜ страница 4


Как извлечь один столбец из файла csv

Если у меня есть csv-файл, есть ли быстрый способ bash распечатать содержимое только одного столбца? Можно с уверенностью предположить, что каждая строка имеет одинаковое количество столбцов, но содержание каждого столбца будут иметь разную длину. ...

Загрузите CSV-файл с помощью Spark

Я новичок в Spark, и я пытаюсь прочитать данные CSV из файла с Spark. Вот что я делаю : sc.textFile('file.csv') .map(lambda line: (line.split(',')[0], line.split(',')[1])) .collect() Я ожидал бы, что этот вызов даст мне список из двух первых столбцов моего файла, но я получаю эту ошибку: File "<ipython-input-60-73ea98550983>", line 1, in <lambda> IndexError: list index out of range хотя мой CSV-файл в более чем один столбец. ...

Значение огромное.CSV-файл

в настоящее время я пытаюсь прочитать данные.csv файлы в Python 2.7 с до 1 миллиона строк и 200 столбцов (файлы в диапазоне от 100 МБ до 1,6 Гб). Я могу сделать это (очень медленно) для файлов с менее чем 300 000 строк, но как только я иду выше, что я получаю ошибки памяти. Мой код выглядит так: def getdata(filename, criteria): data=[] for criterion in criteria: data.append(getstuff(filename, criteron)) return data def getstuff(filename, criterion): import csv data= ...

Как конвертировать JSON в формат CSV и хранить в переменной

у меня есть ссылка, которая открывает данные json в broswer, но, к сожалению, я понятия не имею, как его читать. Есть ли способ преобразовать эти данные с помощью формата javascript Comma Separate (csv) и сохранить его в переменной javascript. Я только начал учиться и не имею абсолютно никакого понятия о json, было бы здорово, если бы кто-то мог написать сценарий для него. данные выглядят так: { "count": 2, "items": [{ "title": "Apple iPhone 4S Sale Cancelled in Beijing Amid Chaos (Des ...

Как избежать запятой и двойной кавычки одновременно для CSV-файла?

Я пишу Java-приложение для экспорта данных из Oracle в csv-файл к сожалению, содержание данных может быть довольно сложно. Все еще запятая является разделителем, но некоторые данные в строке могут быть такими: IDFN LNвозрасткомментарий 123, Джон, Смит, 39, я сказал: "Эй, я 5'10"." так это одна из строк на comment колонка: Я сказал: "Эй, я 5'10"." не шучу, мне нужно показать выше комментарий без компромиссов в excel или open office из CSV-файла, сгенерированного Java, и, конечн ...

"Строка содержит нулевой байт" в CSV reader (Python)

Я пытаюсь написать программу, которая смотрит на .Файл CSV (вход.csv) и переписывает только те строки, которые начинаются с определенного элемента (исправлено.csv), как указано в текстовом файле (вывод.формат txt.) вот как выглядит моя программа прямо сейчас: import csv lines = [] with open('output.txt','r') as f: for line in f.readlines(): lines.append(line[:-1]) with open('corrected.csv','w') as correct: writer = csv.writer(correct, dialect = 'excel') with open('input.c ...

Разбор CSV-файла с полями заголовка в качестве атрибутов для каждой строки

Я хотел бы проанализировать CSV-файл, чтобы каждая строка обрабатывалась как объект с заголовком-строкой, являющейся именами атрибутов в объекте. Я мог бы написать это, но я уверен, что это уже там. вот мой CSV вход: "foo","bar","baz" 1,2,3 "blah",7,"blam" 4,5,6 код будет выглядеть примерно так: CSV.open('my_file.csv','r') do |csv_obj| puts csv_obj.foo #prints 1 the 1st time, "blah" 2nd time, etc puts csv.bar #prints 2 the first time, 7 the 2nd time, etc end с модулем CSV Rub ...

Как загрузить tsv-файл в фрейм данных Pandas?

Я новичок в python и панд. Я пытаюсь получить tsv файл загружен в панд DataFrame. Это то, что я пытаюсь и ошибка, которую я получаю: >>> df1 = DataFrame(csv.reader(open('c:/~/trainSetRel3.txt'), delimiter='t')) Traceback (most recent call last): File "<pyshell#28>", line 1, in <module> df1 = DataFrame(csv.reader(open('c:/~/trainSetRel3.txt'), delimiter='t')) File "C:Python27libsite-packagespandascoreframe.py", line 318, in __init__ raise PandasError ...

Панды читать CSV-файл из URL

Я использую Python 3.4 с IPython и имею следующий код. Я не могу прочитать csv-файл из данного URL: import pandas as pd import requests url="https://github.com/cs109/2014_data/blob/master/countries.csv" s=requests.get(url).content c=pd.read_csv(s) У меня есть следующие ошибки "ожидаемый путь к файлу или файлоподобный объект, получил тип" Как я могу это исправить? ...

Как пропустить заголовок из CSV-файлов в Spark?

предположим, я даю три пути файлов к контексту Spark для чтения, и каждый файл имеет схему в первой строке. Как мы можем пропустить строки схемы из заголовков? val rdd=sc.textFile("file1,file2,file3") теперь, как мы можем пропустить строки заголовка из этого rdd? ...

Как скопировать из CSV-файла в таблицу PostgreSQL с заголовками в CSV-файле?

Я хочу, чтобы скопировать CSV-файла в таблицу базы данных Postgres. В этой таблице около 100 столбцов, поэтому я не хочу их переписывать, если мне это не нужно. Я использую copy table from 'table.csv' delimiter ',' csv; команда, но без таблицы, созданной я получаю ERROR: relation "table" does not exist. Если я добавляю пустую таблицу, я не получаю ошибки, но ничего не происходит. Я попробовал эту команду два или три раза, и не было никаких выходных данных или сообщений, но таблица не была обно ...

загрузите csv в 2D матрицу с помощью numpy для построения графика

учитывая этот CSV-файл: "A","B","C","D","E","F","timestamp" 611.88243,9089.5601,5133.0,864.07514,1715.37476,765.22777,1.291111964948E12 611.88243,9089.5601,5133.0,864.07514,1715.37476,765.22777,1.291113113366E12 611.88243,9089.5601,5133.0,864.07514,1715.37476,765.22777,1.291120650486E12 Я просто хочу загрузить его в виде матрицы / ndarray с 3 строками и 7 столбцами. Однако по какой-то причине все, что я могу получить из numpy, - это ndarray с 3 строками (по одной на строку) и без столбцов. ...