Этот ответ применяется, когда строка вводится вручную, а не когда она откуда-то читается.
Традиционный CSV переменной ширины не может быть прочитан для хранения данных в виде строковой переменной. Рекомендуется использовать данные фиксированной ширины, разделенные конвейером, особенно для использования внутри файла .py
. Различные IDE и редакторы могут иметь плагин для форматирования текста, разделенного вертикальной чертой, в аккуратную таблицу.
Сохраните следующее в служебном модуле, например util/pandas.py
. Пример включен в строку документации функции.
import io
import re
import pandas as pd
def read_psv(str_input: str, **kwargs) -> pd.DataFrame:
"""Read a Pandas object from a pipe-separated table contained within a string.
Input example:
| int_score | ext_score | eligible |
| | 701 | True |
| 221.3 | 0 | False |
| | 576 | True |
| 300 | 600 | True |
The leading and trailing pipes are optional, but if one is present,
so must be the other.
`kwargs` are passed to `read_csv`. They must not include `sep`.
In PyCharm, the "Pipe Table Formatter" plugin has a "Format" feature that can
be used to neatly format a table.
Ref: https://stackoverflow.com/a/46471952/
"""
substitutions = [
('^ *', ''), # Remove leading spaces
(' *$', ''), # Remove trailing spaces
(r' *\| *', '|'), # Remove spaces between columns
]
if all(line.lstrip().startswith('|') and line.rstrip().endswith('|') for line in str_input.strip().split('\n')):
substitutions.extend([
(r'^\|', ''), # Remove redundant leading delimiter
(r'\|$', ''), # Remove redundant trailing delimiter
])
for pattern, replacement in substitutions:
str_input = re.sub(pattern, replacement, str_input, flags=re.MULTILINE)
return pd.read_csv(io.StringIO(str_input), sep='|', **kwargs)
Нерабочие альтернативы
Приведенный ниже код не работает должным образом, потому что он добавляет пустой столбец как с левой, так и с правой стороны.
df = pd.read_csv(io.StringIO(df_str), sep=r'\s*\|\s*', engine='python')
Что касается read_fwf
, он фактически не использует столько дополнительных kwarg, которые read_csv
принимает и использует. Таким образом, его вообще не следует использовать для данных, разделенных конвейером.
person
Acumenus
schedule
28.09.2017