. . . . . . . . . . . . 401 2.4.19 SAS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 404 2.4.20 SPSS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 404 2.4.21 Other file formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 405 2.4.22 Performance considerations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1019 3.1.2 Flat file . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1022 3

. . . . . . . . . . . . 401 2.4.19 SAS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 404 2.4.20 SPSS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 404 2.4.21 Other file formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 405 2.4.22 Performance considerations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1019 3.1.2 Flat file . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1022 3

. . . . . . . . . . . . 384 2.4.19 SAS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 387 2.4.20 SPSS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 387 2.4.21 Other file formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 388 2.4.22 Performance considerations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 977 3.1.2 Flat file . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 980 3.1

. . . . . . . . . . . . 404 2.4.19 SAS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 406 2.4.20 SPSS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 407 2.4.21 Other file formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 407 2.4.22 Performance considerations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1027 3.1.2 Flat file . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1030 3

. . . . . . . . . . . . 403 2.4.19 SAS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 406 2.4.20 SPSS formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 406 2.4.21 Other file formats . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 407 2.4.22 Performance considerations . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1027 3.1.2 Flat file . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1030 3

. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1033 3.1.2 Flat file . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1036 3 introduction tutorial To user guide Straight to tutorial... pandas supports the integration with many file formats or data sources out of the box (csv, excel, sql, json, parquet,...). Importing data from each CSV file. In [2]: titanic = pd.read_csv("data/titanic.csv") pandas provides the read_csv() function to read data stored as a csv file into a pandas DataFrame. pandas supports many different file formats

Better support for compressed URLs in read_csv . . . . . . . . . . . . . . . . . 13 1.3.1.6 Pickle file I/O now supports compression . . . . . . . . . . . . . . . . . . . . . . . 13 1.3.1.7 UInt64 Support . . . . . . . . . . . . . . . . . . . . . . . . . 22 1.3.2.1 Possible incompatibility for HDF5 formats created with pandas < 0.13.0 . . . . . . 22 i 1.3.2.2 Map on Index types now return other Index unique will now be consistent with extension types . . . . . . . . . . . . . . . . 25 1.3.2.5 S3 File Handling . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 26 1.3.2.6 Partial

. . . . . . . . . . . . . . . . . . . . . . . . . . . 8 1.2.1.1 Integration with Apache Parquet file format . . . . . . . . . . . . . . . . . . . . . 8 1.2.1.2 infer_objects type conversion . . . . Better support for compressed URLs in read_csv . . . . . . . . . . . . . . . . . 42 1.5.1.6 Pickle file I/O now supports compression . . . . . . . . . . . . . . . . . . . . . . . 42 1.5.1.7 UInt64 Support . . . . . . . . . . . . . . . . . . . . . . . . . 51 1.5.2.1 Possible incompatibility for HDF5 formats created with pandas < 0.13.0 . . . . . . 51 1.5.2.2 Map on Index types now return other Index types

now be converted to pyarrow (>=0.15.0), which means that it is supported in writing to the Parquet file format when using the pyarrow engine (GH28368). Full roundtrip to parquet (writing and reading back Added new writer for exporting Stata dta files in versions 118 and 119, StataWriterUTF8. These files formats support exporting strings containing Unicode characters. Format 119 supports data sets with more Dependencies and Optional dependencies for more. 1.5.13 Build Changes Pandas has added a pyproject.toml file and will no longer include cythonized files in the source distribution uploaded to PyPI (GH28341,

Better support for compressed URLs in read_csv . . . . . . . . . . . . . . . . . 11 1.2.1.6 Pickle file I/O now supports compression . . . . . . . . . . . . . . . . . . . . . . . 12 1.2.1.7 UInt64 Support . . . . . . . . . . . . . . . . . . . . . . . . . 21 1.2.2.1 Possible incompatibility for HDF5 formats created with pandas < 0.13.0 . . . . . . 21 1.2.2.2 Map on Index types now return other Index types unique will now be consistent with extension types . . . . . . . . . . . . . . . . 23 1.2.2.5 S3 File Handling . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24 1.2.2.6 Partial