PythonとpandasでCSVファイルを読み込もうとしたら、いつもはうまくいくpd.read_csv()が突然エラーを吐き出して、処理が止まってしまった…。そんな経験はありませんか？特に、様々なシステムから出力された生データを扱う際によく遭遇するのがこの問題です。

こんにちは。スーパーソフトウエア東京オフィス 技術部の加藤です。 Python でデータ分析といえば、真っ先に思い浮かぶのは Pandas です。 長年の実績と豊富なエコシステムに支えられた、定番のデータ分析ライブラリです。 Pandas の名前の由来については ...

次にCSVファイルをPythonで読み込んで、中身のデータを確認していきます。分析するのは前回の記事でも使ったコンビニエンスストアの売り上げと関連情報をまとめたデータ「sales_data.csv」です。 今回の分析に利用するデータの中身。コンビニエンスストアの ...

本記事はFIXERが提供する「cloud.config Tech Blog」に掲載された「pythonで大量のデータの高速処理入門」を再編集したものです。 Pythonって遅くないですか？ 23年度新卒入社の幸村です。 今回は自分の研究のときに使ったものについて紹介です。 自己紹介と研究の ...

門脇@satoru_kadowakiです。今月のPython Monthly Topicsでは、Rust製の高速データフレームライブラリ Polarsについて紹介します。 Polarsとは Pythonでデータ分析に使用される主なライブラリに pandasがあります。Polarsはpandasと同様にデータフレームというデータ構造 ...

前回、Jupyterノートブック上で、CSVファイルを読み込み、棒グラフを描画する方法を紹介した。今回は、CSVファイルの任意のデータを取り出したり、さらに、いろいろなグラフを描画する方法を紹介する。 人口の増減を確認しよう 前回より、Pandasという ...

最初に、PythonとExcelで「どちらが気軽に使えるか」を比べてみよう。言うまでもなく、Excelを使う時は、スプレッドシートのセルにデータを入力し、マウスで操作を選んでいくというスタイルだ。これに対して、Pythonはエディタでプログラムを書いて実行する ...

AI（人工知能）開発のプログラミング言語として高い人気を誇るPython。データ処理や機械学習のためのライブラリも豊富です。本特集では5回にわたって、Pythonの実習を通じて実際の機械学習モデルの開発方法を解説していきます。 例題で取りあげるのは ...