Pythonの基本機能と important conceptsの nắm tắt
Pythonにおける代表的な機能とよく出遭う課題の要点を整理します。
JSONのエンコード・デコード処理
json.dumps()：PythonオブジェクトをJSON文字列に変換します。主に辞書型を文字列にシリアライズする用途で用いられます。
json.loads()：JSON文字列をPythonの辞書型などにデシリアライズします。
online JSON validator: JSON.cn
Python 2 と Python 3にお ...
7月20日 03:31 投稿
文字エンコーディングとファイル操作
文字エンコーディングの基礎
コンピュータは内部で二進数しか認識できませんが、ユーザーは様々な言語の文字を見ています。文字エンコーディングは、人間の文字と数値の対応関係を記録したデータです。
エンコーディングの歴史
1. ASCIIの独占時代
コンピュータはアメリカで発明され、英語文字を認識するためにASCIIコードが開発されました。ASCIIは英文字と記号を数値に ...
7月18日 21:28 投稿
MySQLにおける文字セットと照合順序の実践的設定ガイド
MySQLの文字処理は、CHARACTER SET（文字セット）とCOLLATION（照合順序）という二つの密接に関連する概念によって制御されます。これらを正しく理解・設定しないと、文字化け、検索結果の不整合、ソート順の予期せぬ変化、インデックス効率の低下など、アプリケーション全体に影響を及ぼす問題が発生します。
サーバー全体の文字エンコーディングを統一する
MySQL 8.0以 ...
7月17日 22:37 投稿
Pythonのテキストエンコーディング問題を自動修正するftfyライブラリ
インストール
ftfyはpipを使用して簡単にインストールできます。
pip install ftfy
特徴
自動的なテキスト修正：誤ったUnicodeエンコーディングを自動的に検出して修正します。
多様なエンコーディングのサポート：複数のエンコーディングエラーに対応しています。
柔軟性：さまざまな設定オプションを提供し、異なるニーズに適応します。
基本機能の詳細
自動 ...
7月11日 19:56 投稿
Javaで不可視文字を文字列に挿入する方法
Javaでは、文字列中に視覚的に表示されない文字（不可視文字）を挿入することで、出力の整形や特殊な処理を実現できます。代表的な不可視文字にはタブ（U+0009）、改行（U+000A）、ゼロ幅スペース（U+200B）などがあります。これらの文字は、コードの可読性を高めたり、データの埋め込みやフィルタリング対策に利用されます。
1. エスケープシーケンスによる挿入
Javaでは ...
7月4日 20:49 投稿
Unicode符号化方式の完全理解
ASCII符号体系（1バイト構成、標準ASCIIはUS-ASCIIまたは7ビットASCIIとも呼ばれ128文字、拡張ASCIIは256文字）
C言語を学習した際、コンピュータ内部のメカニズムについていくつか理解しました。すべての情報が最終的にバイナリ文字列として表現されることを知り、各ビットが0と1の2つの状態を持つことで、異なる組み合わせによって世界中のあらゆるものを表現できると気 ...
6月27日 22:40 投稿
ユーザー入力を信じるな：不可視文字が引き起こしたバグ
背景
ある日、サーバーから招待コードを受け取り、そのコードを使ってエミュレータで次の操作を行うプログラムを作成しました。初めての正式なプログラムでしたが、ユーザーの行動に対する懸念はありました（それでも不十分でした）。サーバーメッセージを受信後、メッセージの前後と中間のスペースを削除しました（このシナリオではメッセージに中間スペースが存在するべ ...
6月5日 17:13 投稿
Python 2におけるJSONレスポンスの中国語文字がUnicodeエスケープシーケンスで表示される問題
Python 2では、HTTPレスポンスとしてJSONデータを送信する際、中国語などの非ASCII文字が`\uXXXX`という形式で表示されることがあります。これは、JSONライブラリのデフォルトの動作によるものです。
Python 2の文字列処理は、バイト列（bytes）とUnicode文字列の間で変換を行います。`decode`メソッドはバイト列を指定されたエンコーディングでUnicodeに変換し、`encode` ...
6月4日 18:11 投稿