tag utf-8

標籤
貢獻24
20
04:48 PM · Nov 21 ,2025
okfine 頭像 tosmile 頭像 ddup365 頭像 amc 頭像 tomson 頭像 q_bit 頭像 walks 頭像 zhiqingchun_5f05a5d69bd9e 頭像 adamcjm 頭像 zhujiu 頭像 yidianyihengchang 頭像 onlythinking 頭像

@utf-8 / 博客 RSS 訂閱

jeffid 頭像

Jeffid - PHP字符串移除emoji字符

前言 在做一個電商項目使用微信支付發起訂單付款時，遇到遇到因商品描述字段含有 emoji 字符微信接口返回字符集超出UTF-8範圍的錯誤提示。 於是特意在網上查找了些解決方案，有通過正則過濾的，也有通過字符集過濾的，經過權衡我最終在項目中採用的是字符集過濾的方案。 正則過濾方案 解決原理是UTF-8編碼長度超過3個字節(一般中文3個字節)的全部替換成空字符串 $str = '平安，喜樂。PA

gbk , php , utf-8 , emoji

收藏 評論

fuming_59a2de0b42252 頭像

付明 - 一次徹底搞清unicode、utf8和utf8mb4

字符集和字符編碼 字符集（CCS: Coded Character Set）： 就是一個表格，表示每個字符對應數字（通常用16進製表示），比如unicode字符集中，數字1對應的就是U+00031，字母a對應的就是U+00061。 字符編碼（CEF：Character Encoding Form）： 因為計算機只認識0和1，所以計算機在存儲字母a（U+00031）的時候，不能直接存儲。所以就需

utf8mb4 , utf-8 , 編碼 , unicode , 字符集

收藏 評論

gdlf 頭像

GoodLifeBro - 有關ASCII、Unicode、UTF-8、GBK的一些知識

擴展知識： byte（字節）：計算機中基本的存儲單元 bit（比特）：計算機中最小的存儲單位 1byte=8bit 字：計算機進行數據處理時，一次存取、加工和傳送的數據長度稱為字（word），一個字通常由一個或者多個字節構成。 16位計算機：一個字長就是16位，兩個字節。 32位計算機：一個字長度是32位，四個字節。 瞭解：ASCII碼 在計算機內部

ascii , utf-8 , 編碼 , JAVA , unicode

收藏 評論

yudinghou 頭像

禹鼎侯 - 編碼格式介紹及C語言處理漢字編碼

什麼是編碼格式 從一個小問題引入 我們在學習C語言的時候，有一道必做的題目是將大寫字母轉換成小寫，相信有點基礎的同學都能不加思索的寫出下面的代碼： char toLower(char upper){ if (upper = 'A' upper = 'Z'){ return upper + 32; }else{ return upper; }

iconv , gbk , utf-8 , 編碼 , c

收藏 評論

vivo_tech 頭像

vivo互聯網技術 - 計算機字符編碼的前世今生

一、前言 有人丟給你下面這張圖，如果你能清楚地説明它們之間的關係以及用途，那麼你對字符編碼的理解肯定過關了。 不知道看了上面這張圖，是否有混亂的感覺，本文試着給你梳理、講透這些孤立的幾個單詞之間聯繫...... 二、關於字符編碼，你所需要知道的 2.1 ASCII（寡頭壟斷時期） 計算機內部，所有信息最終都是一個二進制值。每一個二進制位（bit）有0和1兩種狀態，8個二進制位稱之為1個字節。把鍵

ascii , utf-8 , 字符編碼 , unicode , 字符集

收藏 評論

gongzhengyang 頭像

龔正陽 - powershell配置utf-8編碼

臨時修改為utf-8 PS chcp 65001 通過配置文件永久修改 查看powershell配置文件位置，如果不存在則去創建 PS $PROFILE 在配置文件中寫入 $OutputEncoding = [console]::InputEncoding = [console]::OutputEncoding = New-Object System.Text.UTF8Encoding 重新打開P

windows , utf-8 , PowerShell , command-line

收藏 評論

codelogs 頭像

扣釘日記 - 字符編碼解惑

原創：打碼日記（微信公眾號ID：codelogs），歡迎分享，轉載請保留出處。 簡介 現代編程語言都抽象出了String字符串這個概念，注意它是一個高級抽象，但是計算機中實際表示信息時，都是用的字節，所以就需要一種機制，讓字符串與字節之間可以相互轉換，這種轉換機制就是字符編碼，如GBK，UTF-8 所以可以這樣理解字符串與字符編碼的關係: 字符串是一種抽象，比如java中的String類

utf-8 , 字符編碼 , unicode

收藏 評論

zmh929 頭像

Zhanghouhou - 字符集詳解

字符集相關的概念 字符集編碼 charset 是 character set 的簡寫，即字符集。 encoding 是 charset encoding 的簡寫，即字符集編碼，簡稱編碼。 編號 編碼 字符 – 編號 – 編碼 編號不涉及具體使用多少字節來表示、是用定長還是變長方案等細節問題。編號僅僅是一個抽象的概念，將具體字符映射到一個唯一的code上，是把字符數字化的一個過程。

utf-8 , 字符編碼 , unicode

收藏 評論

apollo008star 頭像

apollo008 - C++-Unicode字符utf8編碼與碼點code point值互轉編碼示例

#include locale #include codecvt #include cassert #include string #include vector /* *注意這裏必須用std::codecvt_utf8char32_t和std::wstring_convertstd::codecvt_utf8char32_t, char32_t， *含義是將utf8編碼的字節字符串 轉化為

STL , utf-8 , wstring , unicode

收藏 評論

guyu_5d2e806c57ac8 頭像

darjun - 你不知道的 Go 之 string

簡介 字符串（string）是 Go 語言提供的一種基礎數據類型。在編程開發中幾乎隨時都會使用。本文介紹字符串相關的知識，幫助你更好地理解和使用它。 底層結構 字符串底層結構定義在源碼runtime包下的 string.go 文件中： // src/runtime/string.go type stringStruct struct { str unsafe.Pointer len int

utf-8 , youdontknowgo , string , unicode , go

收藏 評論

sctec 頭像

樑柱 - 簡述字符集與編碼

由於計算機內部只能識別和處理二進制代碼，所以字符都必須按照一定的規則用一組二進制編碼來表示。 在學習編碼之前，需要先了解一下 字符集與編碼的關係： 字符集(Character Set)是字符的集合，定義系統能處理哪些字符；編碼(Encoding)則規定這些字符在計算機內部的表示方式。 字符編碼ASCII碼（編碼字符集） 目前，國際上普遍採用的一種字符系統是7位二進制編碼的ASCII碼，它可

utf-8 , ascii碼 , unicode , url

收藏 評論

invalidnull 頭像

註銷 - ABAP 調用第三方 API，遇到亂碼該怎麼辦？

這是 Jerry 2022 年第二篇原創文章，也是本公眾號第 370 篇原創文章。 之前有一個朋友在知乎上向我諮詢過這個問題，我覺得很有代表性，所以專門用一篇文章來講述一些相關知識點。 先看這位朋友遇到的具體問題。 用 Postman 調用第三方接口，裏面的中文字符能夠正常顯示。 然而當用 ABAP 的 HTTP 工具類 CL_HTTP_CLIENT 的 response-get_data( )

編碼規範 , 亂碼 , utf-8 , 編碼 , abap

收藏 評論

okfine 頭像

okfine - SqlServer中將字符串轉utf-8的函數、支持中文的UrlEncode函數

將字符串轉utf-8的函數 SqlServer中字符串是ucs2格式（接近Unicode），如需要轉為utf-8，需要進行轉換： create function fn_toUtf8Bin(@str nvarchar(max)) returns varbinary(max) as begin DECLARE @ucs2 varbinary(max), @r varbinar

urlencode , utf-8 , 中文 , sqlserver-2008

收藏 評論

onlythinking 頭像

編程碼農 - 記錄一個關於 GBK 編碼的問題

背景 區分 UTF-8 和 GBK GBK 是在國家標準 GB2312 基礎上擴容後兼容 GB2312 的標準，專門用來解決中文編碼的，是雙字節的，不論中英文都是雙字節的。 UTF-8 是一種國際化的編碼方式，包含了世界上大部分的語種文字（簡體中文字、繁體中文字、英文、日文、韓文等語言），也兼容 ASCII 碼。 雖然 GBK 比 UTF-8 少節省兩個字節，但是 GBK 只包含中文，UTF-8

gbk , utf-8 , JAVA

收藏 評論

yidianyihengchang 頭像

Gopher指北 - 深入剖析go中字符串的編碼問題——特殊字符的string怎麼轉byte？

來自公眾號：新世界雜貨鋪 前言 前段時間發表了Go中的HTTP請求之——HTTP1.1請求流程分析，所以這兩天本來打算研究HTTP2.0的請求源碼，結果發現太複雜就跑去逛知乎了，然後就發現了一個非常有意思的提問“golang 特殊字符的string怎麼轉成[]byte?”。為了轉換一下心情， 便有了此篇文章。 問題 原問題我就不碼字了，直接上圖： 看到問題，我的第一反應是ASCII碼值範圍應該是

utf-8 , string , go , 後端

收藏 評論

zhujiu 頭像

煮酒 - go的string，byte和rune類型

rune是int32的別名類型，一個值就代表一個Unicode字符。 byte是uint8的別名類型，一個值就是一個ASCII碼值。 rune類型的值在底層都是由一個 UTF-8 編碼值來表達的。 瞭解下什麼是Unicode字符和ASCII碼： 1、簡單理解，我們平時接觸到的中英日文，或者複合字符，都是Unicode字符。比如，'G'、'o'、'愛'、'好'、'者'就是一個個Un

utf-8 , string , go

收藏 評論

adamcjm 頭像

Adam - 字符集和字符編碼什麼關係

嚴格來説，字符集和字符編碼不是一個概念： 字符集定義了字符和二進制的對應關係，為每個字符分配了唯一的編號。可以將字符集理解成一個很大的表格，它列出了所有字符和二進制的對應關係，計算機顯示文字或者存儲文字，就是一個查表的過程。 字符編碼規定了如何將字符的編號存儲到計算機中。如果使用了類似 GB2312 和 GBK 的變長存儲方案（不同的字符佔用的字節數不一樣），那麼為了區分一個字符到底使用了幾個字節

gbk , utf-8 , 字符編碼 , unicode , 字符集

收藏 評論

zhiqingchun_5f05a5d69bd9e 頭像

老炮説Java - 知乎面試官：為什麼不建議在 MySQL 中使用 UTF-8？

歡迎微信搜索公眾號【java版web項目】獲取資源：java學習視頻/設計模式筆記/算法手冊/java項目 記得去年我在往MySQL存入emoji表情😲😳時，一直出錯，無法導入。後來找到辦法 -- 通過把utf8改成utf8mb4就可以了，並沒有深究。 一年後，我看到一篇文章講到emoji文字佔4個字節，通常要用utf-8去接收才行，其他編碼可能會出錯。我突然想到去年操作MySQL把ut

MySQL , utf-8 , 數據庫 , 程序員

收藏 評論

walks 頭像

zandy - 【畫圖理解】信息在計算機中的表示

信息在計算機中的表示：https://www.edrawmax.cn/online/share.html?code=25b9520ce72311... 包含的內容： 字節序 字符的表示，UTF-8編碼

二進制 , utf-8 , 字符編碼 , 字節序

收藏 評論

q_bit 頭像

qbit - Python 可打印字符、UTF8相關（qbit）

Unicode 字符表：https://en.wikibooks.org/wiki... \xa0 是 NO-Break Space，不連續空格 \xad 是 Soft Hyphen，軟連接符，常被顯示為短橫或者空格 可打印字符 '你好'.isprintable() True '\x41'.isprintable() True '\xa0'.isprintable() Fals

utf-8 , unicode

收藏 評論

tomson 頭像

Tomson - 一次搞定 Unicode、字節序、UTF-*

前置閲讀： Unicode 與 JavaScript 詳解 字符編碼筆記：ASCII，Unicode 和 UTF-8 談談Unicode編碼 How to teach endian The Absolute Minimum Every Software Developer Absolutely, Positively Must Know About Unicode and Charac

utf-8 , unicode , 字節序 , 字符集 , Javascript

收藏 評論

amc 頭像

amc - JSON 這麼可愛，讓我們用千字短文吃透它吧！

JSON，一個偉大的協議，前端工程師的卓越發明！相信 99% 的程序員都認識 JSON，它作為前後端交互的熱門協議，因其易理解、簡單、靈活和超強的可讀性，得到了互聯網的廣泛歡迎，甚至很多微服務之間的傳輸協議中也得到應用。 但是筆者在開發一個 Go 的 JSON 編解碼庫的過程中，除了自己趟過各種奇奇怪怪的問題之外，也認識到廣大程序員們對 JSON 各種奇奇怪怪的用法和使用姿勢。在處理解決這些問題之

utf-8 , JAVA , unicode , go , Json

收藏 評論

ddup365 頭像

specialcoder - 字符編碼系列： ASCII、UTF-8 和 Unicode

準備 二進制換算 1 G = 1024 M = 1024 1024 K = 1024 * 1024 * 1024 Byte 1 Byte = 8 bit 一、ASCII 碼 只佔用一個字節表示的編碼 我們知道，計算機內部，所有信息最終都是一個二進制值。每一個二進制位（bit）有 0 和 1 兩種狀態，因此八個二進制位就可以組合出256種狀態，這被稱為一個字節（byte）。也就是説，一個字節一

utf-8 , ascii碼 , unicode , Javascript

收藏 評論

tosmile 頭像

浪遏飛舟 - 字符編碼-ASCII，Unicode 、 UTF-8、UTF-16、UTF-32

ASCII 碼 我們知道，計算機內部，所有信息最終都是一個二進制值。每一個二進制位（bit）有0和1兩種狀態，因此八個二進制位就可以組合出256種狀態，這被稱為一個字節（byte）。也就是説，一個字節一共可以用來表示256種不同的狀態，每一個狀態對應一個符號，就是256個符號，從00000000到11111111。 上個世紀60年代，美國製定了一套字符編碼，對英語字符與二進制位之間的關係，做了統一

ascii , utf-16 , utf-8 , 字符編碼 , unicode

收藏 評論