标签: encode

java.nio.charset.Charset.decode(..)/ encode(..)的快速替代品

谁知道更快的方式做什么java.nio.charset.Charset.decode(..)/ 做什么encode(..)?

它目前是我正在使用的技术的瓶颈之一.

[编辑]具体来说,在我的应用程序中,我将一个段从java解决方案改为JNI解决方案(因为有一种C++技术最适合我的需求,而不是我正在使用的Java技术).

这种变化带来了速度的显着降低(以及cpu和mem使用量的显着增加).

深入研究我使用的JNI解决方案,java应用程序通过byte []与C++应用程序进行通信.这些byte []由来自java端的Charset.encode(..)生成并传递给C++端.然后当带有byte []的C++响应时,它将通过Charset.decode(..)在java端进行解码.

运行此对一个分析器,我看到Charset.decode(..)和Charset.encode(..)都花了显著很长一段时间相比,JNI解决方案的整个执行时间(我异形只是JNI的解决方案,因为这是我能够很快完成的事情.一旦我解除了我的日程安排,我将在后一个日期描述整个应用程序:-)).

在进一步阅读我的问题时,似乎这是Charset.encode(..)和decode(..)的已知问题,并且它在Java7中得到解决.但是,由于某些限制,迁移到Java7对我来说(暂时不是).

这就是为什么我在这里问一下是否有人知道Java5解决方案/替代方案(对不起,应该提到这是针对Java5的更快)?:-)

java performance encode decode character-encoding

4
推荐指数
1
解决办法
3960
查看次数

当输入中允许html实体时,如何防止html实体的双重编码

如何防止html实体的双重编码,或以编程方式修复它们?

我正在使用HTML :: Entities perl模块中的encode()函数来编码用户输入中的HTML实体.这里的问题是我们还允许用户直接输入HTML实体,这些实体最终被双重编码.

例如,用户可以输入:

Stackoverflow & Perl = Awesome…

这最终被编码为

Stackoverflow & Perl = Awesome…

这在浏览器中呈现为

Stackoverflow & Perl = Awesome…

我们希望将其渲染为

Stackoverflow & Perl = Awesome...

有没有办法防止这种双重编码?或者是否有一个模块或代码片段可以轻松纠正这些双重编码问题?

任何帮助是极大的赞赏!

html perl encode cpan

4
推荐指数
1
解决办法
3367
查看次数

UnicodeEncodeError:'ascii'编解码器无法编码0-6位的字符:序数不在范围内(128)

我已经尝试了所有可以找到的解决方案,但似乎没有任何效果:

teext = str(self.tableWidget.item(row, col).text())
Run Code Online (Sandbox Code Playgroud)

我顺便写一下希腊文...

python ascii encode pyqt

4
推荐指数
1
解决办法
2万
查看次数

收到的GCM消息显示乱码文本

我在Google App Engine上部署了一个Servlet,它扮演着向GCM发布广播消息的角色.Android客户端将从GCM接收该广播消息.Servlet 使用以下代码段扩展BaseServlet.

@Override
protected void doPost(HttpServletRequest req, HttpServletResponse resp) throws IOException {
  //when receiving a gcm broadcast request, send message to GCM
  Builder mb = new Message.Builder();
  mb.addData("message", "The message to send");
  Message message = mb.build();
  sender.sendNoRetry(message, regIds);
  ...
}
Run Code Online (Sandbox Code Playgroud)

当"要发送的信息"是英文时,一切都很好.但是如果"要发送的消息"被其他语言(如中文)替换,则Android客户端将收到一串乱码文本.在Android客户端上,我使用类扩展GCMBaseIntentService来处理GCM广播.

@Override
protected void onMessage(Context context, Intent intent) {

        String message = "";
        message = intent.getStringExtra("message")!=null ? intent.getStringExtra("message") : "";
        doNotify(message);
}
Run Code Online (Sandbox Code Playgroud)

我试图重新编码消息,但不起作用.

message = new String(message.getBytes("ISO-8859-1"), "UTF-8");
Run Code Online (Sandbox Code Playgroud)

对这个问题有什么想法吗?我需要你的帮助,谢谢.

android encode google-cloud-messaging

4
推荐指数
1
解决办法
4382
查看次数

unicode/utf-8/utf-16和我的本地编码GBK之间有什么关系?

我注意到我在Windows上的文本文件(中文版),当移植到Ubuntu时,变成了乱码.经过更多研究,我知道Windows CN版本的默认编码是GBK,而Ubuntu上的默认编码是utf-8,iconv可以进行编码转换,例如从GBK到utf-8:

iconv -f gbk -t utf-8 input.txt > output.txt
Run Code Online (Sandbox Code Playgroud)

但我仍然对这些编码的关系感到困惑.这些是什么?它们之间有什么相似之处和区别?

encode

4
推荐指数
1
解决办法
1787
查看次数

二进制 - > UTF-8 - >字符串

我正在尝试理解Unicode和所有相关的东西.我制作了一个utf-8.txt文件,显然是用utf-8编码的.它有"Hello world!" 内.继承人我做的事情:

f = open('utf8.txt', mode = 'r', encoding = 'utf8')
f.read()
Run Code Online (Sandbox Code Playgroud)

我得到的是:'\ ufeffHello world!' 前缀来自哪里?

另一个尝试:

f = open('utf8.txt', 'rb')
byte = f.read()
Run Code Online (Sandbox Code Playgroud)

打印字节给出:b'\ xef\xbb\xbfHello world!' 我假设前缀以十六进制形式出现.

byte.decode('utf8')
Run Code Online (Sandbox Code Playgroud)

上面的代码再次给了我:'\ ufeffHello world!'

我究竟做错了什么?如何从utf-8文件中检索文本到python?

感谢您的反馈!

python encode utf-8

4
推荐指数
1
解决办法
1132
查看次数

Python encoded message with HMAC-SHA256

I try to encoded message with HMAC-SHA256 in python according to instructions

import hmac
import hashlib

nonce = 1234
customer_id = 123232
api_key = 2342342348273482374343434
API_SECRET = 892374928347928347283473

message = nonce + customer_id + api_key
signature = hmac.new(
    API_SECRET,
    msg=message,
    digestmod=hashlib.sha256
).hexdigest().upper()
Run Code Online (Sandbox Code Playgroud)

but I get this

Traceback (most recent call last): File "gen.py", line 13, in digestmod=hashlib.sha256 File "/usr/lib/python2.7/hmac.py", line 136, in new return HMAC(key, msg, digestmod) File "/usr/lib/python2.7/hmac.py", line 71, in init if len(key) > blocksize: TypeError: object of …

python api encode hmac

4
推荐指数
2
解决办法
7467
查看次数

如何在elm中将元组编码为JSON

我有(String,Bool)元组需要在elm中编码为JSON数组.

下面的链接对于基本类型和其他列表,数组和对象很有用.但我需要编码tuple2.

参考:http://package.elm-lang.org/packages/elm-lang/core/4.0.3/Json-Encode#Value

我尝试了使用toString函数编码元组的不同方法.它没有给我JSON数组,而是产生如下的String "(\"r"\,False)".

JSON.Decoder期望输入参数解码如下面的代码片段.

decodeString (tuple2 (,) float float) "[3,4]"
Run Code Online (Sandbox Code Playgroud)

参考:http://package.elm-lang.org/packages/elm-lang/core/4.0.3/Json-Decode

问:当tuple2有解码功能时,为什么编码功能缺少它.

json encode decode elm

4
推荐指数
2
解决办法
2057
查看次数

将PDF二进制数据编码到base64不能与NodeJS一起使用

我正在尝试获取来自API的PDF流返回并将其解析为base64以将其嵌入客户端,API请求的主体返回如下内容:

    %PDF-1.5
%????
4 0 obj
<<
/Type/XObjcect
/Subtype/Image
/Width 799
/Height 70
/ColorSpace/DeviceGray
/BitsPerComponent 8
/Filter/FlateDecode
/Length 5181
>>
stream
x???=H#???????A?&?)???B???4iba?&O8H
.
.
. 
(The rest was omitted)
Run Code Online (Sandbox Code Playgroud)

我试图以这种方式解析为base64:

console.log(typeof body); // STRING
const encoded = new Buffer.from(body).toString('base64'); //PDF NOT WORKING
Run Code Online (Sandbox Code Playgroud)

但是当我得到这个base64并将其嵌入到html上时它表示该文件无法被禁用,当我尝试将其保存为.PDF文件时,会发生同样的事情.

当我尝试解析为base64相同的pdf但这次从下载的pdf时,嵌入在html中的base64代码工作正常.

  fs.readFile('/home/user/downloaded.pdf', function (err, data) {
    if (err) throw err;

    console.log(typeof data); //OBJECT
    const pdf = data.toString('base64'); //PDF WORKS
  });
Run Code Online (Sandbox Code Playgroud)

我正在使用const request = require('request');这些请求.

javascript pdf encode node.js

4
推荐指数
1
解决办法
4904
查看次数

Swift编码/解码表情符号

我正在尝试编码和解码Emojis以将它们发送到我的数据库.

我用它来编码:

var comentario = String()
let data = Comment.data(using: String.Encoding.nonLossyASCII, allowLossyConversion: true)
if let data = data {
    let emojiString = NSString(data: data, encoding: String.Encoding.utf8.rawValue)! as String
    comentario = emojiString
}
Run Code Online (Sandbox Code Playgroud)

它有效.但现在我不知道如何解码表情符号.

这是编码类型--->\ud83d\ude1a

encode emoji swift

4
推荐指数
1
解决办法
6375
查看次数