小编hip*_*ail的帖子

MongoDB可以在基本多语言平面之外的代码点存储和操作UTF-8字符串吗?

在MongoDB 2.0.6中,当试图存储包含字符串字段的文档或查询文档时,字符串的值包含BMP之外的字符,我会收到大量错误,例如:"不正确的UTF-16:55357",或者"缓冲太小"

允许在Mongo中存储和查询多语言字符串的设置,更改或建议是什么,特别是那些包含这些字符超过0xFFFF的字符串?

谢谢.

multilingual utf-8 mongodb gorm-mongodb astral-plane

7
推荐指数
1
解决办法
1万
查看次数

OCR:小文本的细分

问题

我一直在构建一个(非常)简单的OCR引擎.由于我试图对非常小(像素大小)的字符进行分类,我在分割方面遇到了一些困难.这是一个例子,经过尽力而为的图像范围阈值处理:

有问题的分割图像63:

我试过的

错误检测:

  • 段的大水平尺寸.它主要起作用,但对于一些较大的角色失败(误报).
  • 分类,并拒绝低分.这似乎有点浪费.

错误修正:

  • 垂直添加像素(垂直直方图),找到最小值.在许多样本中,它会在错误的位置切割许多段.

我还没有尝试过

  • 尝试对所有可能的分割点(像素)进行分类.这将是非常浪费的,并且很难扩展为3合并字符段.
  • 我一直在阅读形态学方法,将角色转化为数学曲线,但我不知道真的知道从哪里开始,或者是否值得努力

然后去哪儿?

我不知道.因此这个问题:)

language-agnostic ocr opencv image-processing image-segmentation

7
推荐指数
1
解决办法
1912
查看次数

在node.js应用程序中读取文件时出现奇怪的unicode字符

我正在尝试编写一个节点应用程序,该应用程序读入一组文件,将它们分成行,然后将这些行放入一个数组中.很简单.除了我正在使用的一些SQL文件之外,它适用于很多文件.出于某种原因,当我将线分开时,我似乎正在获得某种unicode输出.该应用程序看起来像这样:

fs = require("fs");
var data = fs.readFileSync("test.sql", "utf8");
console.log(data);
lines = data.split("\n");
console.log(lines);
Run Code Online (Sandbox Code Playgroud)

输入文件如下所示:

use whatever
go
Run Code Online (Sandbox Code Playgroud)

输出如下所示:

??use whatever
go

[ '??u\u0000s\u0000e\u0000 \u0000w\u0000h\u0000a\u0000t\u0000e\u0000v\u0000e\u0000r\u0000',
  '\u0000g\u0000o\u0000',
  '\u0000' ]
Run Code Online (Sandbox Code Playgroud)

正如您所看到的,文件开头有一些无法识别的字符.在读取数据并直接输出后,除了这个字符外,它看起来还可以.但是,如果我然后尝试将其拆分成行,我会得到所有这些类似unicode的字符.基本上它是每个开头的所有实际字符"\ u0000".

我不知道这里发生了什么,但它似乎与文件本身的字符有关.如果我将文件的文本复制并粘贴到另一个新文件并在新文件上运行应用程序,它可以正常工作.我认为在复制和粘贴过程中,任何导致此问题的因素都会被删除.

javascript unicode utf-16 utf node.js

7
推荐指数
1
解决办法
2万
查看次数

Math.Atan2和FPATAN

我正在用C#编写一些数学代码,强制它在发布时为x86编译,优化,我正在看windbg中的反汇编.它通常都很好,经常写出比我更好的装配(不是说我在组装方面都很擅长,但你去了).

但是,我注意到这个功能:

static void TemporaryWork()
{
    double x = 4;
    double y = 3;
    double z = Math.Atan2(x, y);
}
Run Code Online (Sandbox Code Playgroud)

正在制作这个反汇编:

001f0078 55              push    ebp
001f0079 8bec            mov     ebp,esp
001f007b dd05a0001f00    fld     qword ptr ds:[1F00A0h]
001f0081 83ec08          sub     esp,8
001f0084 dd1c24          fstp    qword ptr [esp]
001f0087 dd05a8001f00    fld     qword ptr ds:[1F00A8h]
001f008d 83ec08          sub     esp,8
001f0090 dd1c24          fstp    qword ptr [esp]
001f0093 e86e9ba66f      call    clr!GetHashFromBlob+0x94e09 (6fc59c06) (System.Math.Atan2(Double, Double), mdToken: 06000de7)
001f0098 ddd8            fstp    st(0)
001f009a 5d              pop     ebp
001f009b c3 …
Run Code Online (Sandbox Code Playgroud)

.net c# x86 trigonometry

7
推荐指数
1
解决办法
716
查看次数

Unicode文字字符串

我发送一些http发送请求中的json.json对象中的一些文本应该有上标.

如果我在C#中创建我的字符串,如:

    string s = "here is my superscript: \u00B9";
Run Code Online (Sandbox Code Playgroud)

它将\ u00B9转换为实际的上标1,这会破坏我的json.我希望\ u00B9在我写入字符串时显示,而不是作为上标.

如果我添加一个转义字符,那么它会显示如下:"这是我的上标:\\ u00B9"

我不想使用转义字符,但我也不希望它转换为实际的上标.有没有办法让C#不进行unicode转换并将其保留为litterally:"\ u00B9"?

提前致谢

c# unicode json unicode-literals

7
推荐指数
3
解决办法
2万
查看次数

在指定unicode文字的java代码中获取空字符文字错误

为什么这个代码

 public class Apostrophier
{
    public static String replace(String s)
    {
        return s.replace('\u0092','\u0027');
    }
}
Run Code Online (Sandbox Code Playgroud)

给

'空字符文字'

当我尝试编译?

java unicode unicode-literals

7
推荐指数
2
解决办法
2837
查看次数

在Vim中,如何在块模式下切换但在正常模式下粘贴,插入新行?

我不时地在Vim中遇到这种类型的编辑问题.

我在表格中有文本格式,我想把它变成一个列表.

之前:

AAA BBB
AAA BBB
AAA BBB

CCC DDD
CCC DDD
CCC DDD
Run Code Online (Sandbox Code Playgroud)

后:

AAA
AAA
AAA

BBB
BBB
BBB

CCC
CCC
CCC

DDD
DDD
DDD
Run Code Online (Sandbox Code Playgroud)

当然不像这个例子那么微不足道.块可以具有更多的内容,更大和不一致的行数等.

我现在这样做的方式似乎有点像黑客:

  1. 在块模式下从右列中选择一个块: CTRL-q在Windows版本中选择左上角.
    d削减块.
  2. 注意块中有多少行,然后手动添加许多空行.
  3. 转到我创建的新空白区域的左上角.SHIFT+p将块粘贴到此区域.

步骤是粗略的部分.

执行正常的非块剪切或复制将始终粘贴到"新"行.一种"插入"或"追加"操作.执行块剪切或复制通常会以某种"覆盖"模式粘贴.

有没有更好的方法来复制或切入"块模式",但粘贴在"插入/追加模式"?

vim copy-paste

7
推荐指数
1
解决办法
555
查看次数

用于处理歧义的算法或数据结构

我正在寻找专门用于处理歧义的算法或数据结构.

在我特定的当前感兴趣的领域,我正在研究对自然语言的模糊解析,但我认为在计算中必须有许多领域,其中模糊性起作用.

我可以找到很多关于试图避免模棱两可的内容,但很少关于如何接受歧义和分析模棱两可的数据.

假设解析器生成这些替代令牌流或解释:

  • A B1 C
  • A B2 C
  • A B3 B4 C

可以看出,流的某些部分在解释(A... B)之间共享,而其他部分则分支到其他解释中,并且经常与主流会合.

当然,可能会有更多的解释,替代方案的嵌套以及没有主流的解释.

这显然是某种带节点的图形.我不知道它是否有确定的名称.

是否存在我可以研究的现有算法或数据结构,旨在处理这种模糊的图形?

algorithm nlp ambiguity data-structures ambiguous-grammar

7
推荐指数
1
解决办法
1287
查看次数

iResolution在着色器中的含义是什么?

我是glsl的新手.我发现每个演示https://www.shadertoy.com/new都有一个变量iResolution ,这是什么意思?如果我想将此变量传递给着色器,我还需要做什么?

glsl fragment-shader

7
推荐指数
1
解决办法
5155
查看次数

相同宽度的容器,flex-grow不起作用

我正在尝试使用flex来创建相同宽度的flex项,但是它们会根据flex项中的子项数不断改变宽度

小提琴

正如您所看到的,正确的绿色容器要小得多,即使两者都具有柔性增长:1

我怎样才能解决这个问题?谢谢!

span {
    display: inline-block;
    width: 10px;
    height: 30px;
    border: 1px solid red;
}
.container {
    display: flex;
    display: -webkit-flex;
    border: 1px solid blue;
    width: 200px; 
    padding: 2px;

}
.item {
    flex-grow: 1;
    -webkit-flex-grow: 1;
    border: 1px solid green;
}
Run Code Online (Sandbox Code Playgroud)

html css css3 flexbox flex-grow

7
推荐指数
1
解决办法
1554
查看次数