标签: longtext

MySQL - LONGTEXT字段导致SELECT-WHERE语句中的挂起

由于LONGTEXT现场我有问题.一切正常,但是当执行SELECT查询并且其中包含任何WHERE子句时,mysql将进入休眠状态并且永远不会返回.只有80k记录和显式WHERE比较工作正常.(有些记录超过1M,很少有约700K,但其余的只有60到100KB).

例如:

[HANGs]
SELECT * FROM item_info 
WHERE added_on > '2013-02-14 19:40:05' AND added_on < '2013-02-15 19:40:05'    
;which is like 2 rows only

[FINE]
SELECT * from item_info
WHERE item_id in (1, 10, 1000)
Run Code Online (Sandbox Code Playgroud)

这是通常的行为吗?

这是架构:

CREATE TABLE `item_info` (
  `item_id` bigint(20) NOT NULL AUTO_INCREMENT,
  `title_md5` varchar(35) NOT NULL,
  `original_document` longtext NOT NULL,
  `added_on` datetime NOT NULL,
  PRIMARY KEY (`item_id`),
  UNIQUE KEY `md5_Unique` (`title_md5`)
) ENGINE=MyISAM AUTO_INCREMENT=87781 DEFAULT CHARSET=utf8 CHECKSUM=1 DELAY_KEY_WRITE=1 ROW_FORMAT=DYNAMIC;
Run Code Online (Sandbox Code Playgroud)

有什么解决方案吗?或者我是否必须将longtext字段分隔为具有外键的新表?

mysql database performance longtext

5
推荐指数
2
解决办法
2365
查看次数

如何将 ROW_FORMAT=DYNAMIC 应用于现有表

我有一个包含大量长文本字段 (18) 以及许多其他各种整数和 varchar 字段的表。最近添加了一些额外的长文本字段,突然迫使我了解有关 8K 行大小限制的所有信息。数据库运行的是 Mysql 5.6.34,有问题的表当前是 Antelope / ROW_FORMAT=COMPACT。

我的理解是,在这种格式中,每列每行最多占用 768 个字节,直到溢出到单独的存储中。当太多的各种长文本获取大量数据时,这会导致我出现此错误:

行大小太大 (> 8126)。将某些列更改为 TEXT 或 BLOB 或使用 ROW_FORMAT=DYNAMIC 或 ROW_FORMAT=COMPRESSED 可能会有所帮助。在当前行格式中,768 字节的 BLOB 前缀是内联存储的。忽略表中的其余字段,如果所有 18 个长文本均为 768 字节,则主索引将为所有字段存储 13,824 字节。

我尝试将表更新为 ROW_FORMAT=DYNAMIC,期望这会将长文本的溢出阈值从 768 字节降低到仅 20 字节,因此应将所有长文本字段的最大主索引存储要求降低到 18 * 20 = 360 字节。我尝试按照以下方式进行更新:

ALTER TABLE mytable ROW_FORMAT=DYNAMIC;
OPTIMIZE TABLE mytable;
Run Code Online (Sandbox Code Playgroud)

没有错误并输出以下内容:

mydb.mytable 优化注意表不支持优化,改为重新创建+分析 mydb.mytable 优化状态 OK

如果我查看表的 CREATE TABLE 语法,我可以看到设置了 ROW_FORMAT=DYNAMIC。

然后,我尝试编写一行来填充所有长文本列,每个列大约 5.7kb,但是在阻止保存该行之前我只能填充其中的 10 个,并且 10 * 768 = 7,680 字节,在计算时其他非长文本必填字段非常接近 8kb 限制,表明 ROW_FORMAT=DYNAMIC 指令不适用于现有行。

我并不是特别希望通过转储/导入来重新创建数据库,但是因为它特别大,并且会代表延长的服务停机时间,我不确定在用尽其他选项之前是否可以证明这一点。

mysql innodb longtext

5
推荐指数
2
解决办法
2万
查看次数

MySQL中的GROUP_CONCAT和Longtext有问题

SQL ......

UPDATE Threads t 
SET t.Content = (
    SELECT GROUP_CONCAT(a.Content ORDER BY a.PageID SEPARATOR '<!-- pagebreak -->') 
    FROM MSarticlepages a
    WHERE a.ArticleID = t.MSthreadID GROUP BY a.ArticleID
)
Run Code Online (Sandbox Code Playgroud)

正如您所看到的,它将所有文章的页面(每个页面都作为longtext存储在不同的行中)和GROUP_CONCAT将它们放入单个longtext行中.问题是结果只有很多字符然后被完全截断,丢失了大约90%的内容.CONCAT不能很好地处理longtext,还是还有其他我做错的事情?

mysql truncated group-concat longtext

4
推荐指数
2
解决办法
1万
查看次数

MySQL视图中的LONGTEXT字段的JPA本机查询导致错误

我有以下JPA SqlResultSetMapping:

 @SqlResultSetMappings({               
    @SqlResultSetMapping(name="GroupParticipantDTO", 
            columns={ 
                @ColumnResult(name="gpId"),
                @ColumnResult(name="gpRole"),
 //             @ColumnResult(name="gpRemarks")
            }  
    )
Run Code Online (Sandbox Code Playgroud)

使用方式如下:

    StringBuilder sbQuery = new StringBuilder("Select  ");
    sbQuery.append(" gpId, ");
    sbQuery.append(" gpRole, "); 
 // sbQuery.append(" gpRemarks ");

    sbQuery.append(" FROM v_group_participants_with_details ");

    Query query = em.createNativeQuery(sbQuery.toString(), "GroupParticipantDTO");
Run Code Online (Sandbox Code Playgroud)

视图是这样的:

DROP VIEW IF EXISTS `v_group_participants_with_details`;
CREATE VIEW `v_group_participants_with_details`
AS
SELECT
   gp.id AS gpId,
   gp.role AS gpRole,
   gp.remarks AS gpRemarks
FROM GroupParticipation gp
;
Run Code Online (Sandbox Code Playgroud)

GroupParticipation表的备注列定义为LONGTEXT(我使用的是Mysql 5.x)

现在针对问题:当从查询中注释掉备注字段时,一切都运行正常,但如果我尝试在查询中包含备注字段,则会收到以下错误:

 javax.persistence.PersistenceException: org.hibernate.MappingException: 
 No Dialect mapping for JDBC type: -1   
 at org.hibernate.ejb.AbstractEntityManagerImpl.throwPersistenceException
 (AbstractEntityManagerImpl.java:614)   
 at org.hibernate.ejb.QueryImpl.getResultList(QueryImpl.java:76)
Run Code Online (Sandbox Code Playgroud)

是什么赋予了?如何从本机查询中获取LONGTEXT列?

mysql orm hibernate jpa longtext

4
推荐指数
1
解决办法
6316
查看次数

无法通过php保存mysql中的大文本

$query="INSERT INTO `ARTICLES` (`TITLE`, `BY`, `IN`, `POST`) 
VALUES('". $title ."', '". $by ."', '". $in ."', '". $_POST['post'] ."')";
Run Code Online (Sandbox Code Playgroud)

此代码能够保存较小的文本但不大.该POST字段的数据类型是longtext.此外,如果我通过phpmyadmin插入数据,它将被保存.

php mysql longtext

4
推荐指数
1
解决办法
8987
查看次数

MySQL数据库中有一列LONGTEXT的内存消耗

我正在MySQL数据库中创建一个日志表.其中一个字段仅用于大约5%的日志中,并且将包含堆栈跟踪和其他开发人员冗长的信息.我正在考虑使用LONGTEXT字段,但我想知道是否使用它会使我的数据库增长得非常快,即使此列在95%的行中为空.

所以我的问题是明确的,即使在大多数行中该列为空时,是否存在具有LONGTEXT列的内存消耗?例如,如果我使用TEXT而截断太长的字符串,我是否会在数据库上节省大量空间.

重要的是要补充说随着时间的推移会有很多日志.

谢谢!

mysql sql database fieldtype longtext

3
推荐指数
1
解决办法
867
查看次数

GROUP_CONCAT和Longtext

我需要将MySQL数据库表中的两个文本字段组合成一个,所以我使用了以下SQL脚本来完成它.

表:tbl_newsitems组合:需要将'ni_text'中的文本与相同的'news_id'表格布局组合:

zNg6f

用于组合文本的代码:SELECT news_id,GROUP_CONCAT(ni_text SEPARATOR'')FROM tbl_newsitems GROUP BY news_id;

但它不会在结果部分显示完整(完整)文本.修剪了CONCAT字段并丢失了一些文本.CONCAT字段的默认数据类型是TEXT(1024)

结果:

那么如何在不删除内容的情况下将整个文本合并到一个字段中.请给我脚本来执行此操作.

谢谢

mysql concat group-concat longtext

3
推荐指数
1
解决办法
1933
查看次数

MySQL 注释字段或文本区域的字段类型

正如标题所示,我正在为表中的评论字段寻找一个好的字段类型。它将存储许多字符(因为用户可以不断添加),所以它肯定超过 255 个。我查看了长文本,但不确定......另外,我如何更改字段类型以接受不同的字符,例如撇号。谢谢。

mysql field longtext

2
推荐指数
1
解决办法
8467
查看次数

Laravel Eloquent对象,longtext被截断

我使用Laravel,将db行加载到Eloquent对象中.其中一列是longtext,一个JSON编码的数组> 200万个字符长.我得到的原始错误是json_decode在此列的值上失败.

我在修补中测试过.简化的测试代码:

$item = Item::find(1);
echo $item->long_text_field;
var_dump(json_decode($item->long_text_field));
echo strlen($item->long_text_field);
Run Code Online (Sandbox Code Playgroud)

在我的本地vagrant实例上,它显示正确的值.

...long json array in text, same as the value in the actual DB entry...
...var_dump of json array...
2334040
Run Code Online (Sandbox Code Playgroud)

但是在我的远程开发服务器上我得到了

...long json array truncated in the middle...
NULL
1048576
Run Code Online (Sandbox Code Playgroud)

显然json_decode失败了,因为字符串被截断了.

它截断了这样的一块

"Eff Date":"1\”
Run Code Online (Sandbox Code Playgroud)

应该是哪个

"Eff Date":"1\/30\/14 16:13”
Run Code Online (Sandbox Code Playgroud)

从长远来看,这里有很多逃脱的斜线,在这一点上我看不到任何奇怪的角色.有没有人知道为什么这个文本会在一台服务器而不是另一台服务器上截断?

php mysql json longtext laravel

2
推荐指数
1
解决办法
2774
查看次数

将HTML存储到MySQL数据库中

我正在尝试String使用Longtext数据类型在MySQL数据库中存储包含HTML的内容.但它总是说"你的SQL语法有错误".我试图存储一个正常String,它的工作原理.

更新:

这是查询:

st.executeUpdate("insert into website(URL,phishing,source_code,active) values('" + URL + "','" + phishingState + "','" + sourceCode + "','" + webSiteState + "');");
Run Code Online (Sandbox Code Playgroud)

我正在使用Java.

html java mysql jdbc longtext

0
推荐指数
1
解决办法
8832
查看次数

MySQL中的char/varchar/text/longtext列是否占用文件系统中的完整大小,即使对于部分填充的单元格也是如此?

MySQL中的varchar/text/longtext列是否占用文件系统中的全长大小,即使是不完整的单元格?

博客文章为例,我有以下几列,并在其中添加了一个给定的字符串.

CHAR (72) - can store upto 72 characters - i put in a string "abcd"
VARCHAR (72) - can store upto 72 characters - i put in a string "abcd"
TINYTEXT - can store upto 255 characters - i put in a string "abcd"
TEXT - can store upto 65,535 characters - i put in a string "abcd"
LONGTEXT - can store upto 4,294,967,295 characters - i put in a string "abcd"
Run Code Online (Sandbox Code Playgroud)

一行中每列的实际物理空间占用多少?

每列能够存储的完整大小?

或者只有存储"abcd"所需的数量?

mysql varchar longtext tinytext

0
推荐指数
1
解决办法
810
查看次数

MySQL - 计算字符串中包含的id

我的桌子被称为"asd"

我有这个架构:

id        |  date     |  content |
AUTO_INC    DATETIME    LONGTEXT
Run Code Online (Sandbox Code Playgroud)

现在假设 content = 45,67,89,3,45,5

search COUNT()在这张桌子上怎么样WHERE content CONTAINS 89

我尝试SELECT COUNT() FROM asd WHERE content IN(89);但没有结果.

mysql sql search longtext

-1
推荐指数
1
解决办法
1023
查看次数