输入
GraphRAG 支持多种输入格式,以简化数据摄取。本文讨论了输入文件和文本分块的机制和可用功能。
输入加载和架构
所有输入格式都在 GraphRAG 中加载,并作为 `documents` DataFrame 传递到索引管道。此 DataFrame 的每行对应一个文档,使用共享的列架构
| name | 类型 | 描述 |
|---|---|---|
| id | str | 文档的 ID。这是使用文本内容的哈希值生成的,以确保在多次运行中保持稳定性。 |
| text | str | 文档的完整文本。 |
| title | str | 文档名称。某些格式允许配置此项。 |
| creation_date | str | 文档的创建日期,表示为 ISO8601 字符串。这是从源文件系统获取的。 |
| metadata | dict | 可选的额外文档元数据。详情如下。 |
另请参阅输出文档,了解管道完成后保存到 parquet 的最终文档表架构。
自带 DataFrame
从版本 2.6.0 开始,GraphRAG 的索引 API 方法允许您传入自己的 pandas DataFrame,并绕过下一节中描述的所有输入加载/解析。如果您有我们不支持的格式或存储位置的内容,这很方便。**您必须确保您的输入 DataFrame 符合上述架构。**所有后续的分块行为将完全相同。
格式
我们开箱即用地支持三种文件格式。这涵盖了我们遇到的大多数用例。如果您有不同的格式,我们建议编写脚本将其转换为其中一种,这些格式被广泛使用并受到许多工具和库的支持。
纯文本
纯文本文件(通常以 .txt 文件扩展名结尾)。对于纯文本文件,我们将整个文件内容作为 `text` 字段导入,`title` 始终是文件名。
逗号分隔
CSV 文件(通常以 .csv 扩展名结尾)。这些文件使用 pandas 的`read_csv` 方法以默认选项加载。CSV 文件中的每一行都被视为一个单独的文档。如果您的输入文件夹中有多个 CSV 文件,它们将被连接成一个最终的 `documents` DataFrame。
对于 CSV 格式,如果您的数据具有您希望使用的结构化内容,您可以配置 `text_column` 和 `title_column`。如果您未在 settings.yaml 的 `input` 块中配置这些,则标题将是如上所述的架构中的文件名。如果未专门配置,`text_column` 假定为文件中的“text”。我们还将查找并使用“id”列(如果存在),否则 ID 将如上所述生成。
JSON
JSON 文件(通常以 .json 扩展名结尾)包含结构化对象。这些文件使用 Python 的`json.loads` 方法加载,因此您的文件必须符合要求。JSON 文件可以包含文件中的单个对象,或者文件可以在根目录下包含一个对象数组。我们将检查并处理这两种情况。与 CSV 类似,多个文件将被连接成一个最终表格,`text_column` 和 `title_column` 配置选项将应用于每个加载对象的属性。请注意,目前不支持某些库生成的专门的 jsonl 格式(每行一个完整的 JSON 对象,而不是在数组中)。
元数据
对于结构化文件格式(CSV 和 JSON),您可以配置任意数量的列,以添加到 DataFrame 中的持久化 `metadata` 字段。这通过提供要收集的列名列表进行配置。如果配置了此项,则输出 `metadata` 列将包含一个字典,其中包含每个列的键以及该文档的列值。此元数据可以选择在 GraphRAG 管道的后续步骤中使用。
示例
software.csv
text,title,tag
My first program,Hello World,tutorial
An early space shooter game,Space Invaders,arcade
settings.yaml
文档 DataFrame
| id | title | text | creation_date | metadata |
|---|---|---|---|---|
| (从文本生成) | 你好世界 | 我的第一个程序 | (software.csv 的创建日期) | { "title": "你好世界", "tag": "教程" } |
| (从文本生成) | 太空入侵者 | 一个早期的太空射击游戏 | (software.csv 的创建日期) | { "title": "太空入侵者", "tag": "街机" } |
分块和元数据
如默认数据流页面所述,文档被“分块”成更小的“文本单元”进行处理。这样做是因为文档内容大小通常超过给定语言模型的可用上下文窗口。有少量设置可以调整此分块,其中最相关的是 `chunk_size` 和 `overlap`。我们现在还支持一种元数据处理方案,可以改进某些用例的索引结果。我们将在此处详细描述此功能。
设想以下场景:您正在索引新闻文章集。每篇文章的文本以标题和作者开头,然后是内容。当文档被分块时,它们会根据您配置的分块大小均匀分割。换句话说,前 *n* 个标记被读入一个文本单元,然后是接下来的 *n* 个,直到内容结束。这意味着文档开头的引言(例如本例中的标题和作者)**不会复制到每个分块中**。它只存在于第一个分块中。当我们稍后检索这些分块进行摘要时,它们可能因此缺少应该始终提供给模型的关于源文档的共享信息。我们有配置选项将重复内容复制到每个文本单元以解决此问题。
输入配置
如上所述,导入文档时,您可以指定要包含在每行中的 `metadata` 列列表。必须配置此项才能使每个分块的复制功能正常工作。
分块配置
接下来,`chunks` 块需要指示分块器在创建文本单元时如何处理此元数据。默认情况下,它会被忽略。我们有两个设置可以包含它
- `prepend_metadata`。这指示导入器将每行的 `metadata` 列内容复制到每个文本块的开头。此元数据以键值对的形式复制在新行上。
- `chunk_size_includes_metadata`:这告诉分块器在包含元数据时如何计算分块大小。默认情况下,我们使用您指定的 `chunk_size` 创建文本单元,*然后*在前面加上元数据。这意味着最终的文本单元长度可能比您配置的 `chunk_size` 长,并且会根据每个文档的元数据长度而变化。当此设置为 `True` 时,我们将在测量元数据长度后使用剩余部分计算原始文本,以便生成的文本单元始终符合您配置的 `chunk_size`。
示例
以下是几个示例,以帮助说明分块配置和元数据前置如何适用于每种文件格式。请注意,我们在此处使用字数作为“标记”进行说明,但语言模型标记不等于单词。
文本文件
此示例使用两个单独的新闻文章文本文件。
--
文件:美国将取消大部分联邦 COVID-19 疫苗强制令.txt
内容
华盛顿(美联社)白宫周一表示,下周,随着国家公共卫生紧急状态的结束,拜登政府将取消最后剩下的大部分联邦 COVID-19 疫苗要求。针对联邦工作人员和联邦承包商以及前往美国的外国航空旅客的疫苗要求将于 5 月 11 日结束。政府还开始取消对 Head Start 教育工作者、医疗保健工作者和美国陆地边境非公民的疫苗接种要求。这些要求是联邦政府为促进疫苗接种而采取的一些更强制性措施的最后残余,其结束标志着乔·拜登总统政府如何将 COVID-19 视为一种常规的、地方性疾病的最新表现。白宫 COVID-19 协调员阿什什·贾哈博士周一对美联社表示:“虽然我相信这些疫苗强制令产生了巨大的有益影响,但我们现在认为,取消这些要求非常有意义。”
--
文件:纽约议员在截止日期后一个月开始辩论预算案.txt
内容
奥尔巴尼,纽约(美联社)纽约州议员周一开始就一项总额达 2290 亿美元的州预算进行投票,该预算原定于一个月前提交,内容包括提高最低工资、打击非法大麻店以及在新建筑中禁止燃气灶和炉具。州长凯西·霍楚尔和她在立法机构中控制权的民主党同事之间的谈判拖过了 4 月 1 日的预算截止日期,主要原因是围绕保释法修正案和支出计划中包含的其他政策提案存在分歧。一些预算议案的辩论于周一开始。州参议院多数党领袖安德里亚·斯图尔特-卡曾斯表示,她预计周二将完成投票,她称这份预算案为纽约人带来了“重大胜利”。卡曾斯在投票开始前告诉记者:“我希望早点完成这项工作。我想我们都会同意这一点。”“这是一份政策性很强的预算,很多政策都必须仔细审查。”霍楚尔成功推动了一项保释法修正案,该修正案将取消要求法官规定“限制最少”的手段以确保被告出庭的标准。霍楚尔表示,法官需要额外的自由裁量权。一些自由派议员认为,这将削弱 2019 年批准的全面保释改革,并导致更多低收入人群和有色人种被审前拘留。根据州官员的说法,以下是预算中将包含的其他一些政策条款。到 2026 年,纽约市及其部分郊区的最低工资将提高到 17 美元,该州其他地区的最低工资将提高到 16 美元。这比纽约市的 15 美元和纽约上州的 14.20 美元有所提高。
--
settings.yaml
input:
file_type: text
metadata: [title]
chunks:
size: 100
overlap: 0
prepend_metadata: true
chunk_size_includes_metadata: false
文档 DataFrame
| id | title | text | creation_date | metadata |
|---|---|---|---|---|
| (从文本生成) | 美国将取消大部分联邦 COVID-19 疫苗强制令.txt | (文本文件的完整内容) | (文章文本文件的创建日期) | { "title": "美国将取消大部分联邦 COVID-19 疫苗强制令.txt" } |
| (从文本生成) | 纽约议员在截止日期后一个月开始辩论预算案.txt | (文本文件的完整内容) | (文章文本文件的创建日期) | { "title": "纽约议员在截止日期后一个月开始辩论预算案.txt" } |
原始文本块
| 内容 | 长度 |
|---|---|
| 标题:美国将取消大部分联邦 COVID-19 疫苗强制令.txt 华盛顿(美联社)白宫周一表示,下周,随着国家公共卫生紧急状态的结束,拜登政府将取消最后剩下的大部分联邦 COVID-19 疫苗要求。针对联邦工作人员和联邦承包商以及前往美国的外国航空旅客的疫苗要求将于 5 月 11 日结束。政府还开始取消对 Head Start 教育工作者、医疗保健工作者和美国陆地边境非公民的疫苗接种要求。这些要求是联邦政府为促进疫苗接种而采取的一些更强制性措施的最后残余,因为 |
109 |
| 标题:美国将取消大部分联邦 COVID-19 疫苗强制令.txt 致命病毒肆虐,它们的结束标志着乔·拜登总统政府如何将 COVID-19 视为一种常规的、地方性疾病的最新表现。白宫 COVID-19 协调员阿什什·贾哈博士周一对美联社表示:“虽然我相信这些疫苗强制令产生了巨大的有益影响,但我们现在认为,取消这些要求非常有意义。” |
82 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案.txt 奥尔巴尼,纽约(美联社)纽约州议员周一开始就一项总额达 2290 亿美元的州预算进行投票,该预算原定于一个月前提交,内容包括提高最低工资、打击非法大麻店以及在新建筑中禁止燃气灶和炉具。州长凯西·霍楚尔和她在立法机构中控制权的民主党同事之间的谈判拖过了 4 月 1 日的预算截止日期,主要原因是围绕保释法修正案和支出计划中包含的其他政策提案存在分歧。一些预算议案的辩论于周一开始。州参议院多数党领袖安德里亚·斯图尔特-卡曾斯表示,她预计投票将 |
111 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案.txt 于周二结束,她表示这份预算案为纽约人带来了“重大胜利”。卡曾斯在投票开始前告诉记者:“我希望早点完成这项工作。我想我们都会同意这一点。”“这是一份政策性很强的预算,很多政策都必须仔细审查。”霍楚尔成功推动了一项保释法修正案,该修正案将取消要求法官规定“限制最少”的手段以确保被告出庭的标准。霍楚尔表示,法官需要额外的自由裁量权。一些自由派议员认为,它 |
111 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案.txt 将削弱 2019 年批准的全面保释改革,并导致更多低收入人群和有色人种被审前拘留。根据州官员的说法,以下是预算中将包含的其他一些政策条款。到 2026 年,纽约市及其部分郊区的最低工资将提高到 17 美元,该州其他地区的最低工资将提高到 16 美元。这比纽约市的 15 美元和纽约上州的 14.20 美元有所提高。 |
89 |
在此示例中,我们可以看到两个输入文档被解析为五个输出文本块。每个文档的标题(文件名)被前置,但不包含在计算的块大小中。另请注意,每个文档的最终文本块通常小于块大小,因为它包含最后的标记。
CSV 文件
此示例使用一个 CSV 文件,其中包含与行相同的两篇文章(请注意,文本内容未正确转义以供实际 CSV 使用)。
--
文件:articles.csv
内容
标题,文章
美国将取消大部分联邦 COVID-19 疫苗强制令,华盛顿(美联社)白宫周一表示,下周,随着国家公共卫生紧急状态的结束,拜登政府将取消最后剩下的大部分联邦 COVID-19 疫苗要求。针对联邦工作人员和联邦承包商以及前往美国的外国航空旅客的疫苗要求将于 5 月 11 日结束。政府还开始取消对 Head Start 教育工作者、医疗保健工作者和美国陆地边境非公民的疫苗接种要求。这些要求是联邦政府为促进疫苗接种而采取的一些更强制性措施的最后残余,因为致命病毒肆虐,它们的结束标志着乔·拜登总统政府如何将 COVID-19 视为一种常规的、地方性疾病的最新表现。白宫 COVID-19 协调员阿什什·贾哈博士周一对美联社表示:“虽然我相信这些疫苗强制令产生了巨大的有益影响,但我们现在认为,取消这些要求非常有意义。”
纽约议员在截止日期后一个月开始辩论预算案,奥尔巴尼,纽约(美联社)纽约州议员周一开始就一项总额达 2290 亿美元的州预算进行投票,该预算原定于一个月前提交,内容包括提高最低工资、打击非法大麻店以及在新建筑中禁止燃气灶和炉具。州长凯西·霍楚尔和她在立法机构中控制权的民主党同事之间的谈判拖过了 4 月 1 日的预算截止日期,主要原因是围绕保释法修正案和支出计划中包含的其他政策提案存在分歧。一些预算议案的辩论于周一开始。州参议院多数党领袖安德里亚·斯图尔特-卡曾斯表示,她预计周二将完成投票,她称这份预算案为纽约人带来了“重大胜利”。“我希望早点完成这项工作。我想我们都会同意这一点,”卡曾斯在投票开始前告诉记者。“这是一份政策性很强的预算,很多政策都必须仔细审查。”霍楚尔成功推动了一项保释法修正案,该修正案将取消要求法官规定“限制最少”的手段以确保被告出庭的标准。霍楚尔表示,法官需要额外的自由裁量权。一些自由派议员认为,这将削弱 2019 年批准的全面保释改革,并导致更多低收入人群和有色人种被审前拘留。根据州官员的说法,以下是预算中将包含的其他一些政策条款。到 2026 年,纽约市及其部分郊区的最低工资将提高到 17 美元,该州其他地区的最低工资将提高到 16 美元。这比纽约市的 15 美元和纽约上州的 14.20 美元有所提高。
--
settings.yaml
input:
file_type: csv
title_column: headline
text_column: article
metadata: [headline]
chunks:
size: 50
overlap: 5
prepend_metadata: true
chunk_size_includes_metadata: true
文档 DataFrame
| id | title | text | creation_date | metadata |
|---|---|---|---|---|
| (从文本生成) | 美国将取消大部分联邦 COVID-19 疫苗强制令 | (文章列内容) | (articles.csv 的创建日期) | { "headline": "美国将取消大部分联邦 COVID-19 疫苗强制令" } |
| (从文本生成) | 纽约议员在截止日期后一个月开始辩论预算案 | (文章列内容) | (articles.csv 的创建日期) | { "headline": "纽约议员在截止日期后一个月开始辩论预算案" } |
原始文本块
| 内容 | 长度 |
|---|---|
| 标题:美国将取消大部分联邦 COVID-19 疫苗强制令 华盛顿(美联社)白宫周一表示,下周,随着国家公共卫生紧急状态的结束,拜登政府将取消最后剩下的大部分联邦 COVID-19 疫苗要求。针对联邦工作人员和联邦承包商, |
50 |
| 标题:美国将取消大部分联邦 COVID-19 疫苗强制令 联邦工作人员和联邦承包商以及前往美国的外国航空旅客的疫苗要求将于 5 月 11 日结束。政府还开始取消对 Head Start 教育工作者、医疗保健工作者和美国陆地边境非公民的疫苗接种要求。 |
50 |
| 标题:美国将取消大部分联邦 COVID-19 疫苗强制令 美国陆地边境的非公民。这些要求是联邦政府为促进疫苗接种而采取的一些更具强制性措施的最后残余,因为致命病毒肆虐,它们的结束标志着 |
50 |
| 标题:美国将取消大部分联邦 COVID-19 疫苗强制令 乔·拜登总统政府如何将 COVID-19 视为一种常规、地方性疾病的最新表现。“虽然我相信这些疫苗强制令产生了巨大的有益影响,但我们现在认为 |
50 |
| 标题:美国将取消大部分联邦 COVID-19 疫苗强制令 我们认为取消这些要求很有意义,”白宫 COVID-19 协调员阿什什·贾哈博士周一告诉美联社。 |
38 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 奥尔巴尼,纽约(美联社)纽约州议员周一开始就一项总额达 2290 亿美元的州预算进行投票,该预算原定于一个月前提交,内容包括提高最低工资、打击非法大麻店以及在新 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 建筑物中的炉灶和炉具。州长凯西·霍楚尔和她在立法机构中控制权的民主党同事之间的谈判拖过了 4 月 1 日的预算截止日期,主要原因是围绕保释法修正案和 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 保释法修正案和支出计划中包含的其他政策提案存在分歧。一些预算议案的辩论于周一开始。州参议院多数党领袖安德里亚·斯图尔特-卡曾斯表示,她预计投票将于周二结束,以通过一项预算 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 周二结束,她表示这份预算案为纽约人带来了“重大胜利”。“我希望早点完成这项工作。我想我们都会同意这一点,”卡曾斯在投票开始前告诉记者。“这已经 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 投票开始了。“这是一份政策性很强的预算,很多政策都必须仔细审查。”霍楚尔成功推动了一项保释法修正案,该修正案将取消要求法官 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 要求法官规定“限制最少”的手段以确保被告出庭的标准。霍楚尔表示,法官需要额外的自由裁量权。一些自由派议员认为,这将削弱 2019 年批准的全面保释改革 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 2019 年批准的保释改革,并导致更多低收入人群和有色人种被审前拘留。根据州官员的说法,以下是预算中将包含的其他一些政策条款。最低 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 据州官员称。最低工资将在纽约市及其部分郊区提高到 17 美元,并在该州其他地区提高到 16 美元,到 2026 年。这比纽约市的 15 美元有所提高 |
50 |
| 标题:纽约议员在截止日期后一个月开始辩论预算案 2026 年。这比城市中的 15 美元和纽约上州的 14.20 美元有所提高。 |
22 |
在此示例中,我们可以看到两个输入文档被解析为十四个输出文本块。每个文档的标题(标题)被前置并包含在计算的块大小中,因此每个块都与配置的块大小匹配(每个文档的最后一个除外)。我们还在此文本块中配置了一些重叠,因此最后五个标记是共享的。为什么要在文本块中使用重叠?考虑到当您根据标记分割文档时,句子甚至相关概念很可能会被分割到不同的块中。每个文本块都由语言模型单独处理,因此这可能导致块边界处的“想法”不完整。重叠确保这些分割的概念完全包含在至少一个块中。
JSON 文件
最后一个示例使用一个 JSON 文件,其中包含与前面相同的两篇文章。在此示例中,我们将设置要读取的对象字段,但不会向文本块添加元数据。
--
文件:article1.json
内容
{
"headline": "US to lift most federal COVID-19 vaccine mandates",
"content": "WASHINGTON (AP) The Biden administration will end most of the last remaining federal COVID-19 vaccine requirements next week when the national public health emergency for the coronavirus ends, the White House said Monday. Vaccine requirements for federal workers and federal contractors, as well as foreign air travelers to the U.S., will end May 11. The government is also beginning the process of lifting shot requirements for Head Start educators, healthcare workers, and noncitizens at U.S. land borders. The requirements are among the last vestiges of some of the more coercive measures taken by the federal government to promote vaccination as the deadly virus raged, and their end marks the latest display of how President Joe Biden's administration is moving to treat COVID-19 as a routine, endemic illness. "While I believe that these vaccine mandates had a tremendous beneficial impact, we are now at a point where we think that it makes a lot of sense to pull these requirements down," White House COVID-19 coordinator Dr. Ashish Jha told The Associated Press on Monday."
}
文件:article2.json
内容
{
"headline": "NY lawmakers begin debating budget 1 month after due date",
"content": "ALBANY, N.Y. (AP) New York lawmakers began voting Monday on a $229 billion state budget due a month ago that would raise the minimum wage, crack down on illicit pot shops and ban gas stoves and furnaces in new buildings. Negotiations among Gov. Kathy Hochul and her fellow Democrats in control of the Legislature dragged on past the April 1 budget deadline, largely because of disagreements over changes to the bail law and other policy proposals included in the spending plan. Floor debates on some budget bills began Monday. State Senate Majority Leader Andrea Stewart-Cousins said she expected voting to be wrapped up Tuesday for a budget she said contains "significant wins" for New Yorkers. "I would have liked to have done this sooner. I think we would all agree to that," Cousins told reporters before voting began. "This has been a very policy-laden budget and a lot of the policies had to parsed through." Hochul was able to push through a change to the bail law that will eliminate the standard that requires judges to prescribe the "least restrictive" means to ensure defendants return to court. Hochul said judges needed the extra discretion. Some liberal lawmakers argued that it would undercut the sweeping bail reforms approved in 2019 and result in more people with low incomes and people of color in pretrial detention. Here are some other policy provisions that will be included in the budget, according to state officials. The minimum wage would be raised to $17 in New York City and some of its suburbs and $16 in the rest of the state by 2026. That's up from $15 in the city and $14.20 upstate."
}
--
settings.yaml
文档 DataFrame
| id | title | text | creation_date | metadata |
|---|---|---|---|---|
| (从文本生成) | 美国将取消大部分联邦 COVID-19 疫苗强制令 | (文章列内容) | (article1.json 的创建日期) | { } |
| (从文本生成) | 纽约议员在截止日期后一个月开始辩论预算案 | (文章列内容) | (article2.json 的创建日期) | { } |
原始文本块
| 内容 | 长度 |
|---|---|
| 华盛顿(美联社)白宫周一表示,下周,随着国家公共卫生紧急状态的结束,拜登政府将取消最后剩下的大部分联邦 COVID-19 疫苗要求。针对联邦工作人员和联邦承包商以及前往美国的外国航空旅客的疫苗要求将于 5 月 11 日结束。政府还开始取消对 Head Start 教育工作者、医疗保健工作者和美国陆地边境非公民的疫苗接种要求。这些要求是联邦政府为促进疫苗接种而采取的一些更强制性措施的最后残余,因为 | 100 |
| 联邦政府为促进疫苗接种而采取的措施,因为致命病毒肆虐,它们的结束标志着乔·拜登总统政府如何将 COVID-19 视为一种常规、地方性疾病的最新表现。“虽然我相信这些疫苗强制令产生了巨大的有益影响,但我们现在认为取消这些要求非常有意义,”白宫 COVID-19 协调员阿什什·贾哈博士周一告诉美联社。 | 83 |
| 奥尔巴尼,纽约(美联社)纽约州议员周一开始就一项总额达 2290 亿美元的州预算进行投票,该预算原定于一个月前提交,内容包括提高最低工资、打击非法大麻店以及在新建筑中禁止燃气灶和炉具。州长凯西·霍楚尔和她在立法机构中控制权的民主党同事之间的谈判拖过了 4 月 1 日的预算截止日期,主要原因是围绕保释法修正案和支出计划中包含的其他政策提案存在分歧。一些预算议案的辩论于周一开始。州参议院多数党领袖安德里亚·斯图尔特-卡曾斯表示,她预计投票将 | 100 |
| 参议院多数党领袖安德里亚·斯图尔特-卡曾斯表示,她预计周二将完成投票,以通过她所说的为纽约人带来“重大胜利”的预算案。“我希望早点完成这项工作。我想我们都会同意这一点,”卡曾斯在投票开始前告诉记者。“这是一份政策性很强的预算,很多政策都必须仔细审查。”霍楚尔成功推动了一项保释法修正案,该修正案将取消要求法官规定“限制最少”的手段以确保被告出庭的标准。霍楚尔表示,法官 | 100 |
| 手段以确保被告出庭。霍楚尔表示,法官需要额外的自由裁量权。一些自由派议员认为,这将削弱 2019 年批准的全面保释改革,并导致更多低收入人群和有色人种被审前拘留。根据州官员的说法,以下是预算中将包含的其他一些政策条款。到 2026 年,纽约市及其部分郊区的最低工资将提高到 17 美元,该州其他地区的最低工资将提高到 16 美元。这比纽约市的 15 美元和纽约上州的 14.20 美元有所提高。 | 98 |
在此示例中,两个输入文档被解析为五个输出文本块。没有前置元数据,因此每个块都与配置的块大小匹配(每个文档的最后一个除外)。我们还在此文本块中配置了一些重叠,因此最后十个标记是共享的。