酷酷是懒虫

这个屌丝很懒，什么也没留下！

热门标签

4月11号软件资讯更新合集......_大量文件采集场景下需要用到流控处理机制

作者：酷酷是懒虫 | 2024-07-20 08:00:46

踩

大量文件采集场景下需要用到流控处理机制

跟 ChatGPT 聊天、需求润色优化，禅道 OpenAI 插件发布！

禅道插件上新了，OpenAI 禅道集成，可提供神奇海螺聊天、需求润色功能。

神奇海螺

“章鱼哥，你为什么不问问神奇海螺呢？”—— 海绵宝宝

那么，就让我们问一问神奇海螺吧！禅道上线神奇海螺功能，打通 ChatGPT 的 API，解决在国内个人用户使用 ChatGPT 比较困难的问题，您可以通过禅道的神奇海螺向 ChatGPT 聊天提问了！

在禅道右下角增加了神奇海螺功能，是一个 ChatGPT 聊天框，可以在这里与 ChatGPT 聊天。

具体如何更好地使用神奇海螺，可以参考下列原则：

提问最好聚焦在某个具体问题，太开放性的问题可能只能用来 “调戏” 它，得不到具有参考意义的回答；
提问时可以尽可能详细地描述问题背景、上下文信息，或者根据它的回答继续补充明确信息；
神奇海螺具有上下文功能，支持多次迭代，重新调整问题描述或给到更清楚的信息，在原有基础上进行迭代。

总而言之，神奇海螺适合用来写诗、写文章、写小说、写代码、归纳总结，不适合开放性广义问题、寻求情感建议。

需求润色

作为一个产品经理，我偶尔写不出好需求…… 别怕，需求润色来帮你！

在产品 - 需求功能下，神奇海螺可以帮助产品经理进行需求的润色、完善和优化。它可以：

把一句话需求转化为准确、清晰、具体，具有完整描述的需求；
把需求标题、需求描述、验收标准补充为条理清晰的内容；

转换后不合适的需求可以进行重新转换，直到满意为止；

可以根据转换后的内容再度调整原有需求描述，重新转换；
保存转换结果后，进入需求编辑或需求变更流程。

有了需求润色，妈妈再也不用担心我的需求写的太烂！不过，可不要过度依赖它，它依然有不够了解、不够智能的领域，所以加强自身的能力，把需求润色作为辅助工具，不断提高自身的产品经理技能才是王道。

原文链接：https://www.oschina.net/news/236321/zentao-chatgpt

fastjson 2.0.27 发布

fastjson 2.0.27 现已发布。这又是一个每月更新例行的 Bug 修复功能增强版本，大家按需升级。最近非常多用户从 fastjson 1.1.x 升级到 2.0.x，升级后获得性能显著提升。dubbo 用户使用 fastjson2 二进制格式 JSONB 的用户也越来越多，这次的发布也修复了一些相关的问题。

Issues

修复集成 spring-doc 导致文档无法显示的问题
修复 kotlin 某些场景序列化报错的问题
修复 Android 兼容问题，Timestamp.valueOf 方法在 Android 下不存在
提升 fastjson 1.x 兼容性，支持对 List 类型反序列化输入 single object
提升 fastjson 1.x 兼容性，增强对注释的支持
修复对 ascii 128 ~ 255 段 LATIN1 字符在 JDK 11/JDK17 下某些场景反序列化结果不对的问题
提升对 fastjson 1.x 兼容性，支持 TypeUtils.compatibleWithFieldName=true
修复对 GraalVM 识别不准确的问题
修复 autoType 打开时不支持 Enum 类型作为 Key 的 Map 类型反序列化
修复某些场景引用检测 NPE 的问题
修复 List 类型输入空字符串行为和 fastjson 1.x 不兼容的问题
修复 List<List> 类型反序列化某些场景会报错的问题
修复 AtomicBoolean 类型不支持反序列化的问题
修复某些场景 JSONField 不起作用的问题
JSONObject & JSONArray 新增方法 getDateOrDefault
反序列化和类型转换支持 mongedb 的 Decimal128
序列化增强对动态代理的支持
修复某些场景 JSON.isValid 结果不对的问题
修复某些场景序列化处理 Annotation 报错的问题
修复 JSONObject 转化为 Java 对象时 Map 类型字段元素类型不正确的问题
增强对日期格式的自动识别
增强对 base64 格式的支持
TypeReference 支持输入参数
增强对 CSV 的支持 (对标 Jackson 对 CSV 的支持)
增强对自定义 Map 的支持
进一步提升在 JDK 8 下的序列化性能

MAVEN 依赖配置


<dependency>
    <groupId>com.alibaba.fastjson2</groupId>
    <artifactId>fastjson2</artifactId>
    <version>2.0.27</version>
</dependency>
<dependency>
    <groupId>com.alibaba</groupId>
    <artifactId>fastjson</artifactId>
    <version>2.0.27</version>
</dependency>
<dependency>
    <groupId>com.alibaba.fastjson2</groupId>
    <artifactId>fastjson2-extension-spring5</artifactId>
    <version>2.0.27</version>
</dependency>
<dependency>
    <groupId>com.alibaba.fastjson2</groupId>
    <artifactId>fastjson2-extension-spring6</artifactId>
    <version>2.0.27</version>
</dependency>

原文链接：https://www.oschina.net/news/236306/fastjson-2-0-27-released

OpenShot 3.1 发布，支持 400 多个视频配置文件

OpenShot 是跨平台的开源视频剪辑软件，该项目在 2008 年 8 月由 Jonathan Thomas 发起，其目标是提供稳定、自由且易于使用的视频编辑器。OpenShot 的核心视频编辑功能是以 C++ 库实现，称之为 libopenshot。

OpenShot 支持 Linux、macOS、Windows，以及 chromeOS。

OpenShot 3.1 正式发布，新版本现在支持 400 多个视频配置文件，并改进了功能、修复了错误、提高了性能。

亮点和功能：

改进的配置文件（400 多个视频配置文件）
时间重映射更新（改进的音频重采样，支持反向音频，支持 bezier 曲线）
改进的撤销 / 重做系统，包括分组操作
改进了预览和分割片段对话框
改进的字幕效果（支持高 DPI，改进 VTT 支持）
内存泄漏修复
改进的性能
改进了键盘绑定
修复了 Blender Animated Titles 使用高 FPS
修复了视频预览组件大小的问题，以正确清除缓存。
修复了自动过渡方向逻辑的问题（即根据过渡的位置正确淡入 / 淡出）。
修复了 AppImage 的问题，以支持新的发行版
改进了关于对话框
扩展了默认的 Emojis
改进了文件属性对话框，以处理替换文件和缩略图，并更好地支持改变 FPS
更新了语言翻译
更新了支持者和捐赠者
更新了文档 / 用户指南

原文链接：https://www.oschina.net/news/236305/openshot-3-1-0-released

likeadmin基于「Spring Boot + ThinkPHP + FastAPI + Gin + TypeScript + Vue + Vite + Nuxt+ Element Plus + uni-app」实现的免费开源后台管理系统，拥有Java、PHP、Python、GO等多种后端语言版本，专业团队维护，值得信赖，欢迎下载体验。开源地址：https://gitee.com/likeadmin 官网文档地址：https://www.likeadmin.cn

EasyGoAdmin 敏捷开发框架 Beego+AntdVue 版本 v2.3.0 发布

v2.3.0 更新内容：

1、go.mod 依赖管理导入 Excel 操作类依赖；

2、新增职级管理导出 Excel 数据的功能；

3、新增职级管理导入 Excel 模板文件；

4、新增职级管理导入 Excel 操作面板；

5、新增职级管理导入 Excel 数据的功能；

6、新增职级管理导入、导出和下载模板的理由；

7、修复近期用户使用过程中反馈的 BUG；

一款 Go 语言基于 Beego、Vue3、AntDesign、MySQL 等框架精心打造的一款模块化、插件化、高性能的前后端分离架构敏捷开发框架，可快速搭建前后端分离后台管理系统，本着简化开发、提升开发效率的初衷，框架自研了一套个性化的组件，实现了可插拔的组件式开发方式，同时为了敏捷快速开发，框架特地集成了代码生成器，完全自主研发了自定义后端服务模板和前端自定义模板，可以根据已建好的表结构，可以快速的一键生成整个模块的所有代码和增删改查等等功能业务，真正实现了低代码开发方式，极大的节省了人力成本的同时提高了开发效率，缩短了研发周期，是一款真正意义上实现组件化、可插拔式的敏捷开发框架。

原文链接：https://www.oschina.net/news/236342/easygoadmin-beego-2-3-0

数据采集 ETL & 流批一体化框架 bboss v6.8.9 发布

数据采集 ETL & 流批一体化框架 bboss v6.8.9 发布 --- 高效、稳定、快速、安全

快速导入 bboss

一般项目导入下面的 maven 坐标即可：


<dependency>
            <groupId>com.bbossgroups.plugins</groupId>
            <artifactId>bboss-elasticsearch-rest-jdbc</artifactId>
            <version>6.8.9</version>
        </dependency>

如果是 spring boot 项目还需要导入下面的 maven 坐标：


 <dependency>
            <groupId>com.bbossgroups.plugins</groupId>
            <artifactId>bboss-elasticsearch-spring-boot-starter</artifactId>
            <version>6.8.9</version>
        </dependency>

v6.8.9 功能改进

文件采集插件改进：大量文件采集场景下的流控处理机制，通过设置同时并行采集最大文件数量，控制并行采集文件数量，避免资源过渡消耗，保证数据的平稳采集。当并行文件采集数量达到阈值时，启用流控机制，当并行采集文件数量低于最大并行采集文件数量时，即可继续采集后续文件
改进 ftp/sftp 文件下载采集机制：采集 / 定时调度采集 sftp/ftp 文件时，等待所有的文件采集都加入采集通道后再返回，继续下一次调度采集（定时调度）/ 或者再继续后续的处理（一次性采集）
改进通用 bulk 批处理器和 Elasticsearch bulk 批处理器：优化 flush 线程及锁管理和 shutdown 机制，更加优雅关闭 bulk 批处理器。
改进 kafka 消费组件：将工作线程改为 daemon=false

原文链接： https://www.oschina.net/news/236324/bboss-6-8-9-released

njs 0.7.12 发布，nginx 的 JavaScript 脚本语言

njs 0.7.12 已发布。njs 以 nginx 插件的方式存在，它是 JavaScript/ECMAscript 的子集，实现了大部分的 JavaScript 语言功能，没有完全遵从 ECMAScript 标准，同时抛弃了 JavaScript 比较难懂的部分。njs 不通过 V8 引擎实现，而是通过一个更小、能耗更低、更符合 nginx 应用场景的小虚拟机实现，可以理解成 nginx 为其实现了一套自己的词法解析。

作为 nginx 的插件，njs 的安装方式是重新编译 nginx。

新版本下载地址：http://nginx.org/en/docs/njs/install.html

主要变化

nginx modules：

Bugfix：修复了 Fetch API 中的 Headers()constructor。

Core：

Feature：在 crypto 模块中添加了 Hash.copy()方法。
Feature：添加了 zlib 模块。
Improvement：增加了对 export {name as default} 语句的支持。
Bugfix：根据规范修复了 Numberconstructor。

更多详情可查看 Changelog。

原文链接：https://www.oschina.net/news/236311/njs-0-7-12-released

DBeaver 23.0.2 发布，可视化数据库管理平台

DBeaver 是一个免费开源的通用数据库工具，适用于开发人员和数据库管理员。

DBeaver 23.0.2 发布，更新内容如下：

ER Diagrams：
添加了 Accessibility 支持（文本阅读器）
添加了许多键盘快捷键
解决选项更改后图表重新布局的问题
搜索时移动焦点的问题已修复
General UI：
数据库编辑器在断开连接后保持打开状态（可配置）
可点击的提示现在显示为链接
修复了 MacOS 工具栏中缺少图标的问题
Result Set 中的字体和颜色更改得到改进
大字体现在可以在 MacOS 上正确显示
SQL Editor：
INSERT/UPDATE/DELETE 查询的自动完成得到改进
现在无需重启即可应用字体更改
Data Editor：
显示数值（例如无穷大）渲染得到改进
在外部编辑器中从 value panel 打开 images 的问题已修复
Connectivity：
添加了对旧版 SSH 算法的支持
确认对话框现在会记住用户的选择
重开连接的尝试次数减少了
添加了使用未保存密码通过 SSHJ 连接的功能
Maven 工件配置现在支持分类器
Data transfer：为 CSV 和 XLS 格式添加了列描述支持
AI (ChatGPT)：不支持的 AI 模型被替换为新模型
Databases：
Firebird：添加了过程定义中的默认参数
PostgresSQL：添加了物化视图依赖项
Databricks：添加了对表注释的支持
Oracle：修复了字符串末尾的 “q” 被裁剪的问题
SQLite：触发删除已实施
SQL Server：解决了重复数据类型的问题
Localization：
繁体中文本地化已更新
Windows 安装程序中添加了繁体中文
Misc：
Microsoft store：应用程序安装问题已在大多数机器上得到修复
（再次）切换到 Java 17
切换到 Eclipse 2023-03 作为基础平台

原文链接：https://www.oschina.net/news/236309/dbeaver-23-0-2-released