Python语音识别文本相似性度量库jiwer
1 jiwer Github项目地址：https://github.com/jitsi/jiwer jiwer Github项目地址：https://github.com/jitsi/jiwer jiwer是一个python库，可用于语音识别时度量识别文本和准确文本之间的相似性。该库可度量的指标包括相似性……
分类 大数据/AI/ML articles
AWS、Azure、GCP的生成式AI产品
ChatGPT, which is mainly invested by Microsoft, sparked a wave of generative AI. Corresponding google launched bard to fight and defend. The top three cloud vendors AWS, Azure, and GCP have also launched cloud services related to generative AI. This article summarizes the three corresponding main products. ChatGPT引发了生成式AI的火热浪潮，ChatGPT主要是由微软进行投资的。对应的Google推出了bard以对抗和防守。前三的云厂商AWS、Azure、GCP也推出了生成式AI相关……
AI 和 Google Workspace 的新世代
google-workspace 在将近 25 年的时间里，Google 打造了人们每天都在使用的实用产品，从搜寻、地图，到 Google Workspace 中的 Gmail 和 Google 文件。人工智慧（AI）在建构产品方面带来了许多革新，这些产品在人们的生活中占有重要地位。在我们的生产力套件中，先进的 AI 的技术已协助 30 亿使用者透过使用智慧撰写和智慧回覆节省更多时间，包……
OpenAI人工智能应用场景
一、简介 AI 以迅速的发展，不仅仅在研究界带来了革新，在生活的方方面面也提供智能化，使我们更便利。在本篇内容中，ShowMeAI将介绍 OpenAI 的主要发展以及它们实际落地的 AI 产品应用。 OpenAI vs DeepMind，两大人工智能巨头应对不同挑战 OpenAI 的使命侧重于以安全的方式为全人类实现人工智能的可用性。O……
数据仓库和数据湖的区别
一、数仓和数据湖的区别 1. 数据内容区别 数据仓库：处理结构化数据； 数据湖：处理结构化、半结构化、非结构化和原始二进制数据。 2. 成本 数据仓库利用数据库来存储结构化数据层，这可能很昂贵。 数据湖将数据存储在低成本设备中。 3. 数据处理过程 数据仓库对数据执行提取-转换-加载 (ETL Extract-Tra……
clickhouse(一)单节点安装使用
一、clickhouse概述 clickhouse是Yandex（俄罗斯版的百度）于 2016 年开源的一个用于联机分析(OLAP)的列式大数据库管理系统(DBMS)。常见的很多人会将其和Druid、ES、Pinot等库进行对比。由于其具有低延迟、高写入速度、磁盘空间占用低等特点，同时几乎和……
Cloudera Manager 5和CDH5离线安装
一、相关软件准备及规划 1、相关软件及下载地址： Cloudera Manager：http://archive-primary.cloudera.com/cm5/cm/5/ CDH安装包地址：http://archive.cloudera.com/cdh5/parcels/latest/ JAVA官方……
常用hadoop dfs命令
创建目录 1hadoop dfs -mkdir /home 上传文件或目录到hdfs 1hadoop dfs -put hello / 2hadoop dfs -put hellodir/ / 查看目录 1hadoop dfs -ls / 创建一个空文件 1hadoop dfs -touchz /361way 删除一个文件 1hadoop dfs -rm /361way 删除一个目录 1hadoop dfs -rmr /home 重命名 1hadoop dfs -mv /hello1 /hello2 查看文件 1hadoop dfs -cat /hello 将制定目录下的所有内容merge成一个文件，下载到本地 1hadoop dfs -getmerge /hellodir wa 使用du文件和目录大小 1hadoop dfs -du / 将目录拷贝到本地……
开源日志系统比较：scribe、chukwa、kafka、flume
1. 背景介绍 许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征： （1） 构建应用系统和分析系统的桥梁，并将它们之间的关联解耦； （2） 支持近实时的在线分析系统和类似于Hadoop之类的离线……