文章浏览阅读1.7k次，点赞38次，收藏34次。基于BERT+LSTM+CRF深度学习识别模型医疗知识图谱问答可视化系统通过构建医疗领域的知识图谱来实现计算机的深度学习，并且能够实现自动问答的功能。本次的内容研究主要是通过以Python技术来对医疗相关内容进行数据的爬取，通过爬取足量的数据来进行知识图谱的的搭建，基于Python语言通过echarts、Neo4j来实现知识图谱的可视化。通过智慧问答的方式构建出以BERT+LSTM+CRF的深度学习识别模型，从而完成对医疗问句主体的识别，构建出数据集以及实现文本的训练。通过Django来进行web网页的开发

文章浏览阅读2.7k次，点赞2次，收藏13次。手把手教你快速在生产环境搭建Doris集群_please set vm.max_map_count to be 2000000 under root using 'sysctl -w vm.max

文章浏览阅读1.1w次，点赞23次，收藏72次。数据分析题目_使用调查数据,可视化不同群体对某一话题的观点分布。

文章浏览阅读1.7k次，点赞32次，收藏26次。随着大数据需求的增多，许多中小公司和团队也新增或扩展了大数据工作岗位；但是却对大数据要做什么和能做什么，没有深入的认识；往往是招了大数据岗位，搭建起基础能力后，就一直处于重复开发和任务运维的状态；后续大数据人员也做了其他很多工作，仿佛什么都在做，就是不知道集中精力该往哪个方向努力。本文从基础大数据开发岗开始分析，思考大数据工作细分有哪些岗位，分别需要什么能力，以此来提供大数据能力发展方向参考。

文章浏览阅读6.1k次，点赞159次，收藏126次。本文主要讲解了大数据的定义和分类，大数据的特点，大数据的应用以及大数据带来的一些负面影响。

文章浏览阅读4.9k次，点赞59次，收藏48次。Hive增量查询Hudi表。最近可能会有Spark SQL增量查询Hudi表的需求，并且我发现目前用纯Spark SQL的形式还不能直接增量查询Hudi表，于是进行学习总结一下。本文总结了Spark SQL增量查询Hudi表的一些参数设置，并给出了示例，介绍了使用纯Spark SQL实现增量查询Hudi表的几种方式，不确定未来社区会采用哪种方式，大家目前如果有这种需求的话，可以先选择一种自己喜欢的方式，等未来社区版本支持后，再升级版本。_spark如何实现增量查询外部表

文章浏览阅读1.5k次，点赞36次，收藏30次。期望最大化算法（Expectation-Maximization Algorithm，简称EM算法）是一种迭代优化算法，主要用于估计含有隐变量（latent variables）的概率模型参数。它在机器学习和统计学中有着广泛的应用，包括但不限于高斯混合模型（Gaussian Mixture Model, GMM）、隐马尔可夫模型（Hidden Markov Model, HMM）以及各种聚类和分类问题。

文章浏览阅读944次，点赞22次，收藏15次。http://archive.apache.org/dist/hbase/ 下载地址。8. 通过web来访问：http://192.168.64.160:16010/（在一台机器上进行配置；注意：在启动之前需要进行时间的统一；（我们使用的是和主节点的时间同步；3.解压软件：解压到/usr/local/ 文件夹 （在一台机器上）2.启动hbase(在hadoop06上执行) 在主机上启动即可；需要修改的内容：（分别开启他的注释修改内容即可；6.进行hbase的配置文件的修改操作：修改文件。

文章浏览阅读953次，点赞17次，收藏17次。# 0 简介今天学长向大家介绍一个适合作为毕设的项目毕设分享 python大数据房价预测与可视化系统项目获取：https://gitee.com/assistant-a/project-sharing对于数据挖掘工程师来说，有时候需要抓取地理位置信息，比如统计房子周边基础设施信息，比如医院、公交车站、写字楼、地铁站、商场等，一般的爬虫可以采用python脚本爬取,有很多成型的框架如scrapy，但是想要爬百度地图就必须遵循它的JavaScriptApi，那么肯定需要自己写JavaScript脚本与百度API

文章浏览阅读1k次，点赞23次，收藏22次。软考 系统架构设计师系列知识点之大数据（3）

文章浏览阅读2.9k次。2023 年第二届钉钉杯大学生大数据挑战赛初赛题目 初赛 A：智能手机用户监测数据分析一、问题背景近年来，随着智能手机的产生，发展到爆炸式的普及增长，不仅推动了中 国智能手机市场的发展和扩大，还快速的促进手机软件的开发。近年中国智能手 机市场品牌竞争进一步加剧，中国超越美国成为全球第一大智能手机市场。手机 软件日新月异，让人们更舒适的使用手机，为人们的生活带来很多乐趣，也产生 了新的群体“低头一族”。_钉钉杯2023a题

文章浏览阅读2.7k次，点赞4次，收藏19次。Spark系列之Spark的RDD详解_spark rdd

文章浏览阅读6.9k次，点赞13次，收藏223次。这对于在校师生来说，不够友好。我国每个省份的台站每天会产生海量的地震数据，以往的地震测震平台在数据的采集、存储、检索、计算方面已经满足不了现在的需求，因此，提出一个可行、有效的解决方案具有重要的研究意义和应用价值。选题意义：现如今租房现象十分普遍，由于房价的飞涨，尤其在一、二线城市，短时间内想拥有一个属于自己的居室简直难如登天，对于更多人尤其是外出工作的人来说租房更是他们的上上之选，因此，房屋租赁一直是人们热点关切的问题，也是大多数人们的需求，由此可见，一个良好的租房数据分析平台的实现是非常有意义的。_hive毕设

文章浏览阅读5.4k次，点赞2次，收藏6次。根据官网整理的Influx脚本的查询优化问题_influxdb 查询亿级数据性能

文章浏览阅读3.2k次。数据集成是指将来自不同数据源的数据整合到一起形成一个统一的数据集。这个过程包括从不同的数据源中收集数据，对数据进行清洗、转换、重构和整合，以便能够在一个统一的数据仓库或数据湖中进行存储和管理。数据集成可以帮助企业更好地理解和利用他们的数据，并促进数据驱动的决策和业务流程优化。在数据集成过程中，需要考虑数据质量、数据安全性、数据格式、数据结构等方面的问题，并采用适当的技术和工具来解决这些问题，例如ETL抽取、转换、加载）工具、数据映射工具、数据清洗工具、数据建模工具等。SqoopDataX。_数据集成

文章浏览阅读2.4k次，点赞14次，收藏35次。数据科学与大数据专业毕业设计选题合集涵盖了管理系统、小程序、深度学习、机器学习、算法、人工智能、大数据、网络安全、嵌入式、推荐系统、目标检测等多个热门领域。对于计算机专业、软件工程专业、人工智能专业、通信工程专业的毕业生而言，选择一个合适的毕业设计选题至关重要。在这个毕业设计选题合集中，我们精心收集了各种有趣且具有挑战性的选题，旨在帮助学生们在毕业设计中展现他们的技术实力和创新能力。不论是对于对深度学习技术感兴趣的同学，还是希望探索机器学习、算法或人工智能的领域的同学，本合集都能为您提供丰富的选题资源和灵感_数据科学与大数据技术毕业设计方向

文章浏览阅读5.4k次，点赞83次，收藏97次。从0到1搭建分布式爬虫平台、深度汇总各功能模块应用

文章浏览阅读883次，点赞21次，收藏17次。1.背景介绍大数据人工智能(Big Data AI)是指利用大数据技术来实现数据的智能化处理和自动化管理，以提高企业和社会的效率和智能化程度。在当今的数字时代，数据量不断增长，人工智能技术不断发展，大数据人工智能成为了企业和社会的必须技术。大数据人工智能的核心是将大量的数据进行挖掘和分析，从而为企业和社会提供智能化的决策支持和自动化管理。这需要结合大数据技术、人工智能技术、计算机科学技术和...

文章浏览阅读1.1k次，点赞2次，收藏36次。Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能（HQL），hive的研发是为了避免了去写MapReduce，提供快速开发的能力，减少开发人员的学习成本。_银行hive相关面试题和答案

文章浏览阅读846次，点赞18次，收藏26次。1.背景介绍旅游业是一个高度竞争的行业，其成功取决于如何更有效地利用资源、提高效率、提高客户满意度，以及预测市场趋势。随着互联网和大数据技术的发展，旅游业中的数据产生量和数据类型日益丰富。因此，大数据技术在旅游业中具有广泛的应用前景和潜力。在这篇文章中，我们将探讨如何利用大数据提高旅游业的效率，包括以下几个方面：背景介绍核心概念与联系核心算法原理和具体操作步骤以及数学模型公式详细...

文章浏览阅读1.1w次，点赞176次，收藏52次。帮助创作者创收_创作者csdn广告

文章浏览阅读830次，点赞16次，收藏20次。1.背景介绍随着数据的快速增长，大数据技术已经成为企业和组织中不可或缺的一部分。大数据技术可以帮助企业更好地理解其客户、优化其业务流程，提高效率，降低成本。然而，大数据技术的发展并不是一成不变的。随着人工智能(AI)技术的发展，大数据技术和人工智能技术的融合成为了一个热门的研究领域。这篇文章将探讨大数据与人工智能的融合，以及如何实现业务智能。我们将讨论以下主题：背景介绍核心概念与联...

文章浏览阅读827次，点赞18次，收藏21次。1.背景介绍航空航天领域的大数据技术已经成为一个热门的研究和应用领域，它涉及到的数据量巨大，涉及到的实时性要求高，涉及到的计算复杂度也非常高。在这篇文章中，我们将从以下几个方面进行探讨：航空航天大数据的背景和发展趋势航空航天大数据的核心概念和技术航空航天大数据的实时数据处理与分析技术航空航天大数据的未来发展趋势和挑战1.1 航空航天大数据的背景和发展趋势航空航天大数据的发...

文章浏览阅读1.1w次，点赞8次，收藏25次。开源的 ETL工具里面 DataX和 Kettle的人气一直高居不下，datax虽然比较年轻，但这两年发展势头很猛，不时就能听到身边的同事谈起。kettle作为老牌的 etl工具，诞生年限长，功能完善，特别是其开箱即用的数据转换算子，不得不令人叹服。因此，笔者决定对这两款工具进行深入的对比分析，有多深呢，到源码那种。_datax和kettle哪个比较强大

文章浏览阅读1k次，点赞8次，收藏12次。一、为什么要做诊断引擎毓数平台是奇富科技公司自主研发的一站式大数据管理、开发、分析平台，覆盖大数据资产管理、数据开发及任务调度、自助分析及可视化、统一指标管理等多个数据生命周期流程，让用户使用数据的同时，挖掘数据最大的价值。而毓数平台的大数据任务调度底层是基于Apache DolphinScheduler实现的。整个大数据平台有1000+机器、70P数据量，每日新增200T数据。每天在毓数工作流上运行的任务实例有13万+，周活跃用户400+；每天在毓数自助查询中运行的sql有16万+，周活跃用户500+

文章浏览阅读1.6k次，点赞3次，收藏27次。hudi搭建题目分析本任务需要使用root用户完成相关配置，具体要求如下：1、 从宿主机/opt目录下将maven相关安装包复制到容器Master中的/opt/software（若路径不存在，则需新建）中，将maven相关安装包解压到/opt/module/目录下（若路径不存在，则需新建）并配置maven本地库为/opt/software/RepMaven/，远程仓库使用阿里云镜像，配置maven的环境变量，并在/opt/下执行mvn-v，将运行结果截图粘贴至客户端桌面【Release任务A提交_hudi安装部署

文章浏览阅读4.3k次，点赞2次，收藏10次。future versions of Elasticsearch will require Java 11; your Java version from [/data/jdk1.8.0_111/jre] does not meet this requirementOpenJDK 64-Bit Server VM warning: Option UseConcMarkSweepGC was deprecated in version 9.0 and will likely be removed in _future versions of elasticsearch will require java 11; your java version fro

文章浏览阅读9.7k次，点赞23次，收藏64次。Navicat连接MySQL教程及常见问题解决方法，问题比如mysql登录报错，忘记mysql登录密码等等。_navicat连接mysql

文章浏览阅读1.4k次，点赞48次，收藏43次。

文章浏览阅读8.3k次。新媒体平台可以为企业提供一个良好的线上营销平台。企业可以利用新媒体平台展示自己的产品，向消费者展示产品特点，增加消费者对产品的兴趣，更好地推广产品。_彩妆化妆工具市场