对于想了解“以地控税”—GIS在税务征管的创新应用的读者,本文将是一篇不可错过的文章,我们将详细介绍以地控税信息,并且为您提供关于2024TiDBAI创新应用黑客马拉松开启报名啦!一起来用TiDB构建
对于想了解“以地控税”—GIS 在税务征管的创新应用的读者,本文将是一篇不可错过的文章,我们将详细介绍以地控税信息,并且为您提供关于2024 TiDB AI 创新应用黑客马拉松开启报名啦!一起来用 TiDB 构建未来的 AI 创新应用!、AI在设计领域的创新应用盘点、AI视觉在教育场景中的创新应用、gis地图的创新与发展前景的有价值信息。
本文目录一览:- “以地控税”—GIS 在税务征管的创新应用(以地控税信息)
- 2024 TiDB AI 创新应用黑客马拉松开启报名啦!一起来用 TiDB 构建未来的 AI 创新应用!
- AI在设计领域的创新应用盘点
- AI视觉在教育场景中的创新应用
- gis地图的创新与发展前景
“以地控税”—GIS 在税务征管的创新应用(以地控税信息)
“以地控税”—GIS 在税务征管的创新应用
电子地图的发展过程虽然短暂,在税收上的应用更是最近几年才有的事,肯定存在一些争论和犹豫。但随着这几年的应用推广实验,系统独特的方法和效果逐渐得到各级领导的认可和称赞。电子地图作为加强对税源管理、体现服务纳税人、促使征纳信息对称的一种实用、创新的工具,必要有更为广阔的发展前景。
详细解读 和小伙伴们一起来吐槽
2024 TiDB AI 创新应用黑客马拉松开启报名啦!一起来用 TiDB 构建未来的 AI 创新应用!
引言
2024 TiDB Future App Hackathon 来啦!本届是第八届 TiDB Hackathon ,也是第二届全球 TiDB 黑客马拉松比赛,TiDB Hackathon 自举办以来,已累计参赛人数超过 3000+ 人 !回顾去年的 TiDB Hackathon 赛事,有来自88 个国家近 1500 名小伙伴参加,提交了 100 个优质项目,与此同时,TiDB 中文社区的小伙伴也取得了非常亮眼的成绩,揽下了 TiDB 2023 年 Hackathon 的二等奖、五等奖和 Vercel|Best User Experience Award!
今年,TiDB Future App Hackathon 依旧如约而至!奖金超 ¥210,000 !这个盛夏不妨来 TiDB 社区绽放你的夏日“源”动力,驾驭TiDB Serverless 上的向量搜索功能,开发你的 AI 创新应用!无论你是对图像处理、多模态搜索、自然语言处理(NLP)、还是构建企业知识库最热门的GraphRAG 感兴趣,欢迎来到 TiDB Hackathon 2024 的赛场展示你的作品!也欢迎小伙伴们与志同道合的开发者们组队(每队最多四名成员),一起赢取 Hackathon 2024 的荣耀!
参赛福利&活动亮点
- 高额奖金:总奖金超过¥210,000 ,参赛即可获得丰厚的奖励!
- 免费云资源:参赛即可免费获得 5 个集群 5 GB 的 TiDB serverless 云资源,如若使用超过 5GB 还可以额外申请价值 $100 Credit(按照汇率价值 700+ 人民币)
- 特别奖项:除了 Top 5奖项外,还设有社会公益奖和最佳开源奖,鼓励解决社会问题和开源精神,让你获得更多获奖机会*!
- 周边奖励:获奖团队还可以获得人手一个的 TiDB 防水双肩包
- 专家交流:技术专家在线答疑,有问题可以随时提问,再也不用自己苦苦烦恼遇到问题无法解决啦!
- 全球同台竞技:与全球顶尖开发者们组队、交流、探讨技术和项目(顺便锻炼下自己的英文)
- 专业评审:由行业专家组成的评审团,对参赛项目进行多维度专业评分!
- 尝鲜 TiDB 新技术:使用TiDB Serverless及其内置的向量搜索功能来开发 AI 应用,这是当前数据库技术的前沿应用;通过参赛、参与活动 Meetup 一手掌握 TiDB 向量功能 workshop 及应用实践经验;参赛者可以在图像处理、多模态搜索、自然语言处理(NLP)、企业知识库构建等多个领域展示创新。
- 社区交流:提供微信群等社区交流平台,方便交流想法和解决问题,如果缺乏队友的也可以加入微信群招募队友。
如二维码过期,请添加 TiDB Robot 微信(tidbai)邀您进 TiDB Hackathon 2024 活动微信群!
加入 TiDB Hackathon 2024 Discord 群组
Discord 邀请链接 >> <https://discord.gg/A3Ue27s7rD>
欢迎来 TiDB Community Discord 群组寻找你的神仙队友、讨论酷炫 Idea,和全球的应用开发者一起交流技术问题,交流时请使用英语哦~
奖项设置
评审团将对参与 TiDB Hackathon 2024 的项目进行多维打分,评选出获得 Top 5 以及特别奖项的项目。
奖项名称 | 奖励 |
---|---|
第一名 | $12,000 美金 + 社区周边礼包 |
第二名 | $7,000美金 + 社区周边礼包 |
第三名 | $3,500 美金+ 社区周边礼包 |
第四名 | $2,500 美金+ 社区周边礼包 |
第五名 | $1,500美金 + 社区周边礼包 |
社会公益奖 | $2,000 美金+ 社区周边礼包 |
最佳开源奖 | $2,000 美金 + 社区周边礼包 |
社会公益奖将在解决社会需求的提交作品中进行评选
最佳开源奖将在使用开源软件进行开发的提交作品中评选
作品要求
使用 TiDB Serverless 内置向量搜索功能(Vector Search)开发你的 AI 创新应用!
- 项目需能够成功安装并在提交要求中指定的平台上按照视频/文字中所描述的功能持续运行
⚠️ 注意,关于第三方集成和数据使用:如果项目集成了任何第三方 SDK、api / 数据,参赛者必须获得授权,才能根据工具或数据的条款、隐私政策或许可要求使用它们。
点击查看使用 TiDB Serverless 进行 APP 构建的案例。
TiDB Serverless 介绍
TiDB Serverless 是一款超轻量级、完全托管的 MySQL 兼容数据库,提供自动扩缩容、HTAP(混合事务和分析处理)能力,并内置向量搜索功能。值得一提的是,TiDB Serverless 将大大简化你的 AI 应用开发流程,只需点击几下,即可部署和配置一个具备完整功能的 Serverless TiDB 数据库!
TiDB Serverless:点击此处免费试用
TiDB vector 功能介绍
TiDB 向量搜索(beta 版)提供了一种高级搜索解决方案,用于对各种数据类型(包括文档、图像、音频和视频)执行语义相似性搜索。此功能使开发人员能够使用熟悉的 MySQL 技能轻松构建具有生成人工智能 (AI) 功能的可扩展应用程序。
更多资源材料:【TiDB 社区智慧合集】TiDB Vector 知识大全
如何报名?
报名链接:点击提交报名表 (由于是全球赛事,所以需要使用合法的 VPN 访问 )
参赛流程
- 注册 Devpost 账号并报名 Hackathon
- 组队队伍(支持个人/团队/组织参赛,团队成员最多 4 人,个人可参与多个项目/团队/组织;若参赛者以组织形式参与,需指派一位参赛人作为为组织代表)
- 免费注册 TiDB Cloud,并在 TiDB Serverless 上创建集群,开发属于你的 AI 应用。
- 如果还需要额外的云资源,请填写此表格进行申请,每个团队只能申请一次额外的云资源。
- 开发 APP,相关的开发指南
- 录制 Demo 视频(由于评委是国际评委,所以最好使用英文演讲,如若不能使用英文演讲,可以通过添加英文字幕来解决这个问题),录制视频后把视频上传到 Youtube
- 提交作品
参赛作品评审标准
- 参赛作品将由主办方选出的评审小组(后统称“评审”)进行审核和打分
评审将分两个阶段
- 第一阶段:评审团将初步判断项目是否达到了基本的可行性水平,是否符合 Hackathon 主题,且合理地应用了本届 Hackathon 所需的 APIs/SDKs,如符合上述要求的作品,将进入第二阶段评审。
- 第二阶段:对第一阶段入围的项目进行多维打分,具体打分项目如下:
评价维度 | 维度解释说明 |
---|---|
技术实现(35分) | 评估开发者对想法的执行程度以及 TiDB Serverless 和向量搜索功能的利用情况。项目是否展示了高质量的软件开发,是否充分利用了所有使用的软件工具。 |
创意/想法的质量(25分) | 项目的想法有多创新和独特!这个概念是否已经存在?如果已经存在,项目在多大程度上对其进行了改进。 |
应用的用户体验(20分) | 项目的用户体验和视觉设计是否经过深思熟虑?软件的前端和后端是否有平衡的融合。 |
文档质量(10分) | 提交材料中包含的文档说明质量如何? |
演示视频的质量(10分) | 视频是否展示了应用在其构建的设备上的功能,视频的阐述是否全面。视频时长是否在4分钟以内。 |
- 评审团将对符合第一阶段评审的项目按照以上评判标准进行打分。
- 单个奖项若有两个或以上的参赛者作品分数并列,则在技术实现维度得分更高者获胜;如平局仍存在,依次顺延对比其他维度的分数,得分更高者获胜;如有两个或以上的参赛者作品各单项得分均一致,评委小组将对并列的参赛作品进行投票。
活动时间轴
- 报名时间:7月12号-8月24日 12:00
- 作品提交时间:7月27日 0:00 - 8月24日 12:00
- 评审时间:8月26日-9月7日
- 奖项公布时间:9月12日
TiDB Hackathon AI Workshop 8月10日北京站:
- 主题:从 GraphRAG 到智能问答,企业知识图谱一气呵成
时间:8月10日(周六)14:00 - 18:00 TiDB AI 实战场 (记得带上电脑,上手实操哦)
- 19:00 - 22:00 奥运&七夕夜: 啤酒&BBQ,为健儿们加油
- 地点:北京 AWS 颐堤港 Office (北京市朝阳区颐堤港写字楼一座18层)
- 报名线下参与活动:PingCAP Account
Hackathon 资源:
TiDB Vector Search
- 博客文章:TiDB Vector Search Public Beta
- 案例分享:tidb-vector-python/examples at main · pingcap/tidb-vector-python · GitHub
开发资源
- 开发工具参考:Development Tools - TiDB Future App Hackathon 2024 - TiDB hackathon - TiDB Forum
- 应用案例参考:Sample Applications Built With TiDB Serverless - TiDB Hackathon 2024 - TiDB hackathon - TiDB Forum
- 公开数据集:Dataset—— TiDB Future App Hackathon 2023 - TiDB hackathon - TiDB Forum
- Open LLMs :GitHub - eugeneyan/open-llms: A list of open LLMs available for commercial use
TiDB APP 开发相关
- 看看 TiDB 在 Cloud 上的能力
- TiDB 应用开发者课程
- TiDB 特性
- OSSInsight 是如何使用 TiDB Serverless 的 HTAP 功能的
- TiDB Hackathon 2023 项目
- TiDB Future App Hackathon 2024(如何使用 TiDB Vector Search 构建未来应用)
- 几分钟内创立一个炙手可热的 GPT APP
- 用 GPT 进行交互式 SQL 学习
- 将 Vector Search 带到 TiDB
- TiDB Tips & Tricks
- TiDB 是如何智能选择行存储或列存储的
- TiDB 的实时分析能力
其他注意事项
- 关于作品提交说明:在提交期结束之前(北京时间 8 月 24 日 12:00 前),您可以将提交的项目草稿版保存在 Devpost 上,然后提交至 Hackathon 项目组进行作品评估。提交期结束后,您可能不会对提交的材料进行更改,但您可以继续更新 Devpost 中的项目。
- 作品修改说明:提交期后(北京时间 8 月 24 日 12:00 后),主办方 和 Devpost 可能允许您修改部分提交的材料,如:添加、删除或替换可能侵犯第三方标志或权利、披露个人身份信息或其他不适当的材料。修改后的提交内容必须与原始提交内容基本相同。
- 关于语言:材料需提供英文版,如果非英文版本,参赛者必须提供演示视频、文字描述、测试说明以及所有提交的材料的英文翻译版本
- 关于参赛作品提交数量:参赛者可以提交多份参赛作品,每份参赛作品必须原创、不得侵犯任何其他个人/团体/组织的知识产权,多份参赛作品相互之间需要有差异
- 参加 Hackathon 即表示您声明、保证并同意您的参赛作品符合这些要求。完整参赛规则请查看:Human Verification
特别鸣谢
感谢本次大赛的评审团对 Hackathon 的辛勤工作和专业评审!
同时也非常感谢 2024 TiDB Future App Hackathon 的赞助商们,为本届参赛选手们提供了丰富的开发工具资源!
合作社区
参与留言有奖
在活动贴评论区留言“你对本届 TiDB Hackathon 的期待”,即可获得 TiDB 社区 50 积分&经验值奖励
- 参与留言时间:2024.7.22-8.15
AI在设计领域的创新应用盘点
最近 chatgpt 很火,ai 似乎一下子就走入了人们的生活,其实在 cahtgpt 之前,ai 已经开始在各个领域发挥它的价值了,从数据挖掘,到工业机器人,从物流,到语音识别,从银行业软件,到医疗诊断,从艺术创作,到人工智能编码,AI 已经开始在各行各业展现它的强大之处。
今天我们来看下 ai 在设计领域的表现。
Adobe Sensei
在日本发音 Sensei 的是老师的意思,因此 Adobe Sensei 应该就是 Adobe 老师。Adobe Sensei 是一个机器学习和深度学习的产物。使用它你可以轻松创建图片,并且可以让您创建高质量的图形,此外它可以自动调整屏幕大小和分辨率。总之,对于一个美工常见的操作,Adobe Sensei 都可以轻松完成,我们再也不用为抠图而烦恼了。
Uizard
使用 Uizard,您可以在几秒钟内就设计出专业的网站、你也可以轻松地设计出桌面界面,当然移动应用程序界面也不在话下。它会自动将扫描的手绘草图转换为原型,并将它们应用到项目中。此外,Uizard 的预制设计模板和拖放组件允许您快速编辑您的设计。
Designs.ai
使用 Designs.ai,您可以轻松地创建徽标、图形、视频、模型和演讲。您可以从超过 20,000 个模板和 10,000 个图标库中进行选择。该平台还使用人工智能生成了数以千计的设计变化和数百万计的设计资源。您只需把您的品牌信息和相关需求设置好,它就可以创建出一个符合你口味的模板 logo。
Fronty
Fronty 是一个人工智能工具,它基于用户上传的图像创建源代码。它提供了一种创建网站的新方法。AI 图形设计工具有超过 20 年的前端经验,目前使用 11 种技术产品和服务,包括 HTML5 和谷歌分析。
Fronty 根据您的草案生成 HTML 和 CSS 代码。只需要上传网页设计的图像。AI 就会识别图像的不同元素,然后自动生成 HTML/CSS 代码。您也可以使用它的在线用户界面编辑器来修改您的网页。Fronty 生成的代码具有清洁、速度访问快的特点。
Khroma
Khroma 是一个基于人工智能的颜色组合生成器,它从你选择的颜色和互联网上成千上万的人造调色板中提取。
要生成一个个性化的颜色组合列表,你必须首先在 Khroma 网站上选择 50 种颜色。您可以将它们视为渐变、调色板、排版和图像。
您还可以发现和搜索新的组合,以及构建您的集合。
此外,您可以上传自己的自定义图像,并测试其颜色。
AutoDraw
AutoDraw 是一个基于网络的人工智能绘图工具。它是由谷歌创意实验室创建的,目的是让每个人都能接触到绘画并享受其中。通过将机器学习与各种艺术家的绘画结合起来,它可以帮助您快速绘制和完善您的艺术作品。
简单地在自动绘图上涂鸦。然后,它的建议工具将尝试猜测您正在绘制什么。然后,它将提供由不同的艺术家和设计师创建的绘图建议,使您的作品看起来更好。您可以下载它到任何设备上,并且可以在社会媒体上分享它。
Deep Art Effects
Deep Art Effects 是一个基于人工智能的图像处理工具,它可以将您的设计转化成艺术作品。它拥有超过 120 种艺术风格,这个平面设计软件在全球拥有超过 200 万用户和 2 亿创作的艺术作品。
Deep Art Effects 不仅可以学习不同的艺术风格,而且还可以提炼您的形象。您可以只编辑图像的背景或前景,创建自己的艺术风格,生成任何分辨率的图像,并使用您喜欢的艺术家的风格进行设计。您甚至可以使用该软件的应用程序编程接口将过滤器和图像技术集成到您的应用程序中。
Let’s Enhance
Let’s Enhance 是一个图像增强器。它具有顶尖的图像处理算法,它可以在不影响图像质量的情况下将图像放大 16 倍。它可以清理您的图像,调整您的徽标,并调整色调和颜色。
只需单击一下即可放大和锐化照片以进行打印。
从旧照片到数字艺术,从肖像到风景,从徽标到产品图像,它可以升级任何东西。
remove.bg
无论你一次处理 50 张还是 1000 张图片,Remove.bg 都可以通过拖放来自动移除每张图片的背景。它甚至可以处理具有挑战性的边缘,给你的照片一个专业的外观。来自全球 200 多个国家的 28,000 多名客户正在使用该应用程序。
它的一些客户包括美国电话电报公司的运动网络、 Canva 和三星。
除了删除照片中的背景,Remove.bg 还可以让你在几秒钟内编辑你的作品,这样你就可以在工作中创建高效的视觉效果。
你甚至可以替换背景图片,并使用其设计模板创建看起来专业的产品照片。此外,该软件还可以完全集成到 Photoshop 中,这可以加快您的工作过程。
Sketch2Code
Microsoft 的 Sketch2Code 可以将您的手绘设计转换为 HTML 原型。
这是一个解决手工绘制线框或应用程序设计一个 HTML 代码的耗时过程。
Sketch2Code 使用人工智能来检测设计模式,破译书面文本,并理解结构。
您可以使用自己的设计来上传或选择图片库中的图像。
人工智能将识别图像中的元素,并将您的工作转换成一个代码库,您甚至可以自定义它们的配置来满足你自己的需要。
以上就是AI在设计领域的创新应用盘点的详细内容,更多请关注php中文网其它相关文章!
AI视觉在教育场景中的创新应用
文 / 张焰
整理 / LiveVideoStack
1 公司介绍
大家好,首先介绍一下我们的公司,我们属于360集团内部孵化的创新业务线,专注于AI视觉算法的研发和应用。我们围绕着人、物、场景三个方向为智能手机、泛文娱、IOT领域提供一些专业的算法支持和行业解决方案。
我们的核心能力包括智能多摄、单帧/多帧画质,这类算法在手机客户中应用较多;人像美化,包括AR特效等会运用到泛文娱的领域;场景识别涉及人、物、环境等多样化的场景识别能力,另外包括一些视频分析的能力,在IOT领域也有广泛应用。
本次我的分享主题是360AI视觉在在线教育中的创新算法和应用。
2 我们为什么在做教育
当然很多人会说,家长愿意为孩子花钱,做教育更容易挣到钱。但更重要的是因为疫情的爆发,使得在线教育得到了前所未有的发展机遇。在一两个月内,政府部门就将线下的教学场景搬到了线上,完成了大迁移,但在这个大跃进中也暴露了很多问题。
2.1 在线教育行业痛点
在线教育仍有很多痛点亟待解决。
第一点是学生自觉性差。K12教育是典型的督导式教学,以前的督导压力都在老师身上,面对面在线下督导学生,而现在督导的压力都转移给了家长,家长确实是操碎了心。
第二点是教学效果难以评估。意思就是这个学生有没有认真听,有没有听懂,是没有量化指标的。
第三点是课堂互动性差。因为技术的不完善及各种主客观限制,线上课堂很难完整地模拟线下课堂场景,缺乏双向互动的环境。
第四点是教学效率低。包括从教师端到学生端的适应和学习成本,还有空间限制带来的管教效率。
以上四个问题总结而言就是缺少了教育质量监督评价体系,而我们要做的事情就是弥补和改善这个体系的缺失。
3 未来的思考AI视觉能为在线做什么?
我们针对以上问题提出了对应的解决方案,分别是:代替督学方案、量化监测方案、智能互动方案、智能教辅工具。
3.1 代替督学方案
3.1.1 疲劳提醒
也许有些人在之前已经听过或用过这项技术,现如今的检测准确率较早前已经有很大改进。我们的疲劳提醒有三个维度,包括“打哈欠”、“瞌睡”和“趴着”,“打哈欠”和“瞌睡”这两个维度在汽车驾驶中早有应用,针对教育场景我们单独研发了“趴着”的监测。“趴着”这个维度如何检测准确是比较有难度的,有些人可能会想到可以用人体骨骼关键点,这个方法针对全身还是比较准的,但针对半身,尤其是趴着时只有一个头甚至是头发的时候,骨骼关键点无法起作用了,这里就需要用到更复杂的检测手段和技术。
3.1.2 姿态纠正
姿态纠正这个功能大家可能在教育平板或教育台灯中体验过,用得也比较广泛。坐姿不良需要用到人的骨骼关节点和深度学习的技术,它有很多类别,包括上述提到过的趴着、卧倒、倾斜甚至是葛优躺,都可以认为是姿态不正。距离提醒这一块主要是用于护眼健康,可以实时检测到人脸到屏幕的距离。
3.1.3 学生姿态实时监测系统
这个姿态监测系统分为两个方面:人脸姿态、人体姿态。人体姿态在上面提到过,我们是基于人体骨骼关键点配合深度图像,从而精准地判断出各类人体姿态。这项技术以前都是2D图像信息,而我们创造性加入了3D深度信息,来辅助人体姿态识别。深度图像同时还可以用来测距。那这个深度图像从哪里来呢?这就要和硬件相结合,像现在很多教育平板都加入了双摄,前置结构光,前置TOF。
3.2 量化检测
课堂专注度、课堂接受度是家长非常关注的。课堂专注度表示学生是否认真在听,课堂接受度表示学生是否听懂。之前我们的客户曾提过这个问题,家长没有课堂表现报告,不知道学生上课状态及学习效果到底怎么样。所以为了解决这个痛点,我们提出了课堂效果量化检测的方案。
3.2.1 普通专注度检测
大家可以看一下这是以往的普通专注度检测图示,这里只有一个2D图像信息,检测准确度存在较大误差;其次它的监测指标单一,只有一些零散的指标次数,无法精确地回溯学情。
3.2.2 360AI课堂专注度
上图是我们3D深度检测+学情回溯追踪的专注度监测解决方案。可以看到我们加入了3D的人脸检测信息,可以更精准地估计出姿态和视线方向。同时辅助事件触发机制,判断状态的同时会保存当前事件的触发时刻、事件截图、状态持续时长等,这样可以非常精确地有针对性地进行学情分析和回溯。
3.2.3 课堂接受度
课堂接受度是从上图五个维度进行综合分析,这里的维度可以分为两个方向,包括正向指标和负向指标。从课堂接受度而言,正向的评价有举手、微笑、点头,代表学生参与度比较高,表示他(她)听懂了。负向的评价是疑惑、摇头,这说明接受度不太高。
3.2.4 表情识别流程图
刚刚说到了疑惑的表情,老师的责任就是传道受业解惑,如果老师都不知道学生有没有疑惑,他(她)怎么去解惑?所以首先我们要把疑惑检测出来,在学术界,只有七类表情,没有疑惑,所以我们专门为教育增加了疑惑的表情。我们加入了大量疑惑的数据,通过结合人脸识别技术和人脸关键点技术辅助检测,可以比较精准的判断出疑惑的表情。
3.3 智能互动(AI沉浸式课件、多向智能互动)
我们的智能互动方案主要介绍两个技术,分别是AI沉浸式课件和多向智能互动技术。
3.3.1 传统课件
上图是传统课件的录播和直播课场景,录播课一般都会像上图左边所示搭一个录播室,后面有绿幕,有补光灯。这对环境条件要求很高,要有场地,要有设备,很不方便。上图右边是比较常见直播课界面,只有一个老师的头像和投放的课件,这两个东西是分屏展示的,也就是说老师和课件之间没有任何互动。
3.3.2 AI沉浸式课件
上图是我们研发的AI沉浸式课件,把老师的头像与课件内容融合在一起,可以通过手势控制课件的播放,比如说下一页、上一页、暂停等,有很直观的互动效果。老师和课件完全融合在一起,不受场地限制,不需要专用设备,只需要一个摄像头就可以了。
3.3.3 网课互动限制
上图是现在比较主流的网络教学直播界面,主要是以老师单向输出为主,学生被动接受,学生和老师之间仅能通过文字互动。
3.3.4 多向智能互动
我们希望通过一些技术手段,改变这种单一的互动模式,让网课更生动、更有趣。
手势识别
像我们动画里展示的是老师点赞的特效,学生端可以实时收到显眼的反馈。那学生举手老师知不知道呢?这也是可以识别的,比如说学生举手后快速把头像换成第一位,把头像放大,老师可以快速知道是哪个学生举手了,这项功能可以模拟复现线下教学场景。
表情识别
再比如表情识别,检测到学生出现疑惑情绪,系统就会把她highlight出来,老师就知道哪个学生没有听懂。这是非常有价值的,现在在线教育并没有做到这一点。
人脸特效
还有一些增加趣味性的人脸特效,一些可爱的动效可以抓住低领学生的注意力和兴趣点。
3.4 智能工具(超清拍题,智能补光,人脸考勤)
超清拍题与智能补光是我们首发的技术。
3.4.1 超清拍题——拍照模糊问题
在线教育除了直播授课,还有课后作业场景,学生会遇到拍课件、拍题的问题。大部分学生的手都很小,如果用学习平板很容易拿不稳,拍题就拍虚了。当然也有人会说,我可以用光学防抖,但大家都知道光学防抖的每一个器件要增加3-4美金成本。只有买的是真正的旗舰手机,才会有光学防抖。所以我们提出了纯软的光学防抖方案,一次性解决上图所示各种拍照模糊问题,比如失焦,曝光拖影,抖动,噪点,暗光等。
3.4.2 超清拍照——一个方案解决所有拍摄模糊问题
这个方案是我第一次公开讲,有些手机客户已经接入了我们的方案。流程也很简单,输入有两种方式,传感器输入和三帧图像,再进行传感器融合,位置估计,运动向量估计,根据位置信息进行防抖去模糊处理。输入的三帧照片进行对齐,降噪等一系列处理,最后进行动态范围提升和图像增强。图像增强包括对比度增强锐化,整体是一个比较复杂的流程,这里我们简化给大家展示。
3.4.3 客户案例——录音笔HD Shot
这是我们的一个客户案例,我们的超清拍照技术已经应用在讯飞智能录音笔上,可以用来提升拍会议文档的图像质量,不再担心拍照拍虚的问题。
3.4.4 HD Shot效果展示
我们来看一下具体的效果对比。
这是增强效果。
这是防抖效果。
这是HDR效果,主要是提升动态范围,实现高光抑制和暗部提亮。
我们的画质提升能力不仅体现在拍照上,还能应用于视频。
3.4.5 智能补光灯
通常专业的主播间中都有一个很大的补光灯,长期近距离直视或多或少会对眼睛产生伤害,于是我们提出了纯软的补光方案。上图所示是全局补光效果,我们还有一个只针对人脸补光的方案,基于肤色分割和3D打光技术,提升人脸质感和通透度。
3.4.6 人脸考勤
人脸考勤对线上和线下课堂都非常有价值,可以快速进行学生考勤,同时可防止代答到的情况发生。
4 客户案例——网课助手
看完前面的技术介绍,接下来介绍一下我们针对在线教育研发的一个课质监测产品,叫网课助手。网课助手有4大场景SDK,包含专注度,课堂接受度,疲劳提醒,姿态纠正。这个SDK既可以发给老师又可以发给家长,在后台自动生成检测报告,家长和老师可以更全面直观地看到学生的学习情况和情绪状态。
4.1 方案架构
网课助手的架构是典型边缘计算+云计算的架构,家长端只需要本地端的能力,本地端的设备越来越强,大家用的平板手机能力很强,这些检测能力完全可以在端上实现,后台更多的是和教育系统打通,把状态及时推送给家长和老师。
4.2 应用场景
有了检测数据之后,老师可以快速得到整个班级表现状况,上图左边代表每个维度上每个学生表现占比,分别展示表现好、中、差。上图右边可以将表现非常好和非常差的学生排列出来,做相应的奖励或辅导。
对于单个学生,我们也可以给出更详细的分析报告。比如想看疲劳度,会以时间轴的形式进行展开,发现在10点21分检测到学生瞌睡,瞌睡持续时长一目了然。
想看看学生接受度如何,也可以根据时间戳回溯事件,看学生在哪部分内容上接受度较好,哪部分较差。
5
总 结
我们一整套的在线教育解决方案是金字塔架构,底层是AI底层技术,包括人脸识别、表情识别、手势识别、姿态识别等技术;中层是基于各个场景的解决方案;最上层就是跨平台的SDK和业务端的应用。好的AI技术我们希望不只是噱头,而是可以真正为客户起到降本增效的作用。
专注度与课堂接受度是为了给家长省心,老师放心,时间精力也算是一种成本;沉浸式课件课件减少投影仪,电视的使用;防抖技术可以省去光学防抖器件成本,省掉智能补光灯的成本,这都是AI实实在在的价值。
360AI视觉不止做教育,在智能手机、泛娱乐、IOT等领域都有丰富的技术应用,期待和各行各业的朋友有更多交流合作。
gis地图的创新与发展前景
“旧时王谢堂前燕,飞入寻常百姓家”。GIS过去被认为是一种高端而略显神秘且对使用者要求较高的专业领域技术,应用离人们生活较远;现在GIS不仅已走进人们的日常生活,为衣食住行带来了便捷,而且还逐渐成为了各种应用和管理的基础平台。
随着GIS技术不断发展并与其他应用有机结合,在SMAC(社交、移动、大数据、云计算)发展迅猛的将来,人们拥有“超人”般透视俯瞰统领全局的能力,这将不再是科幻片中才会出现的情景。
美国纽约最近风靡一款名为“呼吸”的APP应用,此应用可帮助一天之中需要到几个不同地点约谈事务的人,在中间等候时间打开“呼吸”查询并就近选择一间有沙发桌子并覆盖Wi-Fi信号的安静小公寓休息,按小时付费。该应用可直观显现出你所在街区空余的房间和路线,不仅为不喜欢咖啡馆的人提供了安静私密的休息空间,也为不少妈妈提供了“临时育婴房”。所以其刚推出不到一个月,就常常房间爆满、服务点还需增加。而此应用的基础平台就是展示房间地理位置的GIS(Geographic Information System地理信息系统)。
现在我们走到大街上,也经常会碰到下面的情形:
一群年轻人聚在地铁口,一边低头用手机搜索着附近的商圈及各种点评推荐,一边叽叽喳喳商量着去哪吃饭有团购、去哪看电影效果更好;马路上背着大包、风尘仆仆的旅行者,不再神色焦急地找人到处问路,而是看着路口的路牌与自己终端上的地图比对辨别方向,经常是手指在屏幕上滑动两下,便继续大步奔向景区或旅馆;在大卖场偌大的地下停车场,原来拎着大包小包找不到车的恼人情况也有了解决办法,在进停车场的门口显示屏上,通过感应扫描可告知车主停车的位置及到达路线;提供租房的网上现在配发了房子周边的街景地图,让租房人更直观感受房子的环境,而不仅是地图上的坐标点……的确,现在日常生活中,基于GIS的LBS(Location Based Service基于位置的服务)应用已经非常普遍和便捷,让不少搞不清方向的“路盲”和很多自助旅行的爱好者们,有了更方便轻松和自由的出行体验。
前不久,阿里集团宣布全资收购高德地图,对高德股份价值估值约为15亿美元。花此巨资主要是为了完善阿里O2O产品布局,让地图成为阿里产品的切入点。
近两年阿里巴巴的淘宝“地图搜”,百度“云+端”推出的“百度身边”、“百度旅游”以及腾讯的“腾讯地图”和对微信开放的地图API,三大互联网公司纷纷打造自有地图资源,为建立自己的O2O生活服务体系圈定版图。
根据易观智库2014年4月发布的《2013年第四季度中国手机地图导航APP市场季度监测报告》显示,截至2013年第四季度,中国手机地图导航APP市场的累计用户数已达11.5亿户,环比增长21.9%。地图已经成为了移动互联网O2O业务开展的基石型产品,而且在如此广大用户基础上,其发展空间可以说无法想象。
但其实,LBS只是GIS应用中很小很小的一部分,现在的GIS技术发展得已经可以作为一个地基似的平台,托起各种应用和管理了。
电子地图功能日益向专业GIS 方向发展, 其用户群由公众拓展到企业。企业定制化地图系统开发已经成为企业营销全局性战略性手段。
1 导航和设备管理 电子地图系统本身支持自导航, 同时也为专业导航电子地图积累基本的背景数据, 例如:数字城市就是综合运用GIS、遥感、遥测、宽带网络、多媒体及虚拟仿真等技术, 对城市的基础设施、功能机制进行信息自动采集、动态监测管理和辅助决策服务的技术系统; 它具有城市地理、资源、生态环境、人口、经济、社会等复杂系统的数字化、网络化、虚拟仿真、优化决策支持和可视化表现等强大功能。
2 无线通信 电子地图渗透在通信的两端: 移动端是基于位置的信息服务( LBS) , 如中国联通推出“ 定位之星”手机; 运营端是无线通信网路规划、优化, 如该领域广泛应用的MSI Planet 是一种电子地图格式。现代无线通信技术本身已具备大规模提供空间位置信息服务的基础设施和技术架构, 瓶颈在于电子地图的数据转换及软件研发。
3 办公自动化 电子地图日益渗透到办公自动化( OA) 系统中,如110 警力布控、邮政系统的商圈图规划等。
今天关于“以地控税”—GIS 在税务征管的创新应用和以地控税信息的介绍到此结束,谢谢您的阅读,有关2024 TiDB AI 创新应用黑客马拉松开启报名啦!一起来用 TiDB 构建未来的 AI 创新应用!、AI在设计领域的创新应用盘点、AI视觉在教育场景中的创新应用、gis地图的创新与发展前景等更多相关知识的信息可以在本站进行查询。
本文标签: