(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202110485270.6 (22)申请日 2021.04.3 0 (65)同一申请的已公布的文献号 申请公布号 CN 113094801 A (43)申请公布日 2021.07.09 (73)专利权人 土巴兔集团股份有限公司 地址 518000 广东省深圳市南 山西丽街道 西丽社区兴科一街万科云城一期七栋 A座3501研发用房 (72)发明人 王国彬　杨行榜　 (74)专利代理 机构 深圳众鼎专利商标代理事务 所(普通合伙) 44325 专利代理师 姚章国 (51)Int.Cl. G06F 30/13(2020.01) G06F 30/27(2020.01) G06F 40/295(2020.01) G06V 10/44(2022.01)G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G10L 15/26(2006.01) G06F 111/16(2020.01) (56)对比文件 CN 110766519 A,2020.02.07 WO 2019178983 A1,2019.09.26 US 20180 04365 A1,2018.01.04 JP 2020071544 A,2020.0 5.07 龚宝良 等.让家人 更亲近的装修秘诀. 《建 筑工人》 .2013, Zulkeplee Othman 等.Privacy, modesty, hospital ity, and the design of Musl im homes: A l iterature review. 《Fro ntiers of Architectural Researc h》 .2015,第4卷(第1 期), 审查员 桑兴华 (54)发明名称 装修模拟图像生成方法、 装置、 设备及 介质 (57)摘要 本发明涉及图像处理技术领域， 本发 明公开 了一种装修模拟图像生成方法、 装置、 设备及介 质， 所述方法包括： 获取待装修语音文件、 待加工 图像和照片集； 通过房屋功能区识别模型， 对待 装修语音文件进行语音识别和功能类型识别， 得 到功能类型结果； 通过房屋区域识别模型， 对待 加工图像进行装修区域识别， 识别出待装修区域 图像结果； 获取匹配的家庭成员照片， 通过装修 风格检测模 型进行装修风格特征提取， 输出装修 色调风格结果； 通过装修模拟图像生成模型， 进 行模拟图像生成处理， 得到装修模拟图像。 本发 明实现了随时随地快速地自动生成基于装修风 格特征的该图像的装修模拟图像， 减少了沟通及 设计时间， 提高了装修方案设计的效率。 权利要求书3页 说明书11页 附图2页 CN 113094801 B 2022.07.12 CN 113094801 B 1.一种装修模拟图像生成方法， 其特 征在于， 包括： 通过基于容器技术的装修小程序接收装修图像生成请求， 获取所述装修图像生成请求 中的待装修语音文件、 待加工图像和照片集； 所述照片集包括家庭成员照片和与所述家庭 成员照片关联的家 庭成员标签； 通过房屋功能区识别模型， 对所述待装修语音文件进行语音识别和功能类型识别， 得 到功能类型 结果； 通过房屋区域识别模型， 对所述待加工 图像进行装修区域识别， 识别出待装修区域图 像结果； 所述待装修区域图像结果包括初始图像、 多个待装修区域图像以及与各所述待装 修区域图像一 一对应的区域标签； 获取与所述功能类型结果匹配的所述家庭成员标签关联的所述家庭成员照片， 通过装 修风格检测模型对所有所述区域标签和获取的所有所述家庭成员照片进行装修风格特征 提取， 根据提取的装修 风格特征输出与各 所述区域标签一 一对应的装修色调风格结果； 通过装修模拟图像生成模型， 根据 所述待装修区域图像结果和所有所述装修色调风格 结果， 对所述初始图像进行模拟图像生成处 理， 输出装修模拟图像。 2.如权利要求1所述的装修模拟图像生成方法， 其特征在于， 所述通过房屋功能区识别 模型， 对所述待装修语音 文件进行语音识别和功能类型识别， 得到功能类型 结果， 包括： 通过语音识别模型对所述待装修语音文件进行语音识别， 识别出与 所述待装修语音文 件对应的文本内容； 所述房屋功 能区识别模型包括语音识别模型、 命名实体检测模型和功 能类型检测模型； 对所述文本内容进行分词处 理， 得到多个单 元文本； 通过所述命名实体 检测模型对所有所述单 元文本进行实体识别， 得到实体结果； 通过所述功能类型检测模型对所述实体结果进行功能类型特征提取， 根据提取所述功 能类型特征识别出 所述功能类型 结果。 3.如权利要求1所述的装修模拟图像生成方法， 其特征在于， 所述通过基于容器技术的 装修小程序接 收装修图像生成请求， 获取所述装修图像生成请求中的待装修语音文件、 待 加工图像和照片集之前， 包括： 运用容器技术， 通过所述装修小程序的视 图容器接收到所有所述家庭成员照片； 所述 家庭成员照片为在所述视图容器中的可视化界面上选取确认后获得； 通过所述装修小程序中的成员 检测模型， 对各所述家庭成员照片进行成员标签识别， 识别出与各 所述家庭成员照片一 一对应的所述家 庭成员标签； 通过所述装修小程序中的采集模块采集到所述待装修语音文件和所述待加工图像之 后， 触发所述装修图像生成请求。 4.如权利要求1所述的装修模拟图像生成方法， 其特征在于， 所述通过房屋区域识别模 型， 对所述待加工图像进行装修区域识别， 识别出待装修区域图像结果， 包括： 对所述待加工图像进行毛坯化处 理， 得到所述初始图像； 对所述初始图像进行区域识别， 识别出各个所述待装修区域图像， 并在所述初始图像 中进行标注； 根据标注后的所述初始图像， 对各个所述待装修区域图像进行区域特征提取， 并根据 各个所述待装修区域图像的所述区域特征进 行区域标签识别， 识别出与各所述待装修区域权　利　要　求　书 1/3 页 2 CN 113094801 B 2图像一一对应的所述区域标签。 5.如权利要求1所述的装修模拟图像生成方法， 其特征在于， 所述对所述待加工图像进 行毛坯化处 理， 得到所述初始图像， 包括： 提取所述待加工 图像中的毛坯特征， 根据提取的所述毛坯特征输出毛坯检测结果； 所 述毛坯检测结果表明了所述待加工图像是否为毛坯或者未装修的图像； 若所述毛坯检测结果为未装修结果， 对所述待加工 图像进行边缘增强处理， 将边缘增 强处理后的所述待加工图像确定为所述初始图像； 若所述毛坯检测结果为已装修结果， 对所述待加工 图像进行区域边缘直线化处理， 对 区域边缘直线化处 理后的所述待加工图像进行区域漂白处 理， 得到所述初始图像。 6.如权利要求5所述的装修模拟图像生成方法， 其特征在于， 所述获取与所述功能类型 结果匹配的所述家庭成员标签对应的所述家庭成员照 片， 通过装修风格检测模型对所有 所 述区域标签和获取的所有 所述家庭成员照 片进行装修风格特征提取， 根据提取的装修风格 特征输出与各 所述区域标签一 一对应的装修色调风格结果， 包括： 从所述有所述家庭成员标签中查询与所述功能类型结果中的功能类型相匹配的家庭 成员标签， 将与查询到的所述家 庭成员标签关联的所述家 庭成员照片确定为待识别照片； 通过所述装修风格检测模型对所述待识别照片进行人群风格特征提取， 根据提取的所 述人群风格特征确定出居住风格结果， 同时对所述待识别照片进行色调特征提取， 根据提 取的所述色调特 征确定出居住色调结果； 根据所有所述区域标签、 所述居住风格结果和所述居住色调结果， 映射出与各所述区 域标签一 一对应的所述装修色调风格结果。 7.如权利要求1所述的装修模拟图像生成方法， 其特征在于， 所述通过装修模拟图像生 成模型， 根据所述待装修区域图像结果和所有所述装修色调风格结果， 对所述初始图像进 行模拟图像生成处 理， 输出装修模拟图像， 包括： 通过装修模拟图像生成模型， 对与 各所述区域标签对应的所述装修色调风格结果和所 述待装修区域图像进 行区域装修模拟图像生成， 生成与各所述待装修区域图像对应的区域 加工图像； 根据所有所述区域加工图像对所述待加工图像进行风格融合处理， 得到所述待加工图 像的装修模拟图像。 8.一种装修模拟图像生成装置， 其特 征在于， 包括： 接收模块， 用于接收装修图像生成请求， 获取所述装修图像生成请求中的待装修语音 文件、 待加工图像和照片集； 所述照片集包括家庭成员照片和与所述家庭成员照片关联 的 家庭成员标签； 类型识别模块， 用于通过房屋功能区识别模型， 对所述待装修语音文件进行语音识别 和功能类型识别， 得到功能类型 结果； 标签识别模块， 用于通过房屋区域识别模型， 对所述待加工图像进行装修区域识别， 识 别出待装修区域图像结果； 所述待装修区域图像结果包括初始图像、 多个待装修区域图像 以及与各 所述待装修区域图像一 一对应的区域标签； 风格识别模块， 用于获取与 所述功能类型结果匹配的所述家庭成员标签关联的所述家 庭成员照 片， 通过装修风格检测模型对所有 所述区域标签和获取的所有 所述家庭成员照 片权　利　要　求　书 2/3 页 3 CN 113094801 B 3