Remove outdated anchor name sentence embeddings file, update cached embeddings with new sizes, and refactor sub subject and name mapping in the prediction process.

data/anchor_name_sentence_embeddings_cl-nagoya-sup-simcse-ja-nss-v_1_0_7_10_float16.pkl

@@ -1,3 +0,0 @@
-version https://git-lfs.github.com/spec/v1
-oid sha256:a4689a144a7bb1d3e8dd7f5cfb52a152f001514215b46d59ff2fe61b672bd0de
-size 11788964

data/cached_embeddings_abstract.pkl

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:58ad58db3d865a942112608f5c5cc39e0f01338546b8c6facafcefcf594f8ff8
-size 15169072
+oid sha256:9228f5a3d3a1e87ae1cc3bead894275c1c72f0235db187191d96aefe24519bef
+size 15165877

data/cached_embeddings_name.pkl

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:ab971dce60371e86a457946880f73cce60b1eb70211ed793f341530a406af15b
-size 31974400
+oid sha256:4ff02d38b5244171b7546bb884be57200d4c20f0fd23fdd7b1d2636ec2f34fce
+size 31974360

data/cached_embeddings_unit.pkl

@@ -1,3 +1,3 @@
 version https://git-lfs.github.com/spec/v1
-oid sha256:917d6d46ef5e75ddca3f081169eb9f9323eab50dbed95583037907c26c855ae0
-size 734106
+oid sha256:296c8e2fa98330d9f7df7f02f14b1e5e1d8e2a27e2bdfb181a50b8017f67da80
+size 372392

data/subSubjectAndNameMapData.csv

@@ -1,47 +1,8 @@
-標準科目,標準名称,標準中科目,出力_標準名称
+標準科目,入力_項目名,標準中科目,出力_項目名
 地業,工事費,既製コンクリート杭,既製コンクリート杭工事費
 地業,杭施工費,現場打ちコンクリート杭,現場打ちコンクリート杭施工費
 地業,施工費,現場打ちコンクリート杭,現場打ちコンクリート杭施工費
 地業,試験杭施工費,現場打ちコンクリート杭,現場打ちコンクリート杭施工費
-囲障,囲障手摺,外部,外部　囲障手摺
-囲障,囲障手摺,内部,内部　囲障手摺
-既製コンクリート,壁ALC板下り壁下端金物,外部,外壁ALC板下り壁下端金物
-既製コンクリート,壁ALC板下り壁下端金物,内部,内壁ALC板下り壁下端金物
-既製コンクリート,壁ALC板足元金物,外部,外壁ALC板足元金物
-既製コンクリート,壁ALC板足元金物,内部,内壁ALC板足元金物
-既製コンクリート,壁ALC板開口補強,外部,外壁ALC板開口補強
-既製コンクリート,壁ALC板開口補強,内部,内壁ALC板開口補強
-既製コンクリート,壁ALC板取付金物,外部,外壁ALC板取付金物
-既製コンクリート,壁ALC板取付金物,内部,内壁ALC板取付金物
-既製コンクリート,壁ALC板頂部金物,外部,外壁ALC板頂部金物
-既製コンクリート,壁ALC板頂部金物,内部,内壁ALC板頂部金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板,外部,外壁押出成形ｾﾒﾝﾄ板
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板,内部,内壁押出成形ｾﾒﾝﾄ板
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板ｺｰﾅｰ金物,外部,外壁押出成形ｾﾒﾝﾄ板ｺｰﾅｰ金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板ｺｰﾅｰ金物,内部,内壁押出成形ｾﾒﾝﾄ板ｺｰﾅｰ金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板足元金物,外部,外壁押出成形ｾﾒﾝﾄ板足元金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板足元金物,内部,内壁押出成形ｾﾒﾝﾄ板足元金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板開口補強金物,外部,外壁押出成形ｾﾒﾝﾄ板開口補強金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板開口補強金物,内部,内壁押出成形ｾﾒﾝﾄ板開口補強金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板取付金物,外部,外壁押出成形ｾﾒﾝﾄ板取付金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板頂部金物,外部,外壁押出成形ｾﾒﾝﾄ板頂部金物
-既製コンクリート,壁押出成形ｾﾒﾝﾄ板頂部金物,内部,内壁押出成形ｾﾒﾝﾄ板頂部金物
-既製コンクリート,壁ALC板,外部,外壁ALC板
-既製コンクリート,壁ALC板,内部,内壁ALC板
-既製コンクリート,壁ALC板開口補強金物,外部,外壁ALC板開口補強金物
-既製コンクリート,壁ALC板開口補強金物,内部,内壁ALC板開口補強金物
-金属,階段ﾉﾝｽﾘｯﾌﾟ,外部,外部　階段ﾉﾝｽﾘｯﾌﾟ
-金属,階段ﾉﾝｽﾘｯﾌﾟ,内部,内部　階段ﾉﾝｽﾘｯﾌﾟ
-金属,手摺,外部,外部　手摺
-金属,手摺,内部,内部　手摺
-金属,仮設手摺,外部,外部　仮設手摺
-金属,仮設手摺,内部,内部　仮設手摺
-金属,階段手摺,外部,外部　階段手摺
-金属,階段手摺,内部,内部　階段手摺
-金属,階段壁付手摺,外部,外部　階段壁付手摺
-金属,階段壁付手摺,内部,内部　階段壁付手摺
-左官,建具防水ﾓﾙﾀﾙ充填,外部,外部　建具防水ﾓﾙﾀﾙ充填
-左官,建具防水ﾓﾙﾀﾙ充填,内部,内部　建具防水ﾓﾙﾀﾙ充填
 建具,ｶﾞﾗｽﾄﾞｱ,ガラスドア（内部）,内部　鋼製建具
 建具,ｶﾞﾗｽﾄﾞｱ,ガラスドア（外部）,外部　鋼製建具
 建具,ｶﾞﾗｽﾄﾞｱ,ガラス（内部）,内部　ｶﾞﾗｽ

data/subSubjectMapData.csv

@@ -60,7 +60,7 @@
 建具,アルミニウム製建具（運搬取付）,アルミニウム製建具（運搬取付）,
 建具,アルミニウム製建具（外部）,アルミニウム製建具（外部）,外部
 建具,アルミニウム製建具（内部）,アルミニウム製建具（内部）,内部
-建具,アルミニウム製建具（不明）,アルミニウム製建具（運搬取付）,不明
+建具,アルミニウム製建具（不明）,アルミニウム製建具（運搬取付）,
 建具,エンジン装置,自動ドア開閉装置（内部・外部不明）,不明
 建具,エンジン装置（外部）,自動ドア開閉装置（外部）,外部
 建具,エンジン装置（内部）,自動ドア開閉装置（内部）,内部
@@ -166,8 +166,8 @@
 鉄筋,その他,その他,
 鉄筋,解体,解体,
 鉄筋,解体（躯体）,解体,
-鉄筋,解体（内部）,解体,内部
-鉄筋,解体（外部）,解体,外部
+鉄筋,解体（内部）,解体（内部）,内部
+鉄筋,解体（外部）,解体（外部）,外部
 鉄筋,外部仕上,外部仕上,外部
 鉄筋,躯体,躯体,
 鉄筋,直接仮設,その他,
@@ -180,7 +180,7 @@
 鉄骨,ｱﾙﾐﾊﾆｶﾑ庇吊り鉄骨,付帯鉄骨,
 鉄骨,ｷｬｯﾄｳｫｰｸ鉄骨,付帯鉄骨,
 鉄骨,ﾃﾞｯｷﾌﾟﾚｰﾄ,ﾃﾞｯｷﾌﾟﾚｰﾄ,
-鉄骨,ﾊﾞｯｸ-屋内接続鉄骨,付帯鉄骨,内部
+鉄骨,ﾊﾞｯｸ-屋内接続鉄骨,付帯鉄骨,
 鉄骨,ﾊﾞｯｸｽﾀﾝﾄﾞ階段鉄骨,付帯鉄骨,
 鉄骨,ﾊﾞｯｸｽﾀﾝﾄﾞ南側ﾄｲﾚ鉄骨,付帯鉄骨,
 鉄骨,ﾊﾞｯｸｽﾀﾝﾄﾞ北側ﾄｲﾚ鉄骨,付帯鉄骨,
@@ -197,8 +197,8 @@
 鉄骨,屋上目隠しﾌｪﾝｽ下地鉄骨,付帯鉄骨,
 鉄骨,屋内練習場階段鉄骨,付帯鉄骨,
 鉄骨,階段鉄骨,付帯鉄骨,
-鉄骨,外部,付帯鉄骨,外部
-鉄骨,外部階段鉄骨,付帯鉄骨,外部
+鉄骨,外部,その他,
+鉄骨,外部階段鉄骨,付帯鉄骨,
 鉄骨,建具下地鉄骨,付帯鉄骨,
 鉄骨,光ﾀﾞｸﾄ下地鉄骨,付帯鉄骨,
 鉄骨,勾配屋根下地鉄骨,付帯鉄骨,

routes/predict.py

@@ -17,7 +17,7 @@ from mapping_lib.standard_subject_data_mapper import StandardSubjectDataMapper
 from mapping_lib.subject_similarity_mapper import SubjectSimilarityMapper
 from mapping_lib.sub_subject_similarity_mapper import SubSubjectSimilarityMapper
 from mapping_lib.name_similarity_mapper import NameSimilarityMapper
-from mapping_lib.name_and_sub_subject_mapper import NameAndSubSubjectDataMapper
+from mapping_lib.sub_subject_and_name_data_mapper import SubSubjectAndNameDataMapper
 from mapping_lib.abstract_similarity_mapper import AbstractSimilarityMapper
 from mapping_lib.name_and_abstract_mapper import NameAndAbstractDataMapper
 from mapping_lib.unit_mapper import UnitMapper
@@ -160,15 +160,13 @@ async def predict(
         try:
             # Sub subject and name mapping
             if sentence_service.df_sub_subject_and_name_map_data is not None:
-                sub_subject_and_name_mapper = NameAndSubSubjectDataMapper(
+                sub_subject_and_name_mapper = SubSubjectAndNameDataMapper(
                     df_map_data=sentence_service.df_sub_subject_and_name_map_data
                 )
-                df_output_data = sub_subject_and_name_mapper.map_data(
-                    df_input_data=df_output_data
-                )
+                sub_subject_and_name_mapper.map_data(df_input_data=df_output_data)
 
         except Exception as e:
-            print(f"Error processing NameAndSubSubjectDataMapper: {e}")
+            print(f"Error processing SubSubjectAndNameDataMapper: {e}")
             raise HTTPException(status_code=500, detail=str(e))
 
         try:

services/sentence_transformer_service.py

@@ -212,6 +212,18 @@ class SentenceTransformerService:
                 self.df_name_map_data = pd.read_csv(name_map_file)
                 print(f"Loaded name map data: {len(self.df_name_map_data)} entries")
 
+            # Load sub subject and name map data
+            sub_subject_and_name_map_file = os.path.join(
+                DATA_DIR, "subSubjectAndNameMapData.csv"
+            )
+            if os.path.exists(sub_subject_and_name_map_file):
+                self.df_sub_subject_and_name_map_data = pd.read_csv(
+                    sub_subject_and_name_map_file
+                )
+                print(
+                    f"Loaded sub subject and name map data: {len(self.df_sub_subject_and_name_map_data)} entries"
+                )
+
             # Load abstract map data
             abstract_map_file = os.path.join(DATA_DIR, "abstractMapData.csv")
             if os.path.exists(abstract_map_file):
@@ -219,13 +231,6 @@ class SentenceTransformerService:
                 print(
                     f"Loaded abstract map data: {len(self.df_abstract_map_data)} entries"
                 )
-                print(
-                    f"DEBUG: Abstract map data columns: {list(self.df_abstract_map_data.columns)}"
-                )
-                print(f"DEBUG: Abstract map data sample:")
-                print(self.df_abstract_map_data.head(3).to_string())
-            else:
-                print(f"DEBUG: Abstract map file not found: {abstract_map_file}")
 
             # Load name and subject map data
             name_and_subject_map_file = os.path.join(
@@ -239,18 +244,6 @@ class SentenceTransformerService:
                     f"Loaded name and subject map data: {len(self.df_name_and_subject_map_data)} entries"
                 )
 
-            # Load sub subject and name map data
-            sub_subject_and_name_map_file = os.path.join(
-                DATA_DIR, "subSubjectAndNameMapData.csv"
-            )
-            if os.path.exists(sub_subject_and_name_map_file):
-                self.df_sub_subject_and_name_map_data = pd.read_csv(
-                    sub_subject_and_name_map_file
-                )
-                print(
-                    f"Loaded sub subject and name map data: {len(self.df_sub_subject_and_name_map_data)} entries"
-                )
-
         except Exception as e:
             print(f"Error loading map data: {e}")