Hi, I have about 1000 datasets that I want to enter the Rapid Miner software once because it is diff

monimoni Member Posts: 18 Contributor II
edited June 2020 in Help
Hi, I have about 1000 datasets that I want to enter the Rapid Miner software once because it is difficult to enter two by one, can anyone help ??



Answers

  • hughesfleming68hughesfleming68 Member Posts: 323 Unicorn
    Loop files is what you are looking for. Inside you would put a read csv. Depending on your license, you could easily hit a limit.
  • monimoni Member Posts: 18 Contributor II
    They are full of answers
    Can you help me by sending me an instructional video?
  • lionelderkrikorlionelderkrikor Moderator, RapidMiner Certified Analyst, Member Posts: 1,195 Unicorn
    Hi @moni,

    As mentioned by @hughesfleming68, you have to implement a Read CSV operator inside a Loop Files operator.
    Set the path where your files are stored in the parameters of the Loop Files operator.
    If you want to store all your files as example sets in your repository, use a Store operator. 
    In the parameters of Store operator, set the repository and give the name %{file_name} to the example set. 
    In attached file, a general process to perform what you want to do.

    Hope this helps,

    Regards,

    Lionel
  • monimoni Member Posts: 18 Contributor II

    @lionelderkrikor

    tankyou for nswer me
    i want append all dataset to one dataset but have this error wich send you by imge and  don't want a column to be deleted
  • hughesfleming68hughesfleming68 Member Posts: 323 Unicorn
    edited June 2020
    What do you expect your final table to look like? Is it one huge table or are you trying to do something else? Can you take three of your 1000 files give an example of what order you need the data?
  • monimoni Member Posts: 18 Contributor II
    hughesfleming68 I have 600 data sets that are of the txt type. I want these 600 data to become a dataset in the event, and when I insert them as input in the repository, the output can be as shown below....All 600 dataset is converted into a  file txt  that when I call, a table of 600 is shown to me as shown below.

  • sara20sara20 Member Posts: 110 Unicorn
    @moni

    سلام. وقت بخیر
    اگر اشتباه نکنم شما 600 ستون در فایل خود دارید که در حقیقت همان تعداد ویژگی های شما است. درست عرض کردم؟
    حالا با توجه به این دیتا هدف شما پیاده سازی چه فرایندی است؟

    سارا
  • monimoni Member Posts: 18 Contributor II
    sara20 
    سلام وقت شما هم بخیر من 600 تا دیتاست دارم هر کدوم از دیتا ست های من  یک فایل متنی می باشد من میخوام این 600 تا دیتا ست تبدیل به 
      یک دیتاست بشوند  من دیتا ست رو ارسال می کنم ببیند  هر دیتا ست رو که با باز می کنید ستون های مانند دیتاست های مابقی را دارد ولی رکوردها متفاوت هستند میخوام به جای کار روی 600 تا دیتا ست روی 1 دیتاست کار کنم چون همنطور که عرض شد ستون همه دیتاست ها مانند هم هستند فقط رکورد ها دارای فلید های مختلف هست.
     
  • monimoni Member Posts: 18 Contributor II
  • sara20sara20 Member Posts: 110 Unicorn
    edited June 2020
    سلام
    جواب لیونل درست هست اگر نتوانستید با آن کار کنید بنظرم با پایتون میتوانید کدی بنویسید و کل فایل های خود را یکسان کنید سپس طبق فایل مورد نظر پیاده سازی انجام دهید
    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop.html#:~:text=Inside%20the%20Loop%20operator%2C%20nothing,the%20results%20of%20each%20iteration.

    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop_examples.html


    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop_attributes.html

    https://docs.rapidminer.com/latest/studio/operators/utility/process_control/loops/loop_values.html

    در رابطه با اوپراتور لوپ هم لینک های فوق میتوانند به شما اطلاعات بیشتری بدهند

    موفق باشید
    سارا
  • monimoni Member Posts: 18 Contributor II
    sara20 
    آیا کد پایتون را برایم میفرستید؟ که برای کل فایل رو یکسان کنم؟

  • sara20sara20 Member Posts: 110 Unicorn
    متاسفانه من تا حالا کدش ننوشتم ولی از بین دوستان دیدم افرادی که با پایتون کد میزنن و فایلها را حتی از سایت های مختلف فراخوانی میکنند و نتایجش با سیستم تجمیع میکنند و معمولا برای این کار باید اسکرپر بنویسید اگر تو نت سرچ کنید کداش مییتونید پیدا کنید
  • monimoni Member Posts: 18 Contributor II
    @sara20
    مواردی که ارسال کردید همگی مربوط به جدا کردن سطر یا ستون از یک دیتاست هستند و سوال من پاسخ داده نشده است در واقعه من چندتا فایل دیتاست دارم  می خواهم یکی شوند و فایل ها رو خدمتون ارسال کردم 
  • sara20sara20 Member Posts: 110 Unicorn
    در این زمینه متاسفانه اطلاعات بیشتری ندارم. اما باز هم در انجمن سرچ کنید شاید مطلب بهتری پیدا کنید
    با احترام 
    سارا
  • monimoni Member Posts: 18 Contributor II

    I need your help to how append file convert to one file Using loop file?
    test.rar 121.5K
  • monimoni Member Posts: 18 Contributor II
    @sara20
    سلام شما به من کمک می کنید؟
    من هنوز مشکلم حل نشد می توانید رو سیستم خودتون امتحان کنید به احتمال زیاد می تونید کمک کنید یه نمونه کوچک را خدمتون ارسال کردم
    تشکر
    test.rar 121.5K
Sign In or Register to comment.